核心工作有哪些产出,如何验证,回头看还有什么可改进?
未标记
考查重点:工作产出、验证与复盘。挑主要交付说明实现了什么,用测试或用户任务验证,再复盘一个仍存在的问题与下一步改动
本题目录
参考答案
回答思路
挑两三项主要交付,说明它们让使用者能完成什么任务,再讲什么结果才算成功、怎样与原方案或人工结果比较。复盘时选一个仍有影响的问题,说明下一步具体改哪一处,以及怎样确认改动有效。
下面沿用四个假设的行业案例,业务交付与验证均为设计示例,未包含已完成的实验或上线成绩。
门店经营分析助手Python
核心回答示例
核心产出是门店指标定义与字段映射、面向
SQL生成的上下文适配,以及能解释统计口径的查询结果。它们基于电商问数底座展开,重点是让运营问的“本月净销售额”真正对应到业务认可的计算方式。验证时,我会固定数据和问题,用人工
SQL作对照,同时检查指标、门店、日期和退款条件。例如本例把净销售额定义为本期实收减本期实际退款,退款按发生时间归属,就要放入上月成交、本月退款和部分退款的数据。成功意味着条件与结果都符合定义,不能只看SQL执行成功。回头看,业务用例能发现口径错误,执行链还需要补一道检查:当前底座纠错后直接执行,未再次校验。下一步优先让纠错结果回到校验,并设置有限重试和失败出口;用“纠错后仍无效”的
SQL检查它是否会停止执行。
交付怎样验收
指标配置的验收,是同一指标的不同说法能对应同一口径,不同指标又不会被合并。上下文适配的验收,是退款金额、退款日期、门店条件及关联所需字段都能进入生成输入。最终查询的验收,则是 SQL 的业务含义与计算结果均正确。
对照用例要让错误有机会显现:只有当月成交、没有退款的数据,区分不了退款归属。加入跨月与部分退款,再分别问“销售总额”“本月净销售额”和“本月成交订单最终净额”,才能检查模型是否把不同口径混用。多种 SQL 可以等价,不按字符串判错;单份数据上碰巧结果相同,也不能证明日期与关联条件正确。
比较改动前后时,沿用相同数据、模型配置和问题,保留失败类型;关键问题重复运行,避免把一次偶然答对当成稳定改进。允许查询的门店另由执行层约束,越界请求单独判定。后续增加的纠错复验只解决部分执行错误,经营口径仍要靠上述业务对照验证。
设备售后知识助手Java
核心回答示例
核心交付是设备与手册匹配模块、各召回通道的范围适配,以及有适用出处的故障答复。
Ragent提供通用检索和生成,业务模块把型号、固件版本与手册生效范围变成允许使用的资料,并输出缺少哪些设备信息。我会把成功分成三种情况:条件和证据完整时,给出受手册支持的答复;型号或版本不明确时,补问具体条件;没有适用资料时,返回缺口。验证用同一故障换型号、同一型号换版本的成组问题,分别检查范围是否正确、关键片段是否召回、建议是否由片段支持。
回头看,静态问题即使通过也不够,手册更新可能让设备映射过期。下一步增加资料变更后的影响检查:新手册适用哪些设备、哪些旧关系需要保留,再回放受影响的问题,确认新版本生效的同时,仍使用旧版本的设备没有被误切换。
分清“没有错引”和“能够回答”
先固定设备档案与手册,为问题标出适用文档和必要片段。范围检查要覆盖每路召回及补充检索,不能只看最终引用。Ragent 的通用作用域按意图选择知识库,不等于设备范围;设备文档限制需要另行接入真实召回通道,接口中存在过滤字段也不代表已经执行了过滤。
再区分两类无答案:确实没有适用资料,返回缺口是正确行为;手册中明明有处理步骤,却没有召回或被模型拒答,则是失败。否则,只要全部拒答就能获得“没有错误引用”的表面结果。
比较业务适配前后时,使用同一批手册和问题,分别看不适用资料混入、关键证据遗漏、无依据建议与错误补问。设备范围和片段 ID 可以用规则核对,维修建议是否完整受原文支持,则按明确标准审阅。这样既能发现错误版本,也能防止收窄范围后把本来可答的问题一并挡住。
产业情报研读平台Python
核心回答示例
核心产出是一份能逐条复核的研究初稿,以及支撑它的证据记录和材料更新清单。基于深度研搜的来源助手与报告生成,我重点设计来源去重、事实时间和结论关联,让研究人员知道哪些判断有依据、哪些地方仍有分歧。
验证会固定研究主题、截止日期和材料,先列关键子问题,再检查结论是否由原文支持、时间是否一致、冲突是否保留。例如“发布样机”“计划交付”和“已经交付”应分别判断,增加几篇转载也不应增加独立佐证。报告更长、来源更多,都不直接算质量提升。
回头看,内容可复核之外,长任务的连续性还有缺口。当前底座使用内存检查点,报告落盘不代表服务重启后还能继续。下一步补持久化与恢复逻辑,在任务中途重启服务,检查能否从正确状态继续,并避免把同一份来源或报告重复处理。
按结论验收,而不是只验报告文件
这里的业务交付需要先扩展来源适配。当前底座的 RAGFlow 工具只返回回答文本,没有把结构化来源、原文位置等字段一起交给主智能体;证据模块要取得这些信息后才能建立可核对的关联,不能从一段摘要反推出出处。
验收材料可以包含原始发布、重复转载、不同时间的产品进展和相互冲突的说法。先检查关键子问题是否覆盖,再逐条判断重要结论是否超出证据;引用存在但只支持半句话,同样需要修正。开放性判断可以用大模型辅助筛出可疑项,关键结论和评分标准仍需与研究人员的判断核对。
随后只替换一份材料,检查更新清单能否标出应复核的结论和段落,摘要中引用同一结论的位置也应覆盖。既不能漏掉受影响内容,也不应把无关段落全部重写。比较前后版本时使用相同材料快照,将缺失、时间混淆、重复佐证和无依据推断分别记录;文件导出成功与内容验收分别判断。
设备售后知识助手RAGFlow 集成
核心回答示例
核心交付是外部
Python设备资料适配服务:把型号和版本映射成RAGFlow的检索范围,核对返回片段,再组织有出处的答复。平台的文档解析和检索继续复用,业务增量是设备规则、请求分支和资料更新后的映射维护。验证会同时看答复和平台调用。没有适用手册时,应在业务服务返回资料缺口,不发检索请求;有适用手册但没有故障证据时,保持原范围返回缺口;证据充分时,答复与引用都应来自允许文档。型号或版本缺失则补问,不能用其他设备的高相似片段顶上。
回头看,单次查询正确还不够,新手册入库后,映射与索引可能尚未同步。下一步把更新拆成可检查的步骤:确认新资料可检索,回放受影响设备的问题,再切换适用映射;失败时保留可恢复的上一版关系,并单独核对旧设备仍需使用的手册。
用请求分支检验集成产出
本例采用 RAGFlow v0.27.2 的片段检索接口 POST /api/v1/retrieval,通过 dataset_ids 与 document_ids 传入范围。该版本在没有额外元数据过滤且文档列表为空时,会失去这层文档限制,因此空匹配的成功判据是不发检索请求。这不是平台聊天接口的参数约定。
对非空匹配,检查请求文档是否符合设备规则,返回片段的 document_id 是否仍在允许集合内,再判断片段能否支持维修建议。对空匹配,可在同一知识库预先放入其他型号的高相似手册,确认业务服务仍停止,而不是因为容易检索到内容就放宽范围。再加入资料存在但证据不足、版本冲突及平台返回来源不符的情况,检查是否补问、保留缺口或拦住不适用片段。
评估时将可回答、应补问和无适用资料分别判定,防止全部拒答掩盖集成问题。手册更新前后沿用同一批设备与故障问题,检查应变化的资料范围确实变化,不应变化的旧设备答复仍有依据;再看一次更新需要维护哪些映射、失败后能否恢复,才能判断这项交付是否便于持续使用。
对应教程
- 电商问数第 12 章:召回信息合并与上下文构建:对照指标、字段与取值如何进入生成输入,确定上下文适配的验收点。
- 电商问数第 14 章:SQL 生成与执行闭环:区分数据库解析检查与业务口径验证,并说明纠错后复验这一改进方向。
- 深度研搜第 12 章:RAGFlow 子智能体与知识库准备:对照知识库工具的回答输出,说明证据交付为什么需要扩展来源信息。
- 深度研搜第 13 章:主智能体搭建与异步执行:区分来源助手、报告文件与内存检查点,展开内容验收和任务恢复各自的改进。
参考资料
- 国内:JavaGuide:后端项目面试怎么讲?:借鉴从具体工作讲到验证结果和遗留问题的组织方式,将四版回答落到交付、验收与下一项改动。
- 国内:JavaGuide:Agent 项目面试怎么讲?:依据成功标准、任务结果与执行过程的区分,说明为什么业务结果和调用过程需要分别检查,比较时要固定问题、版本与判定口径。
- 国内:程序员马丁:RAG 系统怎么进行评测?:借鉴检索证据与答案内容分开评价、同时检查误拒和无依据回答的思路,组织两个设备案例的分层验收;底座作用域与设备范围的区别另对照固定版本作用域及向量通道。
- 国内:Datawhale:智能体性能评估:采用按任务选择判定方法,并将准确性与故障恢复分开考查的思路,避免用报告导出或单次成功代替整体任务质量。
- 国外:Anthropic:Demystifying evals for AI agents:依据研究任务的结论支持、关键信息覆盖和人工校准方法,设计研读报告的验收;借鉴正反用例都要覆盖的原则,避免以全部拒答换取表面正确。
- 国外:LangChain:LangGraph Persistence:依据内存检查点在进程重启后丢失的说明,将持久化与中途重启恢复列为研读平台的下一步改进。
- 地区未明确:RAGFlow v0.27.2:HTTP API Reference:依据片段检索的文档范围和来源响应设计请求验收;空文档列表的具体行为另对照同版本处理器。
相关面经
45 篇启云方
AI 应用开发工程师介绍两段实习的主要工作内容和成果。
得物
golang开发觉得自己的产出是否合理
CVTE
你在该Agent构建过程中扮演什么角色,哪些是由你来完成的,效果怎么样?
水滴公司
AI 全栈工程师优化的具体是流程、还是用了什么技术手段?是编码层面还是技术方案选型层面?优化前是什么样,优化后达到了什么效果?
原力灵机
大模型算法岗如果继续优化会怎么做
展开剩余 40 篇面经
小红书
字节跳动
搜广推引擎架构\- 项目效果的提升具体做了哪些工作?
腾讯
后台开发lailai1437(作者):顺带一提hr面面试官居然也来拷打我的另一个项目,问我这个项目的各种实际测试数据,太阴了,感觉腾讯的hr面其实是hrbp啊
滴滴
AI Infra 算法岗你的调度方案相比原有方案,吞吐提升指标是多少?
智书企飞
AI 测试开发工程师实习经历中的亮点,以及工作中的优缺点
字节跳动、百度、腾讯、传音控股
那最终实现的功能是怎么样子的效果?
京东
后端开发如何去解决的?解决之后达到了什么样的效果?
华为
AI 开发工程师回看项目,哪里可以优化?
百度
Agent Harness 研发工程师字节跳动
后端开发工程师印象最深的是什么
快手
AI 全栈开发工程师(音视频)你的既有经历中是否包含音视频相关经验?
万仞
全栈开发工程师介绍一下你做过比较印象深刻的事情?
雪梨教育
AI 产品经理挑一个你觉得做得比较好、对你成长大的节点,讲讲当时是怎么做的。
美团
后端开发工程师挑选一个你觉得完成度高、有成就感的功能 / 模块,描述功能、设计思路、遇到的问题以及解决办法。
滴滴
数据开发工程师讲讲你的个人项目,做这个项目的初衷、背景,项目达成的效果,你的收获,遇到过哪些问题。
滴滴
数据开发工程师讲一下你在小米投入精力最多、最核心的工作内容,最后的产出是什么?
深信服
Agent 开发工程师在金蝶实习中,做的最核心、最有价值的一个工作是什么
虾皮
Agent 应用开发工程师介绍产出goal
顺丰
测试开发工程师做出什么成果,这些成果有判断标准吗?
阿里巴巴
Agent 基础设施工程师还有没有觉得做非常牛的地方?
阿里巴巴
Agent 算法工程师聊核心工作产出:做了什么,怎么做验证,回过头看主要可以改进的点是什么
哔哩哔哩(B站)
软件开发工程师(AI Coding)腾讯产出请讲解一下
MiniMax
平台开发工程师实习你觉得做的最好的最有设计的一个事情是什么?
阿里巴巴
Agent 开发工程师腾讯
后端开发工程师那你说优化,那你讲讲你这个项目现在一些可以优化的点吗?
腾讯
后端开发工程师这个项目你目前还在使用吗?在使用过程中你有没有发现一些错误?以及未来你有没有一些改进思路?
上海景行智合安全技术
Java 开发工程师用友的实习项目挑两个个人产出讲一讲
美图
大模型算法工程师介绍第一段实习,问有什么经验,有哪些失败的尝试
京东
后端开发工程师(智能运维)22 介绍实习产出
快手
客户端开发工程师讲一下你的搜索引擎项目用到了哪些技术?是纯语言项目吗?产出是什么?
快手
后端开发工程师如果重新做这个任务,你会如何优化流程?
字节跳动
AI 产品经理XX项目重来一次的话,你会做什么不同的事情?
阿里巴巴
AI 应用开发工程师如果再让你做一次,你会怎么提升
美团
后端开发工程师项目还有哪些可以优化的?
阿里巴巴
Agent 应用开发工程师2.1 现在复盘一下,有哪些可以优化改进的点
快手
前端开发工程师(AI / Agent)问我自研的项目进展,只说了产品方案😔没敢乱讲技术,因为没做多少
阿里巴巴
Agent 算法工程师如果你对这个流程进一步设计优化,你会怎么做
字节跳动
Agent 开发工程师对于实习项目中的实践有哪些可以缺陷和优化的点
公司未注明
Agent参与过的项目中,有没有你最想重构的部分?原因是什么?
字节跳动
AI 产品经理实习核心做的三件事和自己的贡献











