如何准备 Agent 评测数据,组织人工标注与自动评测?

未标记

Sorry o(╥﹏╥)o,暂无参考答案。带这道题,问问AI吧~

问 AI
本题目录

相关面经

3 篇

阿里巴巴

AI 应用开发工程师
秋招二面
查看原面经 →
如何自动化评估 Agent 是否完整、正确地完成任务?

Shopee

AI产品经理
实习一面
查看原面经 →
追问
如果需要构建一个Agent评测体系,你认为评测数据应该如何准备?人工标注和自动评测分别怎么做?

字节跳动

AI FDE 工程师
社招一面、二面、三面
查看原面经 →
第3点我说了智能体上架的流程每次都重复单一,可以作为切入点,面试官询问:怎么设计这个智能体?需要有哪些skill和tool,共享一下屏幕写一下提示词,这个智能体验收的标准是什么?哪些步骤需要人工来复核?通过率和不通过率测试集怎么构建?

相关题目

4 题