返回全部题目← 上一题1 / 33下一题 →题库/模型训练与对齐/Q-0273SFT 与偏好数据如何构建，如何控制数据污染和分布偏移？知识专题：偏好对齐题目类型：方案设计技术难度：进阶相关面经：1 篇题集来源：1 个未标记未标记待复习已掌握收藏反馈（在 GitHub 新标签页打开）Sorry o(╥﹏╥)o，暂无参考答案。带这道题，问问AI吧~问 AIKimiKimi（新窗口打开）Qwen千问（新窗口打开）OpenAIChatGPT（新窗口打开）本题目录相关面经收录题集相关题目相关面经1 篇百度大模型算法工程师2026-07-16一面查看原面经 →SFT 数据和偏好数据应该如何构建？怎样控制数据污染与分布偏移？收录题集1 个来源，共8 份题集公司案例问答汇编阿东玩 AI · AgentGuide · 3 条原题查看题集 →DPO相比 SFT,有哪些优劣?你怎么构造偏好对?构造逻辑是自动的还是人工?项目:SFT+DPO训练怎么组织这部分数据的?是自己构造还是用公开数据?项目:SFT使用的数据可能和原始模型预训练时的数据分布有较大区别,怎么解决?数据与评测面试指南阿东玩 AI · AgentGuide · 1 条原题查看题集 →如何做去重和防污染？图像生成面试指南阿东玩 AI · AgentGuide · 1 条原题查看题集 →数据去重太强会不会损害长尾概念学习？STAR 项目表达专题问答阿东玩 AI · AgentGuide · 1 条原题查看题集 →你说提升了 X%，怎么确定不是数据泄漏？数据合成与流水线进阶追问阿东玩 AI · AgentGuide · 2 条原题查看题集 →合成数据的 mode collapse（模式塌缩）怎么检测和防止？去污染除了 n-gram 重叠检测，还有什么方法？展开剩余 3 份题集SFT与指令微调阿东玩 AI · AgentGuide · 2 条原题查看题集 →【SFT+DPO数据组织】SFT+DPO训练怎么组织这部分数据的？ 「美团」【SFT数据业务适配与去重】SFT数据如何更贴近业务：如何避免过度模板化？如何做基础的train/test去重来避免评测失真？ 「拼多多」多模态与计算机视觉阿东玩 AI · AgentGuide · 2 条原题查看题集 →【MLLM安全对齐】MLLM 做安全对齐你会如何做数据(筛选、过滤、去重、去除简单的数据)？ 「蚂蚁集团」【多模态DPO训练】多模态的DPO的训练是如何做的？如何构造数据？ 「百度」理论基础面试题阿东玩 AI · AgentGuide · 1 条原题查看题集 →SFT+DPO训练怎么组织这部分数据的？是自己构造还是用公开数据？相关题目4 题0275如何从 KL 约束的强化学习目标推导 DPO 目标？同一知识专题题目类型：原理机制技术难度：深入相关面经：1 篇0604DPO 中好坏样例生成概率都下降的问题如何理解？同一知识专题题目类型：原理机制技术难度：进阶相关面经：1 篇0605DPOP 的全称是什么？同一知识专题题目类型：原理机制技术难度：进阶相关面经：1 篇0737DPO 是否需要额外加入 KL 约束？同一知识专题题目类型：原理机制技术难度：进阶相关面经：1 篇♥♥♥♥♥← 上一题已到最后一题← 上一题下一题 →如何从 KL 约束的强化学习目标推导 DPO 目标？
