返回全部题目← 上一题53 / 94下一题 →题库/模型训练与对齐/Q-4635因果语言建模与掩码语言建模有什么区别？知识专题：预训练、续训与 SFT题目类型：比较选型技术难度：基础题集来源：4 个未标记未标记待复习已掌握收藏反馈（在 GitHub 新标签页打开）Sorry o(╥﹏╥)o，暂无参考答案。带这道题，问问AI吧~问 AIKimiKimi（新窗口打开）Qwen千问（新窗口打开）OpenAIChatGPT（新窗口打开）本题目录收录题集相关题目收录题集4 个来源，共4 份题集大模型基础面试题阿东玩 AI · AgentGuide · 1 条原题查看题集 →CLM和MLM分别是什么，有什么区别？大模型基础AMIT SHEKHAR · ai-engineering-interview-questions · 1 条原题查看题集 →Explain the difference between autoregressive and masked language modeling.预训练：训练与数据处理Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →因果语言建模（CLM）、掩码语言建模（MLM）、前缀语言建模（PrefixLM）、UL2 和中间填充（FIM）的目标函数有什么区别？模型架构与注意力Firefly · llm_interview_note · 1 条原题查看题集 →引申一个关于bert问题，bert的mask为何不学习transformer在attention处进行屏蔽score的技巧？相关题目4 题0083如何提升 Agent 的长程任务能力？同一知识专题题目类型：方案设计技术难度：进阶相关面经：2 篇0085当 pass@k 与 pass@1 的差距收敛后，如何继续提升模型能力？同一知识专题题目类型：方案设计技术难度：深入相关面经：1 篇0207基座已有工具调用能力时，Tool-use SFT 的训练目标是什么？同一知识专题题目类型：原理机制技术难度：进阶相关面经：2 篇0495你有哪些大模型后训练经验？同一知识专题题目类型：项目深挖技术难度：进阶相关面经：2 篇♥♥♥♥♥← 上一题已到最后一题← 上一题大语言模型预训练通常使用什么预测目标，它如何形成训练信号？下一题 →大模型预训练中的 Scaling Law 是什么，对资源配置有什么指导意义？
