返回全部题目← 上一题100 / 195下一题 →题库/模型训练与对齐/Q-3717DeepSeek R1 的训练过程有哪些关键步骤?知识专题:强化学习与奖励题目类型:原理机制技术难度:进阶题集来源:4 个未标记未标记待复习已掌握收藏反馈(在 GitHub 新标签页打开)Sorry o(╥﹏╥)o,暂无参考答案。带这道题,问问AI吧~问 AIKimiKimi(新窗口打开)Qwen千问(新窗口打开)OpenAIChatGPT(新窗口打开)本题目录收录题集相关题目收录题集4 个来源,共6 份题集SOTA模型分析Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →DeepSeek-R1 为什么要经历 R1-Zero、冷启动和多阶段 RL?大语言模型Datawhale · daily-interview · 1 条原题查看题集 →DeepSeek-R1 (简称 R1)与 DeepSeek-R1-Zero(简称 R1-Zero)的训练过程有什么区别,各自有什么优缺点?既然 R1-Zero 生成的推理过程可读性差,在非推理任务上的表现也不如 R1,那么 R1-Zero 存在的价值是什么? R1 训练过程是如何解决 R1-Zero 的上述问题的?八股集锦(高频问题)小熊饼干_ · 个人整理 · 2 条原题查看题集 →DeepSeek热门版本训练的关键步骤Deepseek R1 训练关键步骤公司案例问答汇编阿东玩 AI · AgentGuide · 1 条原题查看题集 →八股:常用的LLM,讲解DeepSeek R1的训练流程和基本原理SFT与指令微调阿东玩 AI · AgentGuide · 2 条原题查看题集 →SFT冷启动 R1在SFT时冷启动的目的是什么?R1在SFT时冷启动的目的是什么?后训练阶段 Qwen3后训练有哪些阶段?R1的训练阶段。R1的训练阶段。展开剩余 1 份题集强化学习与对齐阿东玩 AI · AgentGuide · 2 条原题查看题集 →【DeepSeek-R1】了解DeepSeek-R1吗?请介绍其训练阶段。 「字节跳动、蚂蚁集团」【R1参考模型选择】R1流程里为什么在冷启动+RL后得到那个80W数据集后重头用V3做reference model,而不是冷启动+RL后的model? 「美团」相关题目4 题0086如何判断强化学习带来的实际收益?同一知识专题题目类型:项目深挖技术难度:进阶相关面经:2 篇0103强化学习包含哪些主要组件?同一知识专题题目类型:概念解释技术难度:基础相关面经:3 篇0104GRPO 算法如何工作?同一知识专题题目类型:原理机制技术难度:进阶相关面经:14 篇0105On-policy 和 Off-policy 有什么区别?同一知识专题题目类型:比较选型技术难度:进阶相关面经:2 篇♥♥♥♥♥← 上一题已到最后一题← 上一题GSPO 的核心机制是什么,与 GRPO 有什么关系?下一题 →GAE 优势函数如何计算,关键参数有什么作用?