返回全部题目← 上一题15 / 71下一题 →题库/模型基础与推理/Q-3656Self-Attention 的时间复杂度是多少，如何推导？知识专题：Transformer 与注意力题目类型：原理机制技术难度：进阶相关面经：1 篇题集来源：3 个未标记未标记待复习已掌握收藏反馈（在 GitHub 新标签页打开）Sorry o(╥﹏╥)o，暂无参考答案。带这道题，问问AI吧~问 AIKimiKimi（新窗口打开）Qwen千问（新窗口打开）OpenAIChatGPT（新窗口打开）本题目录相关面经收录题集相关题目相关面经1 篇阿里巴巴大模型算法工程师2026-07-17查看原面经 →Attention计算时间复杂度收录题集3 个来源，共6 份题集八股集锦（高频问题）小熊饼干_ · 个人整理 · 1 条原题查看题集 →自注意力的计算方式和复杂度？算法岗专项面试题阿东玩 AI · AgentGuide · 1 条原题查看题集 →推导 Attention 机制的计算复杂度公司案例问答汇编阿东玩 AI · AgentGuide · 3 条原题查看题集 →介绍下self-attention,计算其时间复杂度推导多头注意力的时间/空间复杂度推导多头注意力计算复杂度深度学习基础汇编阿东玩 AI · AgentGuide · 7 条原题查看题集 →【Attention复杂度】Attention的时间和空间复杂度是多少？为什么随着序列变长耗时增加很快？MHA的时间复杂度是多少？ 「字节Seed、字节跳动、腾讯」【注意力与MLP计算量比较】相较于MLP、注意力的计算量如何 「百度」【注意力复杂度】自注意力机制的计算复杂度是多少？请给出其公式并说明复杂度。 「字节跳动」展开其余 4 条原题MHA复杂度与Tokenization推导多头注意力的时间/空间复杂度。【Transformer参数与计算量】Transformer中参数都分布在哪里，参数量最大的是哪部分？计算量最大的是哪部分，为什么？ 「美团」【时间复杂度分析】Transformer的计算复杂度是多少？为什么对于序列长度是O(n^2)，对hidden dim是O(d)？主要在哪一步？ 「京东、腾讯」Transformer复杂度与加速：Transformer自注意力过程计算复杂度？时间复杂度和空间复杂度。京东高频面试题Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →attention常规八股时间复杂度展开剩余 1 份题集平安科技高频面试题Rocky Ding · AIGC-Interview-Book · 1 条原题查看题集 →Attention的复杂度是多少?相关题目4 题0036Transformer 中的 Attention 如何计算？同一知识专题题目类型：原理机制技术难度：进阶相关面经：20 篇0268Self-Attention 为何利于并行训练，与 RNN 相比有哪些局限？同一知识专题题目类型：比较选型技术难度：进阶相关面经：2 篇0572Self-Attention 为什么需要 Scaling？同一知识专题题目类型：原理机制技术难度：进阶相关面经：3 篇0575手写 Multi-Head Attention。同一知识专题题目类型：代码题技术难度：进阶相关面经：6 篇♥♥♥♥♥← 上一题已到最后一题← 上一题Attention 为什么除以根号 d_k，不这样缩放还有什么替代方案？下一题 →GQA 的原理是什么，如何在效果、速度和显存之间折中？
