RAG 按固定长度切分后,最后一个块不足设定长度时怎样处理?

未标记

Sorry o(╥﹏╥)o,暂无参考答案。带这道题,问问AI吧~

问 AI
本题目录

相关面经

1 篇

字节跳动

Agent 开发
校招秋招二面
查看原面经 →
2.3 如果一段内容有 1,000 个 token,chunk size 为 400,最后剩余的 200 如何处理?是否会向前补充内容,凑成 400?
2.4 大部分 chunk 是否已经接近设定大小,实际很少触发向前补充上下文的逻辑?

相关题目

4 题