RAG Chunk 大小与重叠计算器本地处理 · 0 次网络请求

RAG Chunk 计算怎么用？

填文档总 token（用 上下文计算器 估算）、目标块数、期望重叠比例：

• 推荐窗口大小：每块的 token 数（含 overlap）
• 有效单块 token：实际不重复的部分
• overlap tokens：相邻块之间重复的部分

常见推荐：长文档 500-1000 token + 10-20% overlap；代码块 300 token + 5% overlap。

相关工具：RAG 文本分块AI 上下文窗口