为你的 LLM 应用选择分块策略：一种决策树方法

本文介绍了一种基于文档属性和检索任务的六问决策树方法，用于选择适合的分块策略。不同策略假设文档结构不同，例如语义分块依赖句子间的嵌入距离检测主题变化，而基于文档的分块则利用标题、段落等自然结构。若文档整体在模型上下文窗口内且不涉及多主题，可直接整体嵌入而不分块。