待验证50% 置信事实精确时间
递归字符文本分割器通过尝试在自然边界(段落、句子)处切分来平衡文档片段过长超出上下文窗口与过短丢失语义的矛盾
1
来源数
50%
置信度
长期有效
时效性
2026/10/6
首次发现
来源
涉及实体
相关事实
待验证固定字数切分可能在句子中间硬截断破坏语义,常引入重叠机制(如每段500字相邻段重叠100字)以保留跨片段信息76% 相似待验证文本分块策略包括固定字符长度分块、语义分块、递归分块以及小到大检索(Small-to-Big)等策略75% 相似待验证该解析器通过追踪字体大小还原Markdown标题层级,使LangChain文本分割器能按语义边界进行切割75% 相似待验证递归字符分块是LangChain的默认方案,会依次尝试按段落、句子、词语等层级边界切分以优先保留语义完整性74% 相似待验证语义切割通常借助embedding模型或专用文本分割模型,将文本映射到向量空间后识别语义边界,当相邻句子向量相似度明显下降时视为语义断点74% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/981064API
curl https://kongchang.com/api/v1/knowledge/claims/981064MCP
get_claim(id=981064)