RAG Chunking Simulator & Visualizer
一款免费的浏览器端RAG文本分块模拟与可视化工具,支持多种分块策略对比、参数调整、边界可视化、诊断统计和父子分块模拟,所有文本处理在本地完成
时间轴 (近 90 天)
RAG Chunking Simulator & Visualizer 是一个免费的浏览器工具,所有文本处理在浏览器本地完成,不会发送到API。
该工具支持八种分块策略:固定大小、递归字符、句子感知、段落感知、Markdown感知、基于标题、基于正则、基于词数。
工具可以同时勾选多个分块策略进行对比,基准表格显示每种策略的块数、平均大小、大小方差、重叠字符和预估成本。
工具提供源边界图,用交替颜色标记奇偶块,单独高亮共享重叠区域,支持逐块查看、迷你地图跳转和块预览检查器。
工具提供块大小分布与诊断面板,包含6桶直方图、微小块(阈值可配置)、超大块、边界警报和近似重复的数量统计,但这些只是复查提示,不是经过验证的质量评分。
工具可以生成LangChain(Python)或LlamaIndex(Python)的框架配置代码,并支持导出JSON、JSONL、CSV或TXT格式的分块数据。
工具导出的偏移量是JavaScript的UTF-16代码单元,不是UTF-8字节偏移,需要字节偏移的流水线需进行转换。
全部知识事实 (7)
RAG Chunking Simulator & Visualizer 是一个免费的浏览器工具,所有文本处理在浏览器本地完成,不会发送到API。
50%待验证该工具支持八种分块策略:固定大小、递归字符、句子感知、段落感知、Markdown感知、基于标题、基于正则、基于词数。
50%待验证工具可以同时勾选多个分块策略进行对比,基准表格显示每种策略的块数、平均大小、大小方差、重叠字符和预估成本。
50%待验证工具提供源边界图,用交替颜色标记奇偶块,单独高亮共享重叠区域,支持逐块查看、迷你地图跳转和块预览检查器。
50%待验证工具提供块大小分布与诊断面板,包含6桶直方图、微小块(阈值可配置)、超大块、边界警报和近似重复的数量统计,但这些只是复查提示,不是经过验证的质量评分。
50%待验证工具可以生成LangChain(Python)或LlamaIndex(Python)的框架配置代码,并支持导出JSON、JSONL、CSV或TXT格式的分块数据。
50%待验证工具导出的偏移量是JavaScript的UTF-16代码单元,不是UTF-8字节偏移,需要字节偏移的流水线需进行转换。
50%