概念Text Canonicalization / 文本标准化
文本规范化
将自然语言文本中语义相似但表述不同的内容映射到统一标准形式的技术,常用于消除数据碎片化、提升统计聚合准确性,常见方法包括Jaccard相似度等token匹配算法
时间轴 (近 90 天)
10月12日
书面语与口语的差异在语音合成领域被称为「文本规范化」(Text Normalization)问题。
待验证50%
将自然语言文本中语义相似但表述不同的内容映射到统一标准形式的技术,常用于消除数据碎片化、提升统计聚合准确性,常见方法包括Jaccard相似度等token匹配算法
书面语与口语的差异在语音合成领域被称为「文本规范化」(Text Normalization)问题。