概念关键词错误率
KER
关键词错误率(Keyword Error Rate),以关键词出现为独立评测单元、仅在整短语完全正确时计为保留的ASR评测指标,用于量化整短语保留能力
时间轴 (近 90 天)
11月10日
KeyASRBench提出基于出现次数的关键词错误率(KER),在冻结的整短语标注上计算,将每个关键词出现视为独立评测单元,只有整短语完全正确才计为保留。
待验证50%
11月10日
在KeyASRBench评测中,语言特定的MER/WER区间为5.31%至12.91%,而同一批系统的KER区间为13.61%至33.81%。
待验证50%
11月10日
在30分钟控制集上,KeyASRBench的KER区间为10.65%至27.31%,低于挑战集但绝对值仍显著,证明关键词错误普遍存在于真实转写中。
待验证50%
11月10日
KeyASRBench目前覆盖中英双语和固定关键词集,控制集规模为30分钟,其价值在于提出可复现的KER框架,而非给出行业普适阈值。
待验证50%
全部知识事实 (4)
待验证
KeyASRBench提出基于出现次数的关键词错误率(KER),在冻结的整短语标注上计算,将每个关键词出现视为独立评测单元,只有整短语完全正确才计为保留。
50%待验证在KeyASRBench评测中,语言特定的MER/WER区间为5.31%至12.91%,而同一批系统的KER区间为13.61%至33.81%。
50%待验证在30分钟控制集上,KeyASRBench的KER区间为10.65%至27.31%,低于挑战集但绝对值仍显著,证明关键词错误普遍存在于真实转写中。
50%待验证KeyASRBench目前覆盖中英双语和固定关键词集,控制集规模为30分钟,其价值在于提出可复现的KER框架,而非给出行业普适阈值。
50%