概念Language-Selective Dimensions
语言选择性维度
预训练语音基础模型内部表示中对不同语言语音特征表现差异化激活的特定维度,在大规模多语言预训练中自发形成
时间轴 (近 90 天)
10月14日
通过线性探测或简单分类器即可在语言选择性维度上读出每一帧的语言归属,无需额外标注数据或大规模微调。
待验证50%
预训练语音基础模型内部表示中对不同语言语音特征表现差异化激活的特定维度,在大规模多语言预训练中自发形成
通过线性探测或简单分类器即可在语言选择性维度上读出每一帧的语言归属,无需额外标注数据或大规模微调。