模型
LLaMA-Omni
一种端到端语音语言模型架构,通过语音编码器、语音适配器和语音解码器将预训练语言模型扩展为语音交互模型,省去ASR→LLM→TTS级联,降低延迟并保留副语言信息
时间轴 (近 90 天)
10月28日
该模型以 LLaMA-Omni 为基础架构,采用端到端语音交互设计,避免了传统级联式方案中 ASR→LLM→TTS 的多级串联。
待验证50%
一种端到端语音语言模型架构,通过语音编码器、语音适配器和语音解码器将预训练语言模型扩展为语音交互模型,省去ASR→LLM→TTS级联,降低延迟并保留副语言信息
该模型以 LLaMA-Omni 为基础架构,采用端到端语音交互设计,避免了传统级联式方案中 ASR→LLM→TTS 的多级串联。