Block发布Dessa:纯语音训练的全双工语音模型

Block发布纯语音训练的全双工语音模型Dessa,可本地运行但细节未公开。
Block的AI实验室发布全双工语音到语音模型Dessa,其最大特点是训练数据仅来自人类对话音频,不使用文本转写或标注语料。全双工架构旨在解决传统语音助手轮流说话不自然的瓶颈,让机器在聆听的同时准备回应。纯语音训练理论上可保留语调、节奏、呼吸等副语言信息,但也带来语义理解与生成质量如何保证的疑问。报道称模型可在MacBook Pro M4 Max上本地运行,显示其推理效率经过优化,但Block未公布参数量、基准测试成绩,也未开放权重,外界难以对其技术路线做横向比较或验证。

Block的AI实验室近日发布了一款名为Dessa的全双工语音到语音模型。与当前主流语音模型普遍依赖文本数据或大规模多模态预训练不同,Dessa的训练数据只来自人类对话音频——没有文本转写,没有标注语料,纯粹从声音本身学习对话的动态。
这则消息来自MarkTechPost的报道,信息量克制但指向明确:一个在MacBook Pro M4 Max上本地运行的全双工语音模型,训练数据仅限语音。然而,Block并未公布模型参数量、基准测试成绩,也没有开放权重。这种"展示能力但不披露细节"的发布方式,本身就是一个值得解读的信号。
全双工为什么重要
语音交互的核心体验瓶颈,长期不在识别准确率,而在"轮流说话"的自然度。传统语音助手采用半双工架构:先听完、再处理、然后回答,用户必须等待系统完成一轮处理才能继续。这种模式在指令式场景下够用,但在真实对话中显得僵硬——人类对话存在大量重叠、插话、即时反馈("嗯""对""是吗"),半双工系统无法处理这些细粒度的交互节奏。
全双工模型试图同时处理输入和输出,让机器像人一样在聆听的同时准备回应,甚至可以在对方说话时给出简短的确认反馈。Dessa的定位正是这一方向,而它选择只用语音训练,意味着模型可能从声学信号中直接学到了轮次转换、停顿模式和情绪线索,而不依赖文本层面的语义标注。
半双工与全双工源自通信领域的双工概念:半双工指通信双方不能同时双向传输(如对讲机,一方说话时另一方只能收听),全双工则允许两端同时收发(如电话)。映射到语音交互上,半双工系统必须先完成一轮"听—理解—说"的串行流程,而全双工模型可并行维护输入与输出两个流。这一区别带来的工程难点在于回声消除与自我监听:模型必须区分"自己正在说的话"与"用户说的话",避免输出被自身输入流污染,同时要在数百毫秒级延迟内完成轮次判断,这也是全双工语音系统比传统级联管线更难的根源。
纯语音训练意味着什么
当前语音模型的常见做法是"语音识别+语言模型+语音合成"的拼接管线,或者用带文本标注的语音数据做多模态训练。文本在其中扮演语义锚点的角色,帮助模型理解内容。代价是模型对语音中非文本信息的敏感度被削弱——语调、节奏、呼吸、犹豫,这些在转写过程中往往被丢弃。
据MarkTechPost报道,Dessa的训练数据只有人类对话音频。这条路径的潜在优势在于保留完整的声学信息,让模型直接从对话音频中学习交互结构。难点同样明显:没有文本监督,模型如何建立语义理解?如何保证生成语音的内容质量?Block没有给出答案,也没有公布任何评测数据,这使得外界无法判断Dessa究竟在多大程度上解决了这些问题。
文本监督在语音模型中通常以两种形式出现:其一是自动语音识别(ASR)转写文本,作为语义对齐的目标;其二是以文本为条件的多模态预训练,让语音表征向语言模型空间靠拢。放弃文本监督意味着模型只能依靠声学信号自身的结构进行自监督学习,常见做法包括掩码预测、对比学习以及基于对话轮次的预测目标。这条路径在理论上可以保留副语言信息(如语调、语速、情绪),但也带来一个根本性挑战:语义的抽象与泛化往往依赖文本这一高密度符号系统,纯语音模型在词汇覆盖、长程语义一致性和内容可控性上需要额外的机制来弥补,而这类机制正是评估此类模型时最应被追问的部分。
本地运行的工程含义
报道提到Dessa可以在MacBook Pro M4 Max上本地运行。这是一个有分量的工程信号。全双工语音模型需要同时维护输入流和输出流的状态,对延迟和算力的要求高于单工模型。能在消费级笔记本芯片上跑起来,说明模型在推理效率上做了针对性优化,规模大概率控制在可本地部署的范围内。
但Block没有公布模型尺寸。本地可运行与模型大小之间存在多种可能的组合——可能是小参数量的高效架构,也可能是量化压缩后的中等规模模型。缺乏这些信息,外界无法评估其技术路线的可复制性,也无法与其他开源语音模型做横向比较。
消费级芯片本地运行语音模型涉及几个关键工程变量。MacBook Pro 的 M4 Max 采用统一内存架构,CPU 与 GPU 共享内存带宽,这对需要低延迟流式推理的语音模型较为友好。可本地部署通常意味着模型权重经过量化(如 4-bit 或 8-bit),并配合流式分块推理以控制首包延迟。全双工模型还需常驻维护两路音频流的状态缓存,内存占用随上下文长度增长,因此"能在笔记本上跑"实际上隐含了对模型规模、量化方案和状态管理策略的一整套约束,缺少这些参数时,单凭"可本地运行"难以推断其真实效率水平。
未披露的信息与开放性问题
这次发布最值得注意的地方,恰恰是Block选择不公开的部分。没有模型规模,没有基准测试,没有权重。对于一个声称在训练方法上有独特之处的模型来说,这留下了几个关键疑问:纯语音训练的效果是否经过系统验证?全双工的交互质量与传统方案相比处于什么水平?模型的能力边界在哪里?
从行业角度看,语音交互正在从"指令响应"走向"自然对话",全双工是必经之路。Block以纯语音训练切入这一方向,方法上有新意,但缺乏可验证的数据支撑。在更多细节公布之前,Dessa更像一个方向性的声明,而非可供社区检验的技术成果。对于关注语音模型进展的开发者而言,值得保持关注,但暂时无法据此做出技术判断。
相关推荐

Hermes Agent零基础实战:自进化AI助手
Hermes Agent 零基础教程:GitHub 41.7K 星的自进化 AI Agent 怎么装怎么用。本文拆解其学习循环、三层记忆与 Skill 自改进机制,对比 Claude Code 和 OpenClaw 的差异,并附 WSL 安装实操步骤。

RAG面试核心:离线建库与在线检索全流程拆解
拆解RAG检索增强生成的完整工作流程:离线阶段文档加载、切割、向量化、入库,在线阶段问题改写、向量检索、重排、生成,并解析RAG面试核心考点与系统优化方向。

AI大模型零基础入门:原理与API调用实战指南
从AI发展脉络到大模型训练原理,再到Token、Temperature、Top-P等核心概念,本文结合实战课程讲解系统提示词、Function Call、RAG与记忆能力的实现逻辑,并给出四类API调用场景的落地路径,适合零基础开发者入门。