Hot Chips大会:AI芯片军备竞赛全面升级

AI算力战争的新战场
每年的Hot Chips大会都是半导体行业的风向标。Hot Chips大会自1989年起每年在美国斯坦福大学举办,是半导体行业最具影响力的技术研讨会之一。与侧重商业发布的CES或Computex不同,Hot Chips更注重芯片架构层面的深度技术交流,参会者多为芯片设计工程师、架构师和学术研究人员。历史上,许多划时代的处理器架构——从Intel的奔腾系列到AMD的Zen架构,从ARM的big.LITTLE到苹果的M系列芯片——都曾在这里首次公开技术细节。大会的核心价值在于让业界提前洞察未来2-3年的计算架构趋势,因此成为观察产业技术方向的重要窗口。
而今年这场以"热芯片"命名的盛会,热度更多来自参与其中的重磅玩家。从OpenAI首度亮相的定制芯片"Jalapeño",到Cerebras的晶圆级巨兽CS-5、Groq专注推理的第三代LPX,再到Apple的M6,这届大会几乎汇聚了当前AI硬件竞争的全部核心力量。
这不仅是一场技术展示,更是AI产业格局重塑的缩影。当算力成为决定大模型能力上限的关键瓶颈,谁能掌握更高效、更经济的芯片,谁就能在下一轮竞争中占据主动。

OpenAI Jalapeño:软件公司的硬件野心
最引人注目的莫过于OpenAI首次公开的自研芯片项目"Jalapeño"。作为一家以算法和模型著称的公司,OpenAI进军芯片设计传递出一个明确信号:对英伟达GPU的深度依赖已成为战略隐患。
英伟达GPU在AI训练市场占据超过90%的份额,这一优势源于其CUDA软件生态的十余年积累。CUDA是英伟达开发的并行计算平台,提供了完整的开发工具链、优化库和庞大的开发者社区。几乎所有主流深度学习框架(TensorFlow、PyTorch等)都对CUDA进行了深度优化,这形成了强大的生态壁垒——即便竞争对手推出性能更优的硬件,开发者迁移的成本也极高。英伟达的H100、A100等数据中心GPU单价可达数万美元,供应紧张时甚至一卡难求。这种市场支配地位既带来了丰厚利润,也让依赖其产品的AI公司承受巨大的成本压力和供应链风险。
OpenAI为什么要自研芯片?
训练和运行GPT系列这样的超大规模模型,需要消耗天文数字般的算力成本。目前市场上高端AI加速卡供应长期紧张,价格居高不下。通过自研专用芯片,OpenAI有望在三个层面获得优势:
- 成本控制:针对自身模型架构定制芯片,大幅降低单位推理和训练成本
- 供应链自主:减少对单一供应商的依赖,避免被"卡脖子"
- 软硬协同优化:芯片与模型深度耦合,实现比通用GPU更高的能效比
当然这条路并不好走。芯片设计涉及漫长的研发周期和巨额投入,即便是财力雄厚的科技巨头也曾在此折戟。OpenAI能否将软件优势成功迁移到硬件领域,仍是最大的悬念。
Cerebras CS-5:晶圆级计算的极致探索
如果说主流厂商在追求芯片的密度和互联效率,那么Cerebras走的是一条截然不同的"暴力美学"路线——晶圆级引擎(Wafer-Scale Engine)。
打破传统芯片的物理边界
Cerebras的核心思路是:与其把一块晶圆切割成众多小芯片再互联,不如直接将整片晶圆做成一颗巨型芯片。传统芯片制造中,一片12英寸硅晶圆会被切割成数百颗独立芯片,因为半导体制造过程中必然存在缺陷点,晶圆越大良品率越低。Cerebras的晶圆级引擎直接将整片晶圆做成单颗芯片,面积超过46000平方毫米(常规GPU约800平方毫米),这带来三大工程挑战:一是良品率问题,Cerebras通过冗余设计和故障屏蔽技术应对;二是散热,如此大面积的芯片功耗可达数万瓦,需要专门设计的液冷系统;三是封装和供电,需要数千个供电触点和高带宽的I/O接口。
这种设计带来三大优势:
- 超高带宽片上通信:数据无需在多颗芯片间跨越缓慢的外部总线,大幅降低延迟。尽管挑战重重,晶圆级设计彻底消除了多芯片系统中芯片间通信的瓶颈,在处理需要海量参数交互的超大模型时,理论上可获得数十倍的通信效率提升
- 海量并行核心:单颗"芯片"集成的计算单元数量远超常规产品
- 简化系统架构:减少多芯片协同带来的复杂性
第五代产品CS-5在此基础上进一步提升了性能和能效。对于需要处理巨型模型的场景,这种一体化的算力方案具有独特吸引力,尤其在减少模型分片带来的通信开销方面表现突出。
Groq 3 LPX:专为AI推理而生
与训练芯片的军备竞赛不同,Groq将赌注押在了"推理"这个更贴近实际应用的环节上。在深度学习领域,训练(Training)和推理(Inference)是两个截然不同的计算阶段。训练阶段需要处理海量数据,通过反向传播算法不断调整数十亿甚至数千亿个参数,计算密集度极高,往往需要数千块GPU协同工作数周甚至数月。而推理阶段是使用已训练好的模型对新数据进行预测,虽然单次计算量较小,但对延迟极为敏感——用户每次与ChatGPT对话、每次使用AI搜索,背后都是一次推理过程。从成本结构看,一个大模型可能只训练一次,但会被调用数十亿次进行推理,因此推理的累计算力消耗和成本往往远超训练。这种差异催生了专门优化训练或推理的不同芯片架构。
第三代LPX(Language Processing Unit)延续了其在低延迟推理领域的技术路线。
推理市场的巨大潜力
随着大模型从实验室走向千行百业的实际部署,推理成本正逐渐超越训练成本,成为长期运营的主要开销。Groq主打的确定性低延迟架构,特别适合对响应速度敏感的实时应用场景,比如对话式AI、代码助手和搜索增强。
Groq的LPU架构摒弃了传统GPU的部分复杂调度机制,通过软件预先编排数据流,从而实现极高的吞吐量和可预测的延迟表现。在AI芯片领域,能效比(每瓦特功耗能完成多少运算)正成为比绝对性能更关键的指标。数据中心运营商发现,AI服务器的电费和冷却成本已占总拥有成本(TCO)的40%以上,而移动设备更是受制于电池容量。这推动了芯片设计从"算得快"向"算得省"转变。优化手段包括:采用更先进的制程工艺(如3nm、2nm)降低晶体管功耗;使用专用指令集替代通用计算逻辑;利用稀疏化技术跳过零值运算;以及动态电压频率调节(DVFS)根据负载调整功耗。例如Groq声称其LPU在推理任务中的能效比是同等算力GPU的10倍以上。
这种专注单一场景的策略,让它在特定基准测试中展现出令人印象深刻的每秒token生成速度。在AI算力需求呈指数级增长的背景下,能效比的提升直接决定了AI服务的经济可行性和环境可持续性。
Apple M6:消费端AI的静默革命
在一众数据中心级芯片中,Apple的M6显得低调却意义深远。它代表了另一条技术路径——将强大的AI能力下沉到终端设备。
端侧AI的战略价值
Apple一贯强调设备端处理,M6预计将进一步增强其神经网络处理单元(NPU)的性能,让更多AI任务能够在本地完成。NPU(Neural Processing Unit)是专门为神经网络推理设计的硬件加速器,通常集成在移动设备和PC的片上系统(SoC)中。与通用CPU或GPU不同,NPU针对神经网络中大量的矩阵乘法和卷积运算进行了专门优化,采用低精度计算(INT8、INT4甚至更低)和稀疏化技术,在保持精度的同时大幅降低功耗。苹果自A11芯片开始集成神经网络引擎,到M系列已经历多代演进,性能从最初的每秒数千亿次运算提升至数万亿次。这使得iPhone和Mac能够在本地运行图像识别、语音处理、实时翻译等AI功能。随着端侧大模型的兴起,NPU的算力需求正呈现爆发式增长。
这种策略带来的价值十分明确:
- 隐私保护:敏感数据无需上传云端,数据不离开设备
- 低延迟响应:本地处理避免了网络往返的等待,也避免了云端推理的网络延迟和按次计费成本
- 离线可用:不依赖持续的网络连接
当行业普遍关注云端大模型的军备竞赛时,Apple选择在数十亿终端设备上普及AI能力,这是一种更贴近普通用户的差异化竞争思路。
总结:AI芯片多元化竞争格局正在形成
这届Hot Chips大会清晰地勾勒出AI芯片行业的分化趋势:OpenAI谋求垂直整合的自主可控,Cerebras以晶圆级方案挑战物理极限,Groq深耕推理场景的效率优化,Apple则专注端侧AI的普及化。
这种多元化竞争恰恰反映了AI应用需求的日益细分。没有一款芯片能通吃所有场景,未来的算力生态很可能是训练、推理、云端、终端各司其职的分层格局。对整个行业而言,更激烈的芯片竞争意味着更快的技术迭代和更低的算力成本,最终受益的将是所有AI应用的开发者和用户。
核心要点
相关推荐

MiniMax H3 VR180立体视频LoRA模型:AI沉浸式视频生成新工具
MiniMax H3 VR180立体视频LoRA模型发布,支持并排格式立体内容生成,兼容ComfyUI工作流。了解其技术特性、参考角色输入、起始图像控制等功能,以及对VR内容创作的深远影响。

GPT-6 Astra代码审查实测:效率收益、数据隐私与成本如何权衡
深入分析GPT-6 Astra在代码审查中的实际表现,从效率收益、数据隐私风险和Token成本三个维度拆解工程团队引入AI审查工具的决策框架,探讨人机协同的最优策略。

Declarative Attention:让LLM自主控制注意力,长文本推理效率提升52%
Declarative Attention(DA)是一种让大语言模型在推理时自主声明注意力区域的新机制,通过global、focus、local三种模式动态控制注意力分配,零样本评估即可减少52%注意力token,为长文本稀疏注意力优化开辟全新方向。