OpenAI首款自研定制推理芯片Jalapeño的技术细节近日完整披露。这颗针对大语言模型推理深度定制的ASIC,采用台积电3nm级工艺制造,整合6组HBM4内存堆栈,单卡提供约13.4 PFLOP/s的MXFP4矩阵算力,以及高达15.4 TB/s的聚合显存带宽。更引人注目的是开发节奏:从写下第一行RTL硬件逻辑代码到完成流片,整个过程仅耗时9个月。

在行业普遍依赖英伟达高端算力且面临供应配额制约的当下,这组数据极易被解读为大模型已经能完全取代人类工程师自动造芯。但撕开流片神话的包装,这并非一场纯粹的算法无人奇迹,而是头部模型厂商依仗全栈认知,对传统半导体研发链路发起的一场精密解构。

9个月流片的虚与实:硬件分工的真实拼图

行业通常需要18至24个月才能走完一款顶级复杂芯片的前端设计与物理实现。Jalapeño将RTL到流片的日历时间压缩至9个月,OpenAI硬件团队的规模却始终稳定在100人左右。这种反差建立在高度务实的技术分工之上,而非模型全包全揽。

从概念萌芽到拿到第一批硅片,Jalapeño的实际研发周期接近20个月。OpenAI主导了顶层架构定义、推理加速器核心逻辑、内存层级设计与网络互联前端,并结合Google开源硬件综合框架XLS与Verilog RTL编写逻辑。然而,涉及门级网表以后的物理实现、时钟树综合、布局布线以及严苛的代工厂签核,全部交由经验丰富的博通团队托底,后端的服务器板卡与整机机架集成则由天弘负责交付。

Jalapeño芯片研发分工与落地管线 前端定义与逻辑 主体:OpenAI (约100人) · 架构定义与微调探索 · XLS + Verilog RTL编写 · 大模型自研算子协同 后端物理实现与签核 主体:博通 (Broadcom) · 门级物理网表综合 · 布局布线与时钟树 · 代工厂流片直接对接 整机制造与系统集成 主体:天弘 (Celestica) · 硬件加速卡载板封装 · 数据中心机架工程 · 2048卡集群互联落地

如果剥离博通成熟的硅智财积淀与物理设计支撑,任何纯靠大模型生成的代码都无法在现行EDA工具链中通过时序收敛。AI在此处扮演的真实角色,是给顶尖工程师提供高通量的代码探索杠杆,使特定矩阵乘法电路的物理面积比纯人工设计缩减约10%

专攻解码瓶颈:3nm下的吞吐与带宽账本

大模型推理业务的核心成本痛点在于内存墙与高交互延迟。Jalapeño的规格配置完全服务于注意力机制在Prefill(预填充)与Decode(解码)阶段的资源不平衡。

芯片搭载216 GiB容量的HBM4内存,虽然标称TDP上限设定为700W,但在运行实际工作负载时的持续功耗被压制在550W或以下。互联拓扑上,系统原生支持最多128颗芯片构成的约600 GB/s高带宽域,并能横向扩展至2,048颗ASIC的超大集群,提供约27 EFLOP/s的MXFP4总算力与432 TiB的全局HBM容量。

Jalapeño核心硬件性能关键指标 13.4 PFLOP/s 单卡MXFP4算力 台积电3nm工艺支撑 15.4 TB/s HBM4显存带宽 搭载216 GiB大容量 ≤550 W 实测持续功耗 标称TDP上限700W 3.6x 时延最高降幅 对比主流商业基准

在针对GPT-OSS 120B、DeepSeek R1 670B与Kimi K2.5 1T等主流大模型推理的实测对比中,这颗专用芯片展现出了明确的针对性:

评估指标类别Jalapeño实测表现对比参考基准提升幅度
每瓦吞吐效能持续功耗保持在550W以内1.5–1.9倍 吞吐提升
端到端请求延迟首字生成及全链路耗时优化1.7–3.6倍 延迟降低
高交互长文本负载针对高并发与长KV Cache调优2.1–4.1倍 性能释放
集群聚合规模2,048卡集群互联 (200 GB/s)27 EFLOP/s MXFP4 / 432 TiB

与目前支撑OpenAI数据中心主力运转的Nvidia GB300等通用卡相比,Jalapeño通过剔除不必要的通用计算单元,换取更激进的显存通道与更低的发热量,直接把算力转化为更低的每Token服务成本。


算子优化的暴力求解:从0.31%到88.94%的跃迁

硬件只是外壳,Jalapeño身上真正拉开效率代差的变量隐藏在底层软件栈。大模型推理效率往往并不取决于理论峰值算力,而取决于人类工程师能否为特定硬件架构手写出最优的底层计算内核(Kernel)。

面对多头注意力机制和混合专家模型(MoE)路由算子,由于寄存器分配、共享内存调度以及线程同步的组合空间极其巨大,传统编译器与人工优化常常只能触及硬件潜力的皮毛。OpenAI利用其自研大模型构建代码优化代理,直接接管了底层的机器码探索。

大模型对硬件工业最大的颠覆,不是画电路图,而是暴力穷举底层算子的调度极限。

在软硬件调优阶段,大模型在约40小时内,将一个针对DeepSeek架构的Attention算子执行效率从理论峰值的0.31%极限拉升至88.94%。部分AI生成的Attention和MoE算子实测运行速度比人类芯片专家手写的基线版本快出1.5–1.8倍。这种在千万级并行指令排列中寻找最优解的能力,恰恰是人类工程师脑力最容易枯竭的死角。

  • 结论.模型厂商自研硬件的最大底气,在于模型自身就是最佳的底层汇编调度器,它彻底瓦解了芯片与编译器之间的信息鸿沟。

工业壁垒的重构与未言明的算力隐形成本

必须厘清一个行业误区:Jalapeño是一颗物理推理ASIC芯片,而Google推出的AlphaChip、新思科技的DSO.ai或铿腾电子的Cadence Cerebrus,本质是运行在EDA工具内部的强化学习或AI算法。不能把Jalapeño与EDA软件视作同维竞争,它们更像装配流水线与终端工业品的关系。

即便如此,EDA巨头依然感受到了结构性的冲击。过去由商业EDA软件严密定义的芯片前端微架构,正被大模型生成代理强势切入。而英伟达凭借CUDA生态构筑十余年的护城河,在面对OpenAI这种直接把模型权重驻留逻辑硬化到硅片底层的专用架构时,通用GPU的边际溢价正在被逐步稀释。

但这套新造芯范式并非没有代价。其一在于隐形成本:大模型闭环搜索优化虽然缩短了以日历计算的研发时间,但数万次EDA仿真调用、高昂的商业授权开销以及背后支撑代码生成的算力账单,OpenAI从未对外透明披露。其二在于科学维度的黑盒状态:与DeepMind在学术顶刊公开AlphaChip算法代码并接受同行评议不同,OpenAI并未公布Jalapeño具体的验证测试计划与消融实验数据,外界尚无法量化大模型生成的代码中究竟存在多少冗余。

  • 风险.当硬件工程的验证权完全让渡给概率大模型,隐藏在极端边界工况下的硬件软故障与流片失败风险,将以几何级数被放大。

当自研ASIC在2026年底开始实质性进入OpenAI的生产集群,硬件基础设施的买方与卖方关系已然重写。这颗代号墨西哥辣椒的芯片最终证明的不是通用EDA的消亡,而是一个极为现实的趋势:懂模型业务痛点的企业,正在用极度的定制化把通用算力的暴利挤压殆尽。