让大模型像人一样解决复杂任务,业界这几年基本形成了一条路径依赖:把所有推导过程都写成文字。从思维链到各种自主智能体,模型每走一步,都要在上下文里吐出一长串自言自语。这种把草稿纸完全公开的做法虽然直观,却让推演过程变得极其冗长且昂贵。
2026年10月,Together AI相关团队在arXiv发布论文《Hybrid Reasoning Agents》,推出了HybridAgent架构,试图打破这种文本垄断。他们给大模型配了一套内部无声思考机制:日常推理在隐藏向量空间完成,需要调取外部API或与外界交互时,再切回文本空间。
把隐空间当作无声草稿纸
长期以来,业界在智能体设计上面临两难选择。以纯文本思维链为核心的方案能自然调用外部工具,但生成大量中间字符极占带宽;而像Coconut或SoftCoT这类纯隐空间探索,虽然推理密度极高,却像个无法开口的闷葫芦,天然缺失对外部工具的调用接口,且过程完全黑盒。

HybridAgent的核心改进在于搭建了一座浮桥。它通过一个轻量级的残差适配器HybridLink,将模型的最后隐状态直接投影回输入嵌入空间,同时依赖连续工作记忆保存跨轮次的键值缓存。配合专用的混合监督微调与强化学习算法,模型学会了自主判定何时在内部默默推演,何时切出文本发起网络检索或运行代码。
测试覆盖了基于Qwen3底座的4B、8B与14B三个尺寸,横跨AIME 2025、AIME 2026、MATH500、GPQA-Diamond、MedQA、MuSiQue、GAIA、HLE、WebWalker、SealQA以及DeepSearchQA等11个基准测试。数据显示,这套机制在综合表现上取得了10.4%的平均提升,并带来了35.5%至54.7%的Token缩减,以及1.8至2.6倍的推理加速。目前团队已开源了相关训练流水线与8B、14B的模型权重。
战报背后的对照失真
在8B模型的细分项对比中,HybridAgent跑出了相当悬殊的领先优势。

| 基准测试 | HybridAgent (8B) | ARPO 基线 | Coconut 纯隐空间基线 |
|---|---|---|---|
| GAIA 复杂任务 | 43.7 | 38.8 | 3.9 |
| WebWalker 网页检索 | 42.5 | 32.0 | 0.5 |
| HLE 综合评估 | 14.4 | 8.8 | 1.2 |
这种压倒性的比分确实吸睛,但细究基线设置,会发现对照体系存在明显的结构落差。纯隐空间先驱Coconut原生根本没有设计多轮工具接入协议。在面对GAIA或WebWalker这类强依赖外部交互的环境时,一个无法有效执行API通信的模型,拿到个位数评分是必然结果。
换句话说,这一轮评测拉开的巨大差距,很大部分是由工具连接机制与强化学习对齐红利带来的,不能简单换算成隐空间推理质量本身的全面胜出。拿装配了工具链的特化系统去比对早期的学术实验品,数值确实好看,但在论证严密性上打了折扣。
算力账本里的理想真空
论文最吸引工程团队的卖点,莫过于宣称能带来2.7至3.7倍的成本节省。但在落地前,必须翻看附录G.2的测算口径。

官方给出的倍率并非真实的端到端云账单测算,而是基于每小时2.50美元的H100算力、按10%利用率进行的一套纯解码计算建模。它把真实业务中极为沉重的前置提示词预填充、上下文注意力维持以及调用外部工具的等待损耗统统剔除在外。
这就像测算城际物流时,只记录了车辆在通畅高速上的巡航油耗,却把进出货场的装卸、排队和红绿灯怠速全部归零。在重度依赖检索增强和长文档阅读的复杂任务里,预填充阶段往往占据了算力消耗的大头。隐空间推理固然省掉了吐出中间Token的耗时,但在整体流水线中,这一收益会被外围开销大幅稀释。
论文所谓的无损特性同样需要理性看待。其数学证明针对的是上下文键值缓存状态的保留无损,而不是指隐空间里的思维向量能无损翻译回人类语言。至于方案中提供的可解释性工具,本质上是依靠最近邻Token投影读取向量表征,能帮开发者看个大概轮廓,但离严格的神经因果忠实性审计还有相当距离。
纸面上的算力节流,掩盖不了真实工程环境里高昂的系统协同与调试代价。
- 风险.原生Transformers库加载该开源项目仅能以纯文本模式运行,必须绑定其定制的生成引擎与权重,目前尚无法直接平替接入现有的主流工业推理集群。
对于基础设施工程师而言,真正的挑战才刚刚开始。在通用推理框架全面支持这种动态模态混合调度之前,将隐藏向量当作思考载体的方案,更适合在垂直场景下做封闭式验证,而非盲目迁移到对合规与可解释性要求苛刻的核心业务中。
