当计算机从 25 万美元的机器,演变成 85% 成本都压在网络上的系统
Hatched by Kevin Di
Jul 28, 2026
1 min read
1 views
86%
开场:为什么最贵的部分,常常不是你以为的那个部分?
1951 年,第一台成功商用的计算机售价 25 万美元,只生产了 48 台。那时,计算机本身就是一件稀缺到近乎神话的东西,机器的价值几乎等同于“能算”。今天,情况看似完全相反。我们习惯把算力理解为芯片、晶体管、GPU 数量和 FLOPS,但当系统规模不断扩大,真正吞噬预算、功耗和工程复杂度的,往往不是“计算”,而是把计算连成整体的那张网。
这就引出一个令人不安的问题:当系统越先进,价值重心为什么反而越来越从核心器件转移到周边连接?
答案并不只是“网络很重要”这么简单。更深层的变化是,计算正在从“单点机器”变成“互联机器群”,而互联本身已经从辅助功能变成了决定系统上限的主角。一个时代把钱花在机器本体,另一个时代把钱花在让机器彼此说话的方式上。两者之间,不只是技术演进,更是系统价值观的迁移。
从“拥有一台计算机”到“运营一个计算系统”
早期计算机时代,商业逻辑很朴素:买一台机器,就拥有了算力。用户关心的是这台机器能不能跑、稳定不稳定、成本高不高。那时的计算是原子化的,机器像一座孤岛,边界清晰,价值也清晰。你买到的是一块完整的能力。
但现代 AI 集群完全不同。一个大模型训练系统不是一台机器,而是一种协调数千个计算节点共同工作的组织形态。单个 GPU 再强,也只是局部力量。真正决定训练效率的,往往是这些 GPU 能否把梯度、激活值、参数更新在极短时间内同步起来。于是,系统的瓶颈从芯片性能,悄悄转移到了数据移动。
这就是今天最重要的转折:算力不再是单点能力,而是协作能力。
一旦计算进入协作时代,网络就不再是配角。它变成了系统的神经系统。芯片像肌肉,网络像神经,存储像血液。肌肉再强,如果神经传导慢、抖动大、能耗高,整个人的动作还是笨拙的。AI 集群也是如此,GPU 不缺算力,缺的是让算力高效组合的通路。
过去,计算机的价值在“它能做什么”。
现在,系统的价值越来越取决于“它们能一起做什么”。
为什么后端网络会吞掉 85% 的成本和 86% 的功耗
如果说这一代系统最反直觉的地方是什么,那就是:在某些超大规模集群中,后端网络已经变成总网络成本和功耗的主导者,甚至可以占到 85% 和 86% 这样的夸张比例。这个数字背后的意义,不只是“网络贵”。它说明了一个更残酷的现实:系统的难点正在从计算单元转移到互连单元。
为什么会这样?因为后端网络承担的任务,远比普通“传数据”复杂。它要在极短时间内完成大规模同步,容忍极低的延迟,保持极高的吞吐,还要在高密度设备中控制功耗、热量和物理布线复杂度。它不像传统企业网络那样,允许几毫秒的等待和偶尔的拥塞。它更像是精密工厂里的同步传送带,任何一个节拍错位,都会让整条产线降速。
可以把大模型训练想象成一群人抬一块巨石上山。GPU 就是这些搬运工,但真正困难的不是每个人能不能抬,而是大家能不能同时抬、同时放、同时换手,且不浪费力气。网络,就是那套口令和节拍系统。它决定了人群是否像一支军队,还是像一群散兵。
问题是,随着规模增大,协调成本不是线性上升,而是迅速膨胀。人越多,口令越难;机器越多,通信越重。于是你会看到一个看似荒诞的结果:为了让计算更快,必须投入越来越多资源去解决“如何让计算不要彼此打架”。
这就是现代基础设施最重要的悖论之一:你花的钱越多,不一定是在买更多计算,而是在买更少的等待。
CPO 的真正价值,不是“更快”,而是“把系统重新缩小回可控范围”
把光学和交换芯片更紧密地结合,表面上看是在追求更快的连接速度、更低的损耗和更好的带宽扩展。可真正的价值,不只是速度,而是把原本被铜缆、收发器、板级布线和层层转换放大的复杂度压回去。
这点很关键。很多人理解新互连技术时,只会问一个问题:快多少?但对于系统设计者来说,真正尖锐的问题往往是:它是否能让系统在规模扩大时,仍然保持可工程化、可供电、可散热、可维护?
这也是为什么光学集成不是简单的升级,而是架构上的重写。你不能把它只看作“更快的线”,因为它实际上在改变系统中最昂贵的部分是什么。传统网络往往在服务器、交换机、收发器、线缆、机柜之间叠加出大量间接成本。每一次转换都像过一道收费站,交的不只是钱,还有功耗、延迟、故障点和部署复杂性。
CPO 的思路更像是把多个收费站合并,尽量减少不必要的中转。它不是让世界变得更浪漫,而是让世界变得更少摩擦。对于数据中心来说,这种“少摩擦”几乎就是效率本身。
一个有用的比喻是城市交通。单纯加宽高速公路,并不能解决城市拥堵,因为真正的堵点可能在收费站、匝道、红绿灯和交叉口。CPO 的意义并不是只把公路修得更快,而是重新设计城市交换节点,让交通不必在每个环节都减速一次。
我们正在从“芯片竞争”进入“系统组织竞争”
过去很长一段时间,硬件竞争像一场芯片竞赛。谁的制程更先进,谁的单卡性能更高,谁就占优。但当训练规模跨过某个阈值后,竞争逻辑会发生质变。决定胜负的,不再只是单个器件有多强,而是整个系统能否以合理成本把这些器件组织起来。
这意味着一个新的能力层正在浮现:系统组织能力。
系统组织能力包含几个维度。第一是拓扑设计,节点如何分组,流量如何分层。第二是互连技术,如何在带宽、延迟和功耗之间做平衡。第三是热设计和供电设计,因为高密度互连会反过来影响散热和电力分配。第四是成本工程,哪一部分花钱最有效,哪一部分只是昂贵的装饰。
换句话说,未来最强的基础设施,不一定是“最强的芯片堆砌”,而是最会把复杂性关进笼子里的系统。这也是为什么后端网络占比如此之高并不奇怪。它不再是外围设施,而是系统边界条件的集合体。你可以把它理解成建筑中的地基和承重结构。人们通常注意不到它们,但一旦要盖更高的楼,真正决定能盖多高的,就是这些看不见的部分。
规模越大,系统越像建筑,而不是像机器。
建筑的价值,不在于某块砖,而在于承重逻辑。
一个新的思考框架:从“性能指标”转向“摩擦预算”
如果只盯着性能指标,我们很容易误判系统的价值。比如,单纯看吞吐、带宽、峰值算力,当然重要,但这些指标经常掩盖真正的瓶颈。更好的方法,是把基础设施看成一套在不断消耗“摩擦预算”的系统。
所谓摩擦预算,可以理解为系统在规模扩张时能承受的损耗总量,包括:
- 传输摩擦:数据在路径上反复搬运、转换、打包、解包造成的损失。
- 同步摩擦:分布式计算中等待最慢节点所付出的时间成本。
- 功耗摩擦:为了维持链路和交换,系统额外消耗的电力。
- 运维摩擦:布线、调试、故障排查、升级带来的人工和停机成本。
- 规模摩擦:网络越大,结构越复杂,边际收益越难保持。
这个框架的好处是,它把“更快”改写成了“更少浪费”。当你用摩擦预算来审视一套系统时,很多看似高端的设计会失去光环,因为它们也许只是在把复杂度从一个地方搬到另一个地方。真正优秀的架构,是能让摩擦总量下降,而不是仅仅让某个局部指标漂亮。
这也解释了为什么某些看似昂贵的互连方案,长期看反而可能更便宜。因为它减少的不是单次成本,而是持续运行中的隐性损耗。对于 AI 基础设施,这些隐性损耗最后会累积成巨额账单。
Key Takeaways
- 不要只看芯片性能,要看系统组织能力。 在大规模集群里,谁更会协调,谁才更接近真实算力。
- 把网络视为神经系统,而不是管道。 它决定的是集体动作的质量,不只是数据能不能到达。
- 用“摩擦预算”替代单一性能指标。 评估一套基础设施时,同时看延迟、功耗、运维和规模扩张成本。
- 优先优化后端网络,因为它往往是最大的隐藏成本中心。 真正拖累效率的,常常不是最显眼的部分。
- 问一个更好的问题:这项技术是在增加能力,还是在减少复杂性? 长期来看,减少复杂性的方案更可能带来可持续的规模优势。
结语:未来的进步,未必来自更强的计算,而来自更聪明的连接
回头看,计算史其实经历了一次深刻的意义转换。曾经,计算机是一台昂贵的孤岛,价值集中在机器本身。如今,计算变成一张巨大的协作网络,价值越来越取决于连接、同步和协调。于是我们终于明白,技术进步并不总是把核心做得更强,有时恰恰是让核心之间的关系更优雅。
这就是今天最值得记住的变化:未来的算力竞争,很可能不是“谁拥有更多芯片”,而是“谁能把芯片组织成更少摩擦的整体”。
如果说第一台商用计算机象征着“拥有计算能力”,那么今天的大规模 AI 集群象征的则是“驯服复杂性”。而在这场驯服中,最贵的,未必是最亮眼的那块硅片,最关键的,也未必是被展示在舞台中央的算力峰值。真正决定时代分水岭的,可能是那些让计算彼此协同、让系统不至于自我拖累的连接技术。
换句话说,下一代基础设施的胜负,不在于你能把机器做得多强,而在于你能不能让它们像一个整体那样思考、呼吸和行动。
Sources
Hatch New Ideas with Glasp AI 🐣
Glasp AI allows you to hatch new ideas based on your curated content. Let's curate and create with Glasp AI :)
Start Hatching 🐣