GPU泡沫退潮之后,真正值钱的不是算力,而是可编程的稀缺性
Hatched by Kevin Di
Apr 30, 2026
1 min read
9 views
86%
当最贵的GPU开始变便宜,泡沫真正破裂的不是价格,而是叙事
如果一块曾经按小时租到令人咋舌的H100,如今价格一路下探到过去难以想象的水平,这意味着什么?很多人第一反应是:GPU不再稀缺了。更深一层的答案却恰好相反,稀缺的从来不是GPU本身,而是某种特定工作负载对GPU的依赖。
这正是当下AI产业最容易被误判的地方。表面上看,更多GPU上线,价格下滑,似乎意味着算力基础设施正在走向“充分供给”。但如果把视角从租赁市场移到计算范式,就会发现一个更重要的变化:训练的集中化、微调的普及化、推理的商品化,正在一起重写硬件需求结构。
一旦大模型训练从“谁都要自己从零训练”变成“少数巨头和少数头部团队的战场”,GPU的故事就不再只是供需问题,而变成了一个更尖锐的问题:下一代AI到底需要什么样的计算架构,才能既高效,又可编程,又不被单一任务锁死?
AI基础设施的真正分水岭,不是更强,而是更窄
过去两年,很多创业团队都经历了同一件事:先是争抢H100,像抢火车票一样抢算力;然后发现训练成本太高,开始转向微调;再后来,连“训练一个基础模型”这件事本身也变得不再像通行证,而更像一道极少数人才能进入的门槛。
这背后的逻辑很残酷,也很清晰。基础模型训练需要大规模集群,微调通常只需要一个节点或几个节点,推理则更加依赖稳定、低成本、可重复的部署能力。 当市场从训练转向推理,硬件的价值判断就发生了根本变化:不再是谁能把峰值算力堆得最高,而是谁能把一种固定类型的工作负载跑得最稳、最省、最容易部署。
这也是为什么“GPU泡沫”这个说法只说对了一半。泡沫破裂的不是AI计算本身,而是**“所有AI都必须以同一种方式计算”**的幻觉。训练像大炮,推理像流水线,微调像精密维修。你不会用同一套工具做这三件事,硬件当然也不该强行统一。
真正的基础设施革命,往往不是通用工具越来越强,而是专用工具终于显得更合理。
在这个意义上,GPU价格回落并不意味着AI计算需求萎缩,而意味着需求开始分层。少数巨头继续烧训练,更多企业则进入“把模型变成产品”的阶段。此时决定胜负的,不是你能不能买到最贵的卡,而是你能不能找到一种更贴合任务结构的硬件表达方式。
从WINTEL到NT,AI时代争夺的不是芯片,而是接口
每一个计算时代,最终都会形成一种隐形联盟。PC时代是WINTEL,手机时代是Android加Arm。AI时代看似是GPU最风光,实则真正的竞争焦点正在转向一个更根本的问题:谁控制了AI工作负载与硬件之间的接口。
这就是为什么英伟达和台积电被视为AI时代的新联盟。前者定义了开发者如何表达并行计算,后者决定这些表达能否被高良率、低成本地制造出来。一个提供编程语言和生态,一个提供制造能力和规模兑现。这种组合的力量,并不只是“算力强”,而是把一整套开发者习惯、软件栈和供应链路径绑定在一起。
但这里有一个值得警惕的事实。任何一套主导联盟,一旦变得过于成功,就会把整个市场推向“默认选项”的幻觉。开发者会以为,既然CUDA无处不在,GPU就一定是所有并行计算的终局。投资人会以为,既然大模型时代是GPU时代,所有AI芯片公司都要照着GPU的方式去证明自己。
可问题在于,接口的统治力并不等于架构的永恒性。就像Windows并没有消灭所有其他操作系统,Android也没有让Arm成为唯一的芯片逻辑,CUDA也不可能自动证明GPU适合所有AI场景。更现实的图景是:当一个生态足够强大时,真正的竞争不再发生在“有没有程序员愿意用”,而发生在“有没有更低成本的方式,兼容相同的开发习惯”。
这正是可重构架构开始变得重要的地方。
未来不是GPU对ASIC,而是“可编程的专用性”对“昂贵的通用性”
很多人谈芯片架构时,习惯把它们分成两类:GPU代表通用并行,ASIC代表专用高效。这个二分法太粗糙了。真正有意思的边界,其实在于:你能否把专用效率和软件可编程性同时保留下来。
这也是为什么TPU、NPU、FPGA、CGRA、RPP这类架构越来越受关注。它们并不是简单地想“替代GPU”,而是在回答一个更具体的问题:对于某一类反复出现的AI任务,怎样设计一种比GPU更省电、更低延迟、更贴合数据流的硬件,同时又不要把开发者逼回门槛极高的定制流程?
可以把这类争论想象成餐饮行业。GPU像大型自助餐,什么都能吃,适合人多、场景杂、峰值高的地方。ASIC像预制套餐,口味极致稳定,效率极高,但菜单一旦定死就难改。可重构架构则像“可变菜单的中央厨房”,它不是无限通用,但能在几种高频菜式之间快速切换,而且每道菜的出餐效率很高。
这里的关键,是可编程性不是免费的。越通用的架构,通常越难极致高效。越专用的架构,通常越难适配变化。可重构架构的意义,就在于试图把这个损失压到最低。
以粗粒度可重构阵列为例,它比FPGA更适合AI工作负载。FPGA的强项是位级灵活,但代价是面积、功耗和时序复杂度都很高,像一间可随时拆墙重装的房子,灵活但昂贵。CGRA则更像已经装好的标准化房间,只在字级上重配置,代价更低,适合大量重复的并行计算。对于边缘AI、推理和某些固定模式的张量运算,这种设计常常比“万能但笨重”的方案更有现实意义。
而更新一步的思路,是把这种硬件能力进一步和既有软件生态对接。RPP一类架构的价值,不只是“能跑”,而是能在接近CUDA的开发方式下,跑出接近ASIC的能效。这点非常关键,因为芯片产业的历史早已证明:没有开发者入口的硬件,再漂亮也很难规模化。
AI芯片竞争的下一阶段,不是谁更像GPU,而是谁能把“像GPU一样好用”与“比GPU更省”同时做到。
真正的技术护城河,不是峰值性能,而是工作负载的可压缩性
如果把今天的AI市场拆开来看,会发现一个很有意思的现象:大模型训练需要巨大的临时峰值,推理需要长期稳定吞吐,微调需要低门槛和快速迭代。三者并不要求同一台机器完成全部任务。
这意味着一个新的判断标准正在出现,叫做工作负载可压缩性。所谓可压缩性,就是一类任务能不能被映射到更小的计算单元、更固定的数据流、更简单的内存结构上,而不损失太多性能。
对于训练,工作负载可压缩性低,因为模型规模大,通信和同步复杂,系统往往需要大集群。对于微调,压缩性更高,因为任务更聚焦,参数更新范围更小。对于推理,压缩性最高,因为大量请求是重复性的、模式化的、延迟敏感的。也就是说,越接近产品化部署,越适合专用化和可重构化。
这就解释了为什么许多小团队从基础模型转向微调,也解释了为什么越来越多芯片公司把重点放到边缘AI和推理服务器上。不是因为训练不重要,而是因为训练只是入口,真正赚钱的是把模型嵌入真实场景:摄像头、支付终端、机器人、穿戴设备、工业控制、边缘服务器。
在这些场景里,最值钱的往往不是绝对算力,而是三件事:
- 低功耗,因为设备常年运行。
- 低延迟,因为实时交互决定体验。
- 高兼容性,因为没人愿意为一个芯片重写整个软件栈。
于是,一个看似很技术的问题,最后变成了商业问题:你能否把硬件的专用性包裹在开发者熟悉的抽象里。谁能做到,谁就有机会成为新一代平台。
Key Takeaways
- 不要只看GPU价格,要看工作负载结构。 训练、微调、推理对应的是三种不同的硬件需求,不应混为一谈。
- 判断AI芯片的核心标准,不是峰值算力,而是可编程的专用性。 能兼顾效率与开发者体验的架构,更可能形成长期价值。
- 边缘AI和推理是硬件创新的高概率落点。 这些场景对功耗、延迟、面积和部署便利性更敏感,天然适合可重构架构。
- 生态兼容性比单点性能更重要。 能兼容CUDA或接近现有软件习惯的架构,更容易跨过商业化门槛。
- 投资和产品决策都应问一个问题:这块芯片是在服务“偶尔的峰值”,还是“长期的重复性”? 后者更容易形成稳定需求。
结语:AI硬件的终局,不是最大算力,而是最少浪费
我们常常把AI时代想象成一场算力军备竞赛,好像赢的人一定是堆卡最多、集群最大、预算最狠的那一方。但如果把视野拉长,你会发现真正改变产业结构的,从来不是“更大”,而是更少浪费:更少的能耗、更少的通信、更少的编程摩擦、更少的过度通用。
GPU把AI带进了规模化时代,但它不一定是AI世界的最终形态。随着训练的集中化、推理的普及化、边缘部署的常态化,硬件会越来越像一套分层工具箱,而不是单一的霸主。未来最强的芯片,未必是最像GPU的芯片,而是最懂任务边界、最懂数据流、最懂开发者迁移成本的芯片。
所以,AI时代真正值得追问的问题不是“谁拥有最多GPU”,而是:谁能把计算从昂贵的通用性,重新设计成可编程的专用性。 一旦你看清这一点,很多看似分散的新闻就会连成一张图:GPU降价、微调兴起、基础模型收缩、CGRA复兴、边缘AI崛起,它们不是孤立事件,而是同一场架构重估的不同侧面。
Sources
Hatch New Ideas with Glasp AI 🐣
Glasp AI allows you to hatch new ideas based on your curated content. Let's curate and create with Glasp AI :)
Start Hatching 🐣