2026-09-16 08:15:54 分类:科技
2026年降本潮下的公开秘密
2026年春,深圳大模型创业周的茶歇区,我听到两个创始人蹲在角落抽烟,聊的内容挺扎心。
其中一个刚拿了A+轮,说他们把核心的Transformer全注意力架构换成了基于线性Attention的变种,推理成本直接砍了70%,就这一个改动,把原来烧钱烧到快倒闭的项目,拉回了正增长的线。
放在三年前,说这种话会被圈里大佬骂成野路子。现在呢?满场都是偷偷换架构的人,大家心照不宣。
降本,已经不是可选选项,是活下去的必须。
2026年中国大模型创业公司成本结构占比图
我从头部云厂商内部拿到的最新测算,2026年新成立的大模型创业公司,Transformer推理成本占整体运营成本的72%,相当于线下连锁火锅店,房租、人工、食材所有成本加起来,占比都没这么高。
训练一个70B参数的原生Transformer大模型,总算力消耗相当于北京天通苑小区整整一年的居民生活用电量。天通苑住了快七十万人啊,你想想这能耗有多吓人。
说实话,我最开始看到这个数的时候,第一反应是,这哪里是AI革命,这是算力资本家的收割机啊。
Transformer发明出来的时候,解决了RNN长程依赖的问题,一下子把NLP的天花板抬了好大一截,后来又通吃了视觉、多模态,功劳没人能否定。
但是现在呢?它已经从一个技术方案,变成了一门生意。一门所有人都只能上船,下船就死的生意。
绑在Transformer漕运上的利益链
整个中国AI算力圈现在就像晚清的漕运体系,所有人都仰仗京杭大运河吃饭,哪怕河道已经淤塞,航运效率低到离谱,也没人敢提改走海运——毕竟漕运的官船、码头、搬运工,一整套利益绑定都绑在这条河上,动了河就是动了所有人的饭碗。
国内玩家的布局,早在几年前就落定了。百度文心一言从诞生起就是全栈优化原生Transformer,华为昇腾芯片的指令集,专门加了Transformer加速的专属扩展,寒武纪思元590,接近一半的芯片面积都给了注意力机制的硬件加速单元。
算笔明白账:一块思元590卖好几万,一半的钱你买的就是Transformer专属加速,相当于你花十万买一辆SUV,五万块都花在了专业越野套件上,你天天开着上下班,那套件除了增加油耗,啥用没有。
但你没得选。
现在所有云厂商推的大模型算力包,清一色都是针对原生Transformer优化过的,打包定价比非Transformer架构便宜三成,明摆着逼你选。你不用Transformer,拿不到优惠,成本反而更高,创业公司怎么扛?
AI芯片针对Transformer优化的电路布局图
去年我接触过一个中科院出来的创业团队,搞出了一个新的序列处理架构,同参数下推理效率比原生Transformer高两倍,内存占用只需要三分之一。结果找投资,投资机构第一句问的就是,你的架构能直接跑在现有昇腾、A100上吗?要不要重新做硬件适配?团队说要大概半年时间调整,投资机构直接摇头起身走了。
不过话说回来,换我是投资人,我也不一定投。整个产业链已经把所有的资源、资本、人才都砸在了Transformer上,重新建一套体系的成本,远高于你带来的效率提升。
大家都赚惯了稳钱,没人愿意冒这个险。那些天天喊“Transformer是终极架构”的人,十个有九个,都是靠这条漕运吃饭的既得利益者。
从业者逃不开的舒适区陷阱
从业者逃不开的舒适区陷阱
很多普通从业者觉得,这就是资本和大佬的博弈,跟我一个小打工的没关系。
错得离谱。这波利益绑定,埋的最大的坑,就是给普通人挖了个舒适区陷阱.
现在打开任何招聘网站,但凡沾点AI的岗位,JD上必然写一句“熟悉Transformer架构,有端侧调优经验优先”。多少国内顶尖高校的AI方向研究生,从研一开始就泡在Transformer上,发论文要蹭Transformer,做项目要蹭Transformer,毕业找工作,也只有懂Transformer才能拿高薪。
我见过一个清华的硕士,毕业进了某头部大模型公司,两年时间,天天干的活就是给Transformer调超参、剪枝、量化,能把7B模型的推理速度再提两个点,就可以写进KPI拿年终奖。
你说他练出了什么核心能力?如果哪天行业换了架构,他那点调参经验,瞬间就变成废柴。
上个月我跟字节AI部门的一个HR吃饭,她说今年裁员,优先走的就是这批只会调Transformer的算法工程师,招新人的时候,反而愿意给试过不同架构的年轻人开更高的价。
市场已经在用脚投票了。
传统行业的AI落地更夸张。很多项目明明用传统CNN就能做到98%的准确率,足够用了,比如工厂的零件缺陷检测,比如线下门店的客流统计,非要堆个好几层Transformer上去,美其名曰“大模型原生改造”,结果项目成本直接涨了三倍,准确率只提升了不到三个点,甲方还觉得AI全是忽悠,冤不冤?
整个行业都在为Transformer的溢价买单,不管你需不需要。
当整条船都朝着淤塞的河道开,第一个跳出来划小船走新航道的人,真的能活下来拿到船票吗?
免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。如有侵权请联系删除。
文章名称:Transformer不是技术问题,是算力生意
文章链接:https://www.lfdjt.com/info_23_20131.html