没人敢公开说的端侧开倒车
2026年初我跟三家做智能座舱的核心算法负责人私下吃饭,三个不同公司的人,说了同一个一模一样的细节:他们都把座舱语音离线唤醒模块,从去年刚换上的Transformer小模型,悄悄换回到了经过量化压缩的LSTM。
没人敢公开说。怕被行业骂开倒车。毕竟现在行业政治正确是,Transformer万物可替换,LSTM是十年前的老古董,早该进博物馆了。
但私底下算的账,骗不了人。Transformer小模型做离线唤醒的功耗,是优化后LSTM的2.7倍,准确率只高出0.8个百分点——换算到车载场景,停车熄火离线唤醒模式下,相当于多耗12%的整车电瓶电量,停一周不动车,可能就打不着火了。
这不是车载才有的问题。手机端侧大模型的语音交互、智能手表的健康数据预测、摄像头的移动侦测,所有需要24小时待机、靠电池供电的端侧AI落地场景,都在算这笔账。

大模型火了三年,所有人都盯着通用大模型的参数竞赛,没人回头看这些边角的落地场景。直到今年大家都要拼量产落地拼成本了,才突然发现,原来被扔在角落的LSTM,刚好能解决最头疼的功耗问题。
我跟其中一个负责人聊,他说出来的话挺扎心:“我们也想用最新最热的技术,但是消费者不会为了高0.8%的唤醒率,多付三百块电池钱,还接受少三小时待机。我们用脚投票也得换回去。”
被资本埋了五年的成本底牌
其实LSTM从来没真的离开过。国内最早做语音AI落地的云知声,从2017年Transformer出来之后,就一直没停过LSTM的端侧优化,哪怕资本早就不给LSTM相关项目投钱了,整个赛道都在往Transformer挤。
说实话,这事儿真的讽刺。2018年之后,你出去找投资,说你做的是LSTM优化,投资人直接给你打发走,说这技术过气了,我们只投Transformer大模型。所有团队都被逼着改PPT,把LSTM从技术栈里删掉,哪怕自己私底下还在用。
这就像人体进化里被误解了上百年的阑尾,过去大家都觉得它是进化的残留废物,没用还容易发炎要切,现在才发现它是肠道益生菌的储存库,关键时刻能顶大用。LSTM就是AI进化史上的阑尾,不是没用,是被一群追热点的人误判成了废物。

云知声2025年落地的LSTM语音指令识别模型,整个模型体积只有800KB,比行业最小的端侧Transformer语音模型小17倍,推理一次的延迟只有0.2毫秒,比Transformer快12倍,单位时间的能耗成本只有后者的五分之一。你说这个性能,在端侧小任务场景,哪个厂商会拒绝?
不过话说回来,这个方向我认为走偏了。整个行业的资源分配,完全被资本的故事逻辑绑架了:大参数、大模型、通用智能,故事好讲,能融大钱,能炒高估值,所有人就都往那边挤。LSTM这种,赚小钱,拼优化,没那么多故事可讲,就直接被埋了。
本质上这不是技术对错,是商业模式的博弈。大家都想去赚B端大客户的大钱,不想做小场景的苦生意,自然就把能做苦生意的技术给埋了。现在苦生意反而变成了落地刚需,才把它挖出来。
普通开发者的新破局点

现在整个AI圈都卷到什么程度?应届生找工作,不会调千亿大模型,都不好意思写简历。创业团队做项目,不挂个大模型的名头,拿不到融资。所有人都在往大模型这条独木桥上挤,挤到头破血流,卷不动了才发现,原来旁边还有条没人走的路。
对普通算法工程师来说,现在懂LSTM底层优化的人,真的太少了。很多九五后的算法工程师,连LSTM的源代码都没自己跑过一遍,只在大学AI课上看过结构图,就跟着喊LSTM过气了。现在端侧落地爆发,一堆公司抢着要懂LSTM优化的人,开的工资比调大模型prompt的还高。
对中小创业团队来说,更是如此。你跟巨头卷千亿大模型,你算力成本都出不起,巨头一张AI芯片几千万,你拿什么跟人拼?但是你做垂直场景,比如做宠物可穿戴设备的行为识别,做工业设备的异常振动预测,这些小场景,LSTM完全够用,模型小,成本低,不需要海量数据训练,门槛低多了。
原来大家都被大模型的神话吹晕了,觉得只有大模型才是AI的未来,小技术都是过时的。其实哪里是这么回事?技术从来没有过时一说,只有放错了场景的技术。
当所有人都在挤千亿参数大模型的独木桥时,你敢不敢回头捡那块被扔在路边的免费干粮?