数据湖不是技术问题,是权责问题

生鲜巨头的两亿烂尾项目

2026年刚开年,圈内就炸了一个大瓜。国内年营收破千亿的头部生鲜连锁,宣布停用上线才18个月的数据中台,全量迁移到云原生数据湖。

当初这个项目启动的时候,预算两个亿,行业论坛还请他们CTO去做主旨演讲,吹成了传统零售数字化转型的标杆。现在说停就停,多少人说这两亿直接打了水漂。

我上个月跟这个项目前技术负责人喝酒,问他后悔吗。他一口闷了半杯冰啤酒,说后悔没早拆。

谁痛谁知道。原来业务部门要赶周末大促,要一份区域动销数据选品,找数据开发排期,最少等五天。等数据拿到手,促销档期都过了。原来跑一次全渠道商品汰换分析,要等36个小时。一年下来,光是这个中台的存储和运维成本,就花了1200万——摊下来刚好给全国34个区域总,每个配一辆全新的宝马5系。

这哪里是赋能业务。这是供了个只会收钱不干活的爹。

2026零售企业数据湖迁移项目架构图
2026零售企业数据湖迁移项目架构图

漕帮与海商的利益旧账

实话讲,数据湖这个概念喊了快十年,为什么今年突然在国内火得一塌糊涂?真不是技术突然突破了什么。是原来的玩法玩不下去了,利益重新洗牌而已。

原来的数据仓库、数据中台那套逻辑,本质就是先整理,后使用。所有数据上来,先得按照技术部门定的标准,梳理建模、分库分表,业务部门才能用。这套模式里,厂商赚的就是整理数据的钱。一个千万级的项目,六成营收都是实施服务费,客户买的那点软硬件,还不到一半。

国内本土的案例太明显了。做产业互联网数据服务的滴普科技,去年公开的业务结构里,数据湖相关项目占比已经从2023年的18%跳到了62%。反观早年做数据仓库起家的老牌上市企业,去年半年报里,传统数据中台项目的营收直接下滑了38%,平均客单价降了42%——这个跌幅,比2024年茅台一批价的跌幅还大。

这个博弈像什么?我觉得太像清代道光年间的漕运之争了。原来南粮北运都走京杭大运河,官办漕运,层层漕帮盘剥,运一石粮食到京城,成本要翻三倍。后来有商人提出走海运,成本直接砍到原来的四分之一,结果被漕帮和既得利益者拼命反对,说海运不安全,说漕运关乎国运。说白了,还不是海运动了人家的饭碗?

现在圈内天天骂数据湖不安全、不稳定,说数据湖不如数据中台靠谱的,你品品,是不是同一个逻辑?

云原生数据湖存储计算分离架构示意图
云原生数据湖存储计算分离架构示意图

敲在每个数据从业者头上的变化

敲在每个数据从业者头上的变化
敲在每个数据从业者头上的变化

讲完了行业大佬的利益博弈,得落回我们普通人身上。毕竟不管风口怎么吹,最后都会落到每个打工人的饭碗上。

很多干数据开发、BI的朋友,一听到数据湖就慌。说原来业务部门要什么都找我,现在他们自己就能拉数,我会不会失业?

我之前认识广州一个直播电商公司的数据主管,他们公司原来五个数据开发,三个天天轮流出日报、周报、投放数据报表,一个月加二十天班,大部分时间都在找上个月第三周广州区域的美妆点击数据存在哪个库。去年他们上了数据湖之后,不用提前建模转格式,运营懂点基础SQL就能自己拉数,那三个数据开发直接从报表组转去了用户增长组,专门做标签建模和投放优化。今年上半年,靠他们优化的复投模型,公司直接多赚了一千八百多万,三个人分红拿的钱,比过去两年工资加起来还多。

不过话说回来,我见过太多企业上数据湖,上来就错了。开口就要湖仓一体,就要最先进的架构,砸几千万堆硬件,最后还是技术部门自嗨。数据湖的核心,从来都不是技术多牛,是把数据的使用权还给业务,原来技术部门握着实权,收着门票,现在把门打开了,谁用谁负责,这不就是权责分配的问题吗?

你现在回头翻翻你公司的数据中台,那些你花了几个月梳理完的数据集,有多少从上线到现在,从来没人碰过?

作者|大讲堂

排版|大讲堂

审核|小北

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。如有侵权请联系删除。
文章名称:数据湖不是技术问题,是权责问题
文章链接:https://www.lfdjt.com/info_23_23781.html