AI成了数据仓库的新甲方
Claude直连企业数据库自动跑SQL、Agent靠dbt文档选对表、Netflix用知识图谱扛住3800万事件/秒——三件事指向同一个判断:数据基础设施的验收标准正在改变,AI正在取代人类成为数据平台的第一用户。
AI成了数据仓库的新甲方
导语: 上周,Claude 上线了实时可视化看板功能,能直连企业数据库自动跑SQL;同一天,一位工程师发文说,他给AI搭数据查询通道,时间没花在写代码上,全花在了改表描述上;再往前,Netflix 公开了用知识图谱扛住每秒3800万事件的可观测体系。三件事看起来不相干,其实指向同一个判断:数据平台的第一用户,正在从人变成AI。
📊 Claude直连数据库,吓到的不只是BI工程师
BI做了二十年报表,第一次发现自己不是唯一会看板的角色了。
事情从一条社交媒体发言开始发酵。博主朱卫军AI指出,Claude 新增了实时可视化看板和动画演示两个功能,而且"它不是简单的html页面,而是支持数据查询和可视化,实时连接企业数据库,完全可以做生产级部署"。他甚至直接下了判断:数据分析师和BI工程师危险了。
真正值得盯着看的,是连接能力。Claude 能直连 BigQuery、Snowflake、Databricks、Salesforce 这些主流数据源,自己写SQL、跑查询、出图表。注意这个动作链:以前是分析师打开BI工具拖维度、拖指标,现在是一条自然语言直接穿透到底层仓库。
过去两年的ChatBI浪潮,本质上是把问答界面套在BI引擎外面,AI负责"听懂人话",取数逻辑还是人的那套。而现在这条链路里,AI承担的是从理解需求、选表、写SQL到部署看板的全过程。据多位接触过这类方案的从业者私下说,演示阶段效果惊艳,但一进企业内网,最先卡住的不是模型能力,而是数据源权限和行级安全怎么开放给Agent。
我的判断是:短期内分析师不会消失,但BI的价值链会被拆开重组。 "写SQL"这个环节的价值趋近于零,"定义口径、审核结果、管理权限"的价值会暴涨。真正的门槛在于——AI查的是生产库,每一次错误查询都是真金白银的算力账,每一条错误结论都可能直接进管理层的PPT。
🔑 Agent真正的提示词,藏在dbt文档里
模型再聪明,选错了表,一切归零。
一位工程师公开复盘了他搭建 MCP 服务器、让AI Agent查找和查询公司数据的过程。最有意思的不是技术方案,而是他的时间去向:大部分时间没花在服务器上,花在了一个问题上——为什么Agent总是选错表?
答案几乎都指向 dbt 文档。他总结出几条很扎心的经验:
第一,Agent只能看到描述的开头。给模型做索引时,长文本会被截断,真正参与检索的只有模型描述的第一行和每个字段描述的前两句。写在后面的内容,Agent永远看不到。所以关键信息必须放在第一句:这张表是什么粒度、什么口径、不含什么。
第二,绝对不要让AI从代码反推文档。这是他称之为"最大的陷阱"的操作:300个模型没时间写文档,就让AI看着SQL生成描述,结果得到类似"user_id:用户的标识符"这种废话——Agent本来就能看到这个字段叫user_id,它真正需要知道的是该和哪张表join、能不能为空、是玩家维度还是账号维度、哪些同名字段绝不能混用。让AI读代码写文档,只会陷入"代码向自己解释自己"的死循环。文档必须来自真正懂业务语义的人。
这一段的产业含义比功能本身大得多:数据治理第一次有了直接可量化的回报。 过去推元数据建设,CFO会问"这东西能省多少钱",团队只能谈合规和效率。现在答案很具体——表描述写得好一档,Agent选表准确率就高一档,智能问答的可用性就高一档。治理预算的叙事,正在从"合规成本"切换成"AI基础设施投资"。
🕸️ Netflix的答案:把可观测数据变成知识图谱
日志堆得再高,也长不出判断力;能长出判断力的,是结构化的知识。
在一场公开分享中,Netflix 工程师 Prasanna Vijayanathan 和 Renzo Sanchez-Silva 讲解了他们如何应对每秒3800万事件的可观测性挑战。数字先摆在这:38M events/sec,任何一个人类值班工程师面对这个量级的告警流,都只能做被动救火。
他们的解法不是堆更多监控面板,而是方向性调头:用AI驱动的运维本体(operational ontology)替代被动式监控,把MELT(指标、事件、日志、链路追踪)四类遥测数据统一沉淀成可查询的知识图谱,再结合 Claude 和图数据库跑Agentic工作流,实现自动分诊、根因分析,乃至自我修复。
这和前面两个案例是同一个逻辑的不同切面:
- Claude直连数据仓库——AI成为分析场景的第一用户;
- dbt文档即提示词——元数据成为AI的接口层;
- Netflix的知识图谱——AI成为运维场景的第一用户。
共同点在于:要让Agent做出正确决策,喂给它的不能是原始日志和裸表结构,必须是带本体、带语义、带关系的结构化知识。图数据库在这波浪潮里意外站上了二线C位——它天然适合回答"这个告警和上游哪个服务变更相关"这类多跳关系问题,而这恰恰是Agent做根因分析时最需要的。
我的判断:可观测性数据正在从"运维成本中心"变成"AI运维语料资产"。 谁先把遥测数据图谱化、本体化,谁的自动化运维就先跑起来。这也会反过来推动采集端和存储端的标准之争。
⚠️ 真正的瓶颈不是模型,是十年欠下的元数据账
AI没有让数据工程变简单,它只是把窟窿照得更亮了。
把三个案例放在一张表里看,会发现他们依赖的底层能力惊人地一致:
| 案例 | 场景 | 关键依赖 | 产业含义 |
|---|---|---|---|
| Claude实时看板 | 分析与报表 | 数据源连接器+SQL生成 | BI界面从人转向Agent |
| dbt文档即提示词 | 智能选表查询 | 元数据与描述质量 | 治理从合规成本变基建投资 |
| Netflix知识图谱 | 运维可观测 | 本体建模+图数据库 | 遥测数据资产化 |
据多位接近头部云厂商的人士透露,企业在试点AI查数项目后,最先爆掉的问题排前三的是:权限模型不支持Agent身份、指标口径在各部门之间打架、以及Agent放开跑之后账单失控。没有一个和"模型不够聪明"有关。
如果把当下的玩家放到技术门槛和商业价值两个维度上,格局其实已经很清晰:
纯套壳的ChatBI产品处境最尴尬——技术门槛低,而价值又被上游的模型能力和下游的语义层双向挤压。真正卡住好位置的是两类人:一是把语义层、数据目录做深的平台,二是像Netflix这样把本体建模做成了内部标准能力的团队。接下来的竞争,不是谁的模型更强,而是谁的机器可读知识更厚。
🧭 数据团队的下一个岗位:给AI写文档的人
未来最抢手的数据工程师,可能是文笔最好的那一个。
一个可以直接预期的场景:某数据团队负责人在复盘会上发现,AI问数准确率上不去,原因不是模型、不是算力,而是有几十张核心表的描述是三年前实习生写的。于是团队排期里第一次出现了"表描述重写"这个正经需求——要写清粒度、口径、空值含义、join规则,第一句话就要说重点。
这会重塑数据团队的分工。写SQL的价值急剧下降,而三种新角色在浮出来:
语义工程师——维护dbt文档、指标口径和本体,本质上是给AI写接口文档;Agent审计员——审核AI生成的SQL和结论,管理Agent的查询权限;成本架构师——为每一次AI查询设计缓存、预聚合和限额策略,因为Agent不知道节制。
对厂商来说,战场也很明确:数据目录工具、语义层平台、图数据库、元数据管理,这些过去讲起来干燥乏味的品类,突然都拿到了同一个新故事的入场券——"让Agent用对你的数据"。而模型厂商的每一次功能更新,都在替这个故事做免费广告。
小结
从Claude直连数据库,到dbt文档成为Agent的提示词,再到Netflix用知识图谱扛住3800万事件/秒,三件事共同宣告了一个转折:数据平台的价值验收标准,正在从"人用着顺不顺"变成"AI读得懂不懂"。未来两三年,决定一家企业AI数据应用上限的,不会是模型,而是那笔十年欠下的元数据账。早还早受益,晚还赔利息。