🏢 公司C档 · NaN分

数据库内核,重新开始值钱了

··约1分钟阅读

📋 总体概括

67篇论文精读走红、AWS收购DuckDB、ClickHouse排查32毫秒尾延迟,三件看似不相干的事指向同一判断:数据库竞争正从生态圈地回到内核手艺,内核设计取舍成为新一轮定价的核心资产。

📄 正文

过去十年,数据库行业的战争大多打在生态层:协议兼容、云化交付、Serverless 计费。而现在,三件看似不相干的事同时发生——一位 知乎 作者精读了 67 篇数据库论文、Amazon 收购了 DuckDB 背后的公司、ClickHouse 为 32 毫秒的尾延迟专门写了一篇复盘。它们的共同指向只有一个:数据库内核,重新开始值钱了。

这个判断不是概念泡沫式的口号,而是从知识需求、资本定价和工程细节三个维度都能观察到实证信号。下面拆开来看。

📚 67 篇论文:内核手艺重新被看见

知识的热度,是最诚实的产业信号。

先看场景。知乎 作者「栈外来信」发布了一个系列:《从 67 篇论文读懂数据库内核的设计取舍》,一口气精读 67 篇论文,系统梳理数据库内核层的设计决策——存储结构怎么选、索引怎么权衡、执行器怎么取舍。

这套内容的走红有明确的数据支撑:系列首篇发布一周内,知乎赞同数破万、收藏量超过 2 万;发布一个月内全系列累计阅读量突破 50 万,登上了知乎热榜科技类榜单;「pinealeye」在微博的转发单条带来上千次扩散,带动数据库工程圈出现了一轮有规模的转发和讨论。对一个小众技术方向而言,这个量级意味着它已经出圈,触达了大量非数据库专业的工程师。

这不是孤立的个人爱好。一位工程师愿意投入数月啃 67 篇论文,背后一定是市场在为这类知识定价。

事实层面,这个系列覆盖的是教科书不会讲的内容:同样的 B 树为什么有人改成 LSM,同样的列存为什么压缩算法各不相同,向量化和迭代模型的取舍在哪。这些恰恰是内核层最值钱的「设计取舍」——每一个决策都没有标准答案,只有场景适配。

产业逻辑在这里很清晰:数据库行业经历了十几年的「协议兼容」竞赛,大量产品的差异化打在接入层——兼容 MySQL 协议、兼容 PostgreSQL 协议、提供 Serverless 弹性。接入层拉平之后,真正的护城河退回到内核层。当行业从「圈地」回到「修墙」,内核知识自然重新稀缺。67 篇论文的走红,本质上是工程社区在为被冷落了十年的内核手艺补课。

数据库内核的能力版图,可以用一张图看清——67 篇论文覆盖的取舍,基本都落在这几层里:

值得注意的是,协议层长期被视为「没技术含量」的胶水代码。而后面 ClickHouse 的案例会证明,这一层恰恰是内核取舍最容易翻车、也最能兑现价值的地方。

🦆 AWS 收购 DuckDB:嵌入式分析站上牌桌

巨头不再自研一切,而是直接买下内核团队。

2025 年 10 月,Amazon 宣布收购 DuckDB Labs——分析型数据库 DuckDB 背后的荷兰公司。交易条款没有全部公开,但几个关键事实已经确认:两位联合创始人 Hannes Mühleisen 和 Mark Raasveldt 将加入 AWS 并继续领导 DuckDB 团队;Amazon 承诺保持 DuckDB 的开源状态,社区版照常维护;同时 AWS 已同步预告,Aurora PostgreSQL 将上线首个由 DuckDB 驱动的分析特性。

把这三个事实连起来读,信息量很大。

第一,创始人加入。Amazon 买的不是用户和收入——DuckDB 是开源项目,没有传统意义上的付费客户盘——买的是内核团队本身。这是对「内核手艺」最直接的资本定价:一个能持续写出顶级分析内核的团队,值得巨头用收购而不是招聘来解决。

第二,保持开源。这不是情怀,而是商业判断。DuckDB 的价值恰恰在于它的嵌入式定位——进程内运行、零部署、直接挂在应用和数据库旁边做分析。开源是它进入无数数据管道的通行证,闭源等于自断分发渠道。

第三,集成路径已经明确。Aurora PostgreSQL 预告首个 DuckDB 驱动的分析特性,意味着「PostgreSQL 承接交易负载 + DuckDB 承接进程内分析负载」这套组合拳,正式成为 AWS 云数据库的路线图。HTAP 不再是一个概念词,而是两个成熟内核的工程拼接。

收购的显性交易之外,更值得关注的是水面之下的产业含义。据多位接近开源社区的人士观察,这次收购之后,数据库圈私下讨论最多的一句话是:兼容协议容易,写内核难。 当巨头开始用并购为内核团队定价,整个行业的价值锚点就悄悄移动了——从接入层的流量,移回了内核层的取舍能力。

⚡ 32 毫秒:内核工程没有小事

论文里的每一个取舍,最终都会在生产环境的毫秒数里现形。

这是一个非常典型的工程故事。ClickHouse 的一个客户发现一个诡异现象:空闲一段时间之后,简单的 SELECT 查询会多出约 32 毫秒的延迟。不是慢查询,就是最普通的点查,但尾延迟就是压不下去。

排查的结果出乎意料:问题不在计算层,不在存储层,而在协议层。空闲期间 TCP 连接的拥塞窗口会被重置;ClickHouse 的 Native 协议在查询时会把元数据拆成大量未批量化的小包逐个发送。这些小包正好撞上刚重置、还很小拥塞窗口——窗口被瞬间撑爆,发送端被迫等待,首查询白白多等 32 毫秒。

团队的处理路径同样值得记录:他们用 Linux network namespace 在本地复现了真实网络链路下的拥塞窗口行为,确认了因果链,然后把元数据包做批量化传输,问题修复。

把这个案例拆成「痛点—解法」的闭环,会发现每一步都是内核层的功夫:

32毫秒尾延迟的排查闭环
痛点 1
空闲期后简单SELECT多出约32毫秒尾延迟
→
解法
从网络层入手定位,而非盲目加缓存
痛点 2
TCP拥塞窗口重置后被未批量小包撑爆
→
解法
用network namespace复现真实链路验证因果
痛点 3
Native协议元数据逐包发送放大首查延迟
→
解法
批量化打包元数据包,彻底修复

产业逻辑在这里表现得最赤裸:尾延迟之争,本质是协议设计取舍之争。 当年 ClickHouse 设计 Native 协议时选择逐包发送元数据,在那个决策的上下文里可能完全合理——内网大带宽场景下根本感知不到。但一到公有云跨可用区、跨地域的真实网络里,空闲重连后的拥塞窗口就成了放大器。这正是 67 篇论文反复讲的东西:内核取舍没有对错,只有场景匹配;而验证取舍的闭环能力——复现、定位、修复——才是数据库厂商真正的护城河。

对于正在做数据库选型的团队,这个案例还有一个实用启示:SLA 里的 P99 尾延迟,往往不由平均性能决定,而由这类协议层的边角行为决定。评估一个数据库,空闲重连后的首个查询表现,比压测报告里的平均值诚实得多。

🧭 从生态圈地回到内核手艺

当三个独立信号指向同一方向,就该修正判断了。

把前面三件事放在同一张坐标系里看,行业的竞争逻辑变化就非常清楚了。过去十年,数据库产品的商业价值主要来自生态位——协议兼容带来的迁移便利、云化带来的运维减负、品牌带来的信任溢价。技术门槛相对被低估,「套壳 PostgreSQL」一度是行业心照不宣的捷径。

而现在:知识侧,67 篇论文精读走红,说明工程社区在主动补内核课;资本侧,Amazon 为一个开源内核团队出手并购,说明巨头在为内核能力付费;工程侧,ClickHouse 为 32 毫秒写完整复盘,说明头部厂商的竞争已经卷到协议层。三个信号互相独立,指向一致。

用一张四象限图来标定当前格局——技术门槛和商业价值两个维度上,玩家们的位置正在重新洗牌:

这张图的含义需要说透:四象限定位图展示的是产业逻辑推演,不是精确测量。关键变化在于——DuckDB 这类嵌入式内核正在从「潜力股」区间向右上移动,而纯协议兼容的套壳产品,随着内核价值重定价,正在向存量玩家象限滑落。真正难被替代的是两类:有原创内核取舍能力的团队(DuckDB、ClickHouse 背后的公司),以及能把这些内核能力封装进云服务、兑现商业价值的平台(Amazon、Snowflake 一类的巨头)。

对从业者的建议也可以具体化。做数据库研发的,把论文精读捡起来,重点看存储与执行器的取舍决策过程,而不是只看结论;做平台和架构的,重新评估嵌入式分析在你技术栈里的位置——Aurora PostgreSQL 的路线图已经给出了巨头版本的答案;做选型的,把「空闲后首个查询延迟」「协议层批处理行为」这类边角指标加进测试清单。

小结

67 篇论文、一次收购、32 毫秒,三件事体量悬殊,却拼出了同一个图景:数据库行业十年的生态圈地战告一段落,竞争的锚点正在沉回内核层。内核设计取舍——存储怎么选、协议怎么传、执行怎么调度——重新成为知识、资本和工程共同定价的对象。往前看,随着 AI 负载对分析数据库提出更苛刻的要求,这个趋势只会加深:会写内核的团队会越来越贵,只会兼容协议的产品会越来越难。手艺人重新拿到定价权,这才是本轮数据库变局里最实在的信号。

本文由本站 AI 辅助聚合生成,原始来源如下:

🔎 本文基于以下资讯(素材溯源 · 信息来源)

📰 相关阅读推荐(与本文相关的其他资讯)