🔥 文章· 集成与管道· 技术
共 18 篇· 今日新增 6
⭐ 编辑精选
时序热度
📋 全部🗄️ 数据库 (98)🏠 湖仓与存储 (88)🔀 集成与管道 (42)🏗️ 平台与中台 (6)📊 分析与BI (14)🤖 AI for Data (36)🧬 Data for AI (75)🛡️ 治理与安全 (55)🔁 要素与流通 (236)💰 投融资 (1)📜 政策标准 (10)🔭 产业观察 (37)

💾 AI数据产业技术
不幂等的数据管道,迟早加倍还你
300行回填脚本,在120万行处撞上死锁,操作员一次本能重跑,让一批客户余额凭空翻倍,三天后才被客服发现。本文复盘这起典型事故,拆解幂等性为何是数据管道的第一性
4097字11月19日 16:25

💾 AI数据产业技术
实时数据管道,从PPT走进生产了
Spark 4.3 把有状态处理带入实时模式,Pinterest 用事件时间水印解决 PB 级分区的完整性定案,DuckDB 生态则在单机与云端两线狂奔。三个信
4422字11月17日 18:24

🌐 综合技术
一段脚本重跑两次,余额悄悄翻倍了

💾 AI数据产业技术
引擎改个默认值,多少数据管道要塌?

🌐 综合技术
公开数据没有SLA,你的管道全押上了
公开数据源没有SLA、没有弃用通知,却在支撑大量数据管道。本文拆解数据源的三种死法,指出『200不等于健康』这一最贵误判,并给出一套把『来源会消失』写进架构的工
3740字10月18日 06:24

🌐 综合⭐精选技术
数据流的账号墙,比想象中难拆
以AWS基于KPL/KCL构建跨三账号流式管道的实践为切口,拆解资源策略、跨账号IAM与客户托管KMS密钥背后的工程取舍,论证大规模数据平台的核心矛盾:既要隔离
3543字10月13日 00:24

🌐 综合技术
Zillow那张整齐的表,其实是两张
一位把Zillow爬虫当副业的开发者,用真实运行日志量出了这个数据源的三条底细:单次搜索820条硬上限、一套Schema下售卖页与租赁页两种字段填充、以及一个会
3281字10月10日 14:25







