AI for Data🔥8.0

ONS公开实验过程:一次上下文工程的对照实验

原标题: ONS公开实验过程:一次上下文工程的对照实验

dbtLabs·2026/10/26 16:39:00🔗 原文

📋总体概括

英国国家统计局(ONS)数据工程团队发布了一项上下文工程的对照实验:同一个AI技能针对四种上下文来源各运行80次,比较其对成本、耗时与输出质量的影响。结果显示,使用人工策划的工程化摘要作为上下文,可令成本降低48.5%、运行时间缩短43.2%,同时保持输出质量,为LLM应用中的上下文供给策略提供了少见的量化证据,体现了公共数据机构对AI工程实践的透明化态度。

⚡关键信息

  • ▸ONS团队将同一个AI技能针对四种不同上下文来源各重复运行80次,构成对照实验
  • ▸使用工程化策划摘要作为上下文时,成本降低48.5%,运行时间缩短43.2%
  • ▸实验强调输出质量不因精简上下文而下降,摘要反而优于原始数据的直接投喂
  • ▸ONS以「展示工作过程」的方式公开方法论,倡导AI实验的可复现与透明

🔥犀利点评

大多数团队还在拍脑袋决定给LLM塞多少上下文时,ONS用80次×4组的笨办法把直觉变成了数据:上下文不是越多越好,精心策划的摘要又便宜又快。这套方法论本身比那两个百分比更值钱——公共机构愿意公开失败与细节,恰恰是多数创业公司做不到的稀缺品。

本文由本站自动聚合,以下为原始来源:前往 dbtLabs 阅读全文 →