NEAREST BY Join：在Databricks Runtime中扩展向量搜索

📋总体概括

Databricks提出NEAREST BY Join语法，把向量检索以原生SQL连接的形式嵌入其运行时，将向量搜索从独立服务回归到分析引擎内部。文章指出向量搜索起源于聊天机器人等服务场景，但真正的规模化需求来自分析侧的相似度匹配、去重、推荐等批量计算。通过在查询引擎中直接支持ANN连接，用户无需外挂专用向量数据库即可在湖仓数据上做大规模向量检索，降低数据搬运与架构复杂度。