Databricks 推出 NEAREST BY 向量搜索 Join

Databricks 在 Databricks Runtime 中原生推出 NEAREST BY top-k 排序 join 和 VECTOR_SEARCH 能力，把批式向量搜索变成关系操作，基于 Spark 与 Photon 引擎执行。 据 Databricks 介绍，该功能包含一个新的 join 语法 NEAREST BY，将 top-k 排序 join 作为一等关系操作；其重写后下沉到三个原语：SIMD 加速的距离函数和有界 top-k 聚合，并用融合的 Photon 算子替换执行计划的中段。此外提供可选的 IVF 索引，作为普通 liquid-clustered Delta 表构建，使 APPROX 查询只需对部分基础向量打分。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。