Databricks RuntimeにおけるNEAREST BY Joinによるベクトル検索のスケール

英語原文から AI が翻訳しました。 英語版を見る

* NEAREST BYは、バッチベクトル検索のための新しいSQLジョインです。クエリの各行に対して、ベクトル類似度または距離に基づいて最も近いk行を正確または近似的に検索します。 * カスタムのブロック化GEMM kernelを持つ統合Photonオペレーターにより、ハードウェアのピーク算術スループットに近い距離スコアリングを実現します。 * 別途のシステムを同期・運用する必要なく、Lakehouse自体がベクトルストアとして機能します。IVFベクトルインデックスは通常のliquid-clustered Deltaテーブルであり、読み込み時に大半のパーティションをプルーニングします。