Vespaでベクトル検索によるマルチモーダル検索システムを実装する - 人間だったら考えて

この記事は何？ マルチモーダル検索の流れ Vespaを利用したマルチモーダル検索の実装 実装する検索システムの概要 商品embeddingの管理方法 Embeddingの推論 Vespaのスキーマ設定 スキーマの定義 ランキングロジックの定義 Vespaへのデプロイとデータフィード マルチモーダル検索の実行 Vespaでのベクトル検索の方法 入力：検索キーワード、検索対象：画像 入力：画像、検索対象：商品タイトル 応用：ベクトル検索とキーワード検索の組み合わせ おわりに この記事は何？ 情報検索・検索技術 Advent Calendar 2023 - Adventar の1日目の記事です。 マルチモーダル検索とは、テキストや画像、音声など複数の異なるタイプのデータを使用して情報を検索する技術です。 例えば マルチモーダル検索とは何か: 「視覚を持った LLM」でビジネスが変わる | Goo