導入 こんにちは、株式会社ナレッジセンスの須藤英寿です。 今回は、コード探索にBM25を組み込むことで、回答品質とトークン消費がどのように変わるのかを、自社のコードベースで検証しました。 きっかけは、2026年7月に公開された論文「BM25 Wins at Scale」[1]です。 サマリー 最近のコーディングエージェント、トークンの消費が激しいです。 その中でも、特に多くのトークンを消費しているのが、「ファイルの検索」です。以前こちらでも紹介したのですが、Claude CodeやCodexは、非常にシンプルなキーワード検索しか実装していません。それゆえに検索の効率が悪い、という課題があります。 そこで、Wang氏らは「BM25」というキーワード検索を利用することで、エージェントの検索効率を劇的に上げられることを示しました。 今回はこのアイディアを自社コードベースに用いて、「BM25」を使