BM25を使用してCodexのトークンの消費を30%抑える

<a href="https://zenn.dev/knowledgesense/articles/9e55a3bb67729c" target="_blank">https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fzenn.dev%2Fknowledgesense%2Farticles%2F9e55a3bb67729c</a> / Photo: <blockquote cite="https://zenn.dev/knowledgesense/articles/9e55a3bb67729c" title="BM25を使用してCodexのトークンの消費を30%抑える"><cite><img src="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fzenn.dev%2Fknowledgesense%2Farticles%2F9e55a3bb67729c" alt="" /> <a href="https://zenn.dev/knowledgesense/articles/9e55a3bb67729c">BM25を使用してCodexのトークンの消費を30%抑える</a></cite><p><a href="https://zenn.dev/knowledgesense/articles/9e55a3bb67729c"><img src="https://cdn-ak-scissors.b.st-hatena.com/image/square/ce351969046f941e3f0665b4553ef6704191d633/backend=imagemagick;height=90;version=1;width=120/https%3A%2F%2Fres.cloudinary.com%2Fzenn%2Fimage%2Fupload%2Fs--5R3OHPZz--%2Fc_fit%252Cg_north_west%252Cl_text%3Anotosansjp-medium.otf_55%3ABM25%2525E3%252582%252592%2525E4%2525BD%2525BF%2525E7%252594%2525A8%2525E3%252581%252597%2525E3%252581%2525A6Codex%2525E3%252581%2525AE%2525E3%252583%252588%2525E3%252583%2525BC%2525E3%252582%2525AF%2525E3%252583%2525B3%2525E3%252581%2525AE%2525E6%2525B6%252588%2525E8%2525B2%2525BB%2525E3%252582%25259230%252525%2525E6%25258A%252591%2525E3%252581%252588%2525E3%252582%25258B%252Cw_1010%252Cx_90%252Cy_100%2Fg_south_west%252Cl_text%3Anotosansjp-medium.otf_34%3Asasakuna%252Cx_220%252Cy_108%2Fbo_3px_solid_rgb%3Ad6e3ed%252Cg_south_west%252Ch_90%252Cl_fetch%3AaHR0cHM6Ly96ZW5uLmRldi9pbWFnZXMvZGVmYXVsdC1wdWJsaWNhdGlvbi1hdmF0YXIucG5n%252Cr_20%252Cw_90%252Cx_92%252Cy_102%2Fco_rgb%3A6e7b85%252Cg_south_west%252Cl_text%3Anotosansjp-medium.otf_30%3A%2525E3%252583%25258A%2525E3%252583%2525AC%2525E3%252583%252583%2525E3%252582%2525B8%2525E3%252582%2525BB%2525E3%252583%2525B3%2525E3%252582%2525B9%252520-%252520%2525E7%252594%25259F%2525E6%252588%252590AI%2525E3%252581%2525A8RAG%2525E3%252581%2525AE%2525E5%2525AE%25259F%2525E8%2525A3%252585...%252Cx_220%252Cy_160%2Fbo_4px_solid_white%252Cg_south_west%252Ch_50%252Cl_fetch%3AaHR0cHM6Ly9zdGF0aWMuemVubi5zdHVkaW8vdXNlci11cGxvYWQvYXZhdGFyL2ZkMzU2MDA4YWUuanBlZw%3D%3D%252Cr_max%252Cw_50%252Cx_139%252Cy_84%2Fv1627283836%2Fdefault%2Fog-base-w1200-v2.png%3F_a%3DBACMTiAE" alt="BM25を使用してCodexのトークンの消費を30%抑える" title="BM25を使用してCodexのトークンの消費を30%抑える" class="entry-image" /></a></p><p>導入 こんにちは、株式会社ナレッジセンスの須藤英寿です。 今回は、コード探索にBM25を組み込むことで、回答品質とトークン消費がどのように変わるのかを、自社のコードベースで検証しました。 きっかけは、2026年7月に公開された論文「BM25 Wins at Scale」[1]です。 サマリー 最近のコーディングエージェント、トーク...</p><p><a href="https://b.hatena.ne.jp/entry/s/zenn.dev/knowledgesense/articles/9e55a3bb67729c"><img src="https://b.hatena.ne.jp/entry/image/https://zenn.dev/knowledgesense/articles/9e55a3bb67729c" alt="はてなブックマーク - BM25を使用してCodexのトークンの消費を30%抑える" title="はてなブックマーク - BM25を使用してCodexのトークンの消費を30%抑える" border="0" style="border: none" /></a> <a href="https://b.hatena.ne.jp/entry/s/zenn.dev/knowledgesense/articles/9e55a3bb67729c"><img src="https://b.st-hatena.com/images/append.gif" border="0" alt="はてなブックマークに追加" title="はてなブックマークに追加" /></a></p></blockquote>