Scraps 最終更新 2026/11/11 07:30

原文著者: @mappy /

少年団の役員向けRAGを作った — 条文単位に切り直しただけで正答52%→72%、ハイブリッド検索は効かなかった

AIで作成し、掲載基準に基づいて自動選定した要約です。

  • 会則の質問に答えるRAGを構築し、条文単位に切り直すことで正答率が52%から72%に上昇した
  • チャンク分割を固定長から条文単位に変更、検索方式にBM25を併用、会則の枠を設定
  • ハイブリッド検索や会則の枠の追加は効果が限定的で、ローカルモデルへの移行では正答率が2割に低下した
少年団の役員向けRAGを作った — 条文単位に切り直しただけで正答52%→72%、ハイブリッド検索は効かなかった

Zenn / 原文を読む