少年団の役員向けRAGを作った — 条文単位に切り直しただけで正答52%→72%、ハイブリッド検索は効かなかった
- 会則の質問に答えるRAGを構築し、条文単位に切り直すことで正答率が52%から72%に上昇した
- チャンク分割を固定長から条文単位に変更、検索方式にBM25を併用、会則の枠を設定
- ハイブリッド検索や会則の枠の追加は効果が限定的で、ローカルモデルへの移行では正答率が2割に低下した
少年団の役員向けRAGを作った — 条文単位に切り直しただけで正答52%→72%、ハイブリッド検索は効かなかった


