Scraps 最終更新 2026/10/30 14:30

原文著者: @nkhr /

OpenSearchのLLM-as-a-Judgeを日本語の商品検索で動かして、人手ラベルと比べてみた

AIで作成し、掲載基準に基づいて自動選定した要約です。

  • OpenSearchのLLM-as-a-Judgeを日本語の商品検索で試した
  • LLM-Judgmentで0〜1の段階評価と二択評価のどちらかを選べ、ESCIのラベルと比較した
  • LLMはクエリの文脈を正確に理解できず、人手ラベルと解釈の違いが出る場合がある
OpenSearchのLLM-as-a-Judgeを日本語の商品検索で動かして、人手ラベルと比べてみた

Zenn / 原文を読む