原文著者: @tagucci / 6日前

日本語ベンチマークでJevの性能を検証する

#AIエージェント
#機械学習
#OSS

AIで作成し、掲載基準に基づいて自動選定した要約です。

Jevは日本語のベンチマークデータで試験問題カテゴリで高いスコアを記録した
試験問題カテゴリでは他2モデルよりも10ポイント以上高いスコア、選択式の問題に限定して評価
試験問題カテゴリのスコアが高い理由が明確でなく、学習データの混入が疑われる

日本語ベンチマークでJevの性能を検証する

Zenn / 原文を読む