Awesome Jev:初期プロジェクトとユースケース
コミュニティが初期のJevプロジェクトとアイデアを整理し、APIアクセスを得た開発者が実践方向を探せるようにしています。
著者は情報検索ベンチマークMS MacroでJevを評価し、MAPとnDCGのどちらを重視するかによって、訓練済みmonoBertと同等であることを確認しました。
Incredible work, I'm going to test this theory of the score levels. I evaled Jev against MS Macro and it was comparable to trained monoBert (depending if you cared more about MAP or nDCG)