Wikipediaリンクレース：数千の選択肢から選ぶデモ
モデルが数百から数千のリンクから次の一手を選び、制約付き出力での高速な意思決定をゲーム形式で示します。元投稿には4分04秒の動画があります。
JEV再ランキング評価の可視化
TREC-1 WSJ と TREC DL 2019 の評価セット向けリプレイデモを構築。クエリを選んで、BM25+JEV と monoBERT vs JEV のランキングとメトリクスの変化を確認できます。
Benchmark tables are hard to picture, so I built a replay for two evaluation sets: TREC-1 WSJ: BM25 + JEV and TREC DL 2019:monoBERT vs JEV. Pick a query to watch both the ranking and metrics change at https://jev-reranking.netlify.app
· 0 likesOpen on X
More like this
JevとTypeSafe AIによるセマンティッククエリのユースケース
Nathan LeClaire氏がJevとTypeSafe AIのセマンティッククエリのユースケースを紹介し、可能性はまだ表面に過ぎないと述べる。
Jevでトランプ対ハリス討論のライブBSメーターを構築
著者はJevを使い、トランプ対ハリス討論の全発言にライブBSメーターを適用。両候補に各5つのはい/いいえ質問を行い、合計1,191回のJev呼び出し、118万トークン、中央値415ms、総コスト0.0497ドル。
