Wikipediaリンクレース：数千の選択肢から選ぶデモ
モデルが数百から数千のリンクから次の一手を選び、制約付き出力での高速な意思決定をゲーム形式で示します。元投稿には4分04秒の動画があります。
Jev batch がリランカーリーダーボードでPerplexity Choiceと同点
hevmindの3コーパスリランカーリーダーボードで、Jev batchとPerplexity Choiceがともに平均nDCG@10で0.501を記録し、Mixedbread v3.1 listwiseが0.511でリードしています。
On our three-corpus reranker leaderboard, Perplexity choice and Jev batch both score 0.501 mean nDCG@10. Mixedbread v3.1 listwise leads at 0.511. Recut by corpus (free account): https://hevmind.com/research/rerankers/?v=2&utm_source=x&utm_campaign=jev-has-company…
· 0 likesOpen on X
More like this
JevとTypeSafe AIによるセマンティッククエリのユースケース
Nathan LeClaire氏がJevとTypeSafe AIのセマンティッククエリのユースケースを紹介し、可能性はまだ表面に過ぎないと述べる。
Jevでトランプ対ハリス討論のライブBSメーターを構築
著者はJevを使い、トランプ対ハリス討論の全発言にライブBSメーターを適用。両候補に各5つのはい/いいえ質問を行い、合計1,191回のJev呼び出し、118万トークン、中央値415ms、総コスト0.0497ドル。
