Jevが分類器評価で品質と速度の両方で優位
Malte Ubl氏がTypeSafe AIのJevを既存の分類器評価に適用したところ、品質で評価を飽和させ、Gemini 2.5 Flash Liteより6倍高速だった。
JevBench v1.2.6 更新：3つの新モデル行を追加
JevBench v1.2.6 が公開され、openJev Verdict 1.4、SimpleJev Qwen3.8-27B、SimpleJev Qwen3.6-35B-A3B の3行が追加。同一の534件の固定意思決定で評価。
JevBench v1.2.6 is live with three new rows: • openJev Verdict 1.4 — #4, 72.5 • SimpleJev Qwen3.8-27B — #9, 67.3 • SimpleJev Qwen3.6-35B-A3B — #16, 63.8 Same frozen 534 decisions. Full table: https://benchmarkheaven.com/jev-models - Harold
· 0 likesOpen on X
More like this
JevでDuckDBの行を高速分類
著者がDuckDB拡張を公開。TypeSafe AIのJevを使い、CSV/ParquetファイルやDuckDBテーブルの行を高速分類。1k行で約10秒、LLMより速く、分類器より使いやすい。
JevでAI論文1,018本を分類、総コスト0.08ドル
DeepSeek V4 Flashで各論文を要約し、タイトル・要約・24の候補トピックをJevに送って分類。1,018本のAI論文を総コスト0.08ドル、中央値256msのエンドツーエンド遅延で処理した。
