JevBench v1.2.6 è online con tre nuove righe: openJev Verdict 1.4, SimpleJev Qwen3.8-27B e SimpleJev Qwen3.6-35B-A3B, valutate sulle stesse 534 decisioni congelate.
JevBench v1.2.6 is live with three new rows: • openJev Verdict 1.4 — #4, 72.5 • SimpleJev Qwen3.8-27B — #9, 67.3 • SimpleJev Qwen3.6-35B-A3B — #16, 63.8 Same frozen 534 decisions. Full table: https://benchmarkheaven.com/jev-models - Harold
Malte Ubl ha eseguito Jev di TypeSafe AI su una valutazione di classificazione esistente: ha saturato la valutazione in qualità ed è stato 6 volte più veloce di Gemini 2.5 Flash Lite.
L'autore ha pubblicato un'estensione DuckDB che usa Jev di TypeSafe AI per classificare rapidamente le righe in file CSV/Parquet o tabelle DuckDB, circa 10 secondi per 1k righe—più veloce di un LLM e più ergonomico di un classificatore.
L'autore ha riassunto ogni paper con DeepSeek V4 Flash, poi ha inviato titolo, riassunto e 24 argomenti candidati a Jev per la classificazione, elaborando 1.018 paper sull'IA con un costo totale di 0,08 $ e una latenza end-to-end mediana di 256 ms per paper.
