L'autore ha testato la precisione di classificazione di Jev per il pre-filtraggio di contenuti legati all'IA su AIHOT, trovandola solida; GLM 5.3 Flash ha azzeccato tutto ma è il più lento.
Finally got some time to test Jev. Its classification accuracy is indeed pretty good. On AIHOT, for a small pre-screening task—judging whether incoming content is AI-related—it's solid. GLM 5.3 Flash is the only one that got everything 100% right, but it's also the slowest and
Malte Ubl ha eseguito Jev di TypeSafe AI su una valutazione di classificazione esistente: ha saturato la valutazione in qualità ed è stato 6 volte più veloce di Gemini 2.5 Flash Lite.
L'autore ha pubblicato un'estensione DuckDB che usa Jev di TypeSafe AI per classificare rapidamente le righe in file CSV/Parquet o tabelle DuckDB, circa 10 secondi per 1k righe—più veloce di un LLM e più ergonomico di un classificatore.
L'autore ha riassunto ogni paper con DeepSeek V4 Flash, poi ha inviato titolo, riassunto e 24 argomenti candidati a Jev per la classificazione, elaborando 1.018 paper sull'IA con un costo totale di 0,08 $ e una latenza end-to-end mediana di 256 ms per paper.
