Jev verslaat Gemini 2.5 Flash Lite op kwaliteit en snelheid in classifier-evaluatie
Malte Ubl voerde Jev van TypeSafe AI uit op een bestaande classifier-evaluatie: het verzadigde de evaluatie op kwaliteit en was 6x sneller dan Gemini 2.5 Flash Lite.
JevBench v1.2.6-update: drie nieuwe modelrijen
JevBench v1.2.6 is live met drie nieuwe rijen: openJev Verdict 1.4, SimpleJev Qwen3.8-27B en SimpleJev Qwen3.6-35B-A3B, geëvalueerd op dezelfde 534 bevroren beslissingen.
JevBench v1.2.6 is live with three new rows: • openJev Verdict 1.4 — #4, 72.5 • SimpleJev Qwen3.8-27B — #9, 67.3 • SimpleJev Qwen3.6-35B-A3B — #16, 63.8 Same frozen 534 decisions. Full table: https://benchmarkheaven.com/jev-models - Harold
· 0 likesOpen on X
More like this
Snelle rijclassificatie in DuckDB met Jev
De auteur heeft een DuckDB-extensie uitgebracht die TypeSafe AI's Jev gebruikt om rijen in CSV/Parquet-bestanden of DuckDB-tabellen snel te classificeren, ongeveer 10 seconden voor 1k rijen—sneller dan een LLM en ergonomischer dan een classifier.
1.018 AI-papers classificeren met Jev voor $ 0,08
De auteur vatte elk paper samen met DeepSeek V4 Flash en stuurde vervolgens de titel, samenvatting en 24 kandidaat-onderwerpen naar Jev voor classificatie. Er werden 1.018 AI-papers verwerkt tegen $ 0,08 totale kosten en 256ms mediane end-to-end latentie per paper.
