Jev verslaat Gemini 2.5 Flash Lite op kwaliteit en snelheid in classifier-evaluatie
Malte Ubl voerde Jev van TypeSafe AI uit op een bestaande classifier-evaluatie: het verzadigde de evaluatie op kwaliteit en was 6x sneller dan Gemini 2.5 Flash Lite.
Evaluatie van Jev-beslissingsvertrouwen: fouten clusteren bij lage waarschijnlijkheid
Gebruiker deelt Jev-uitvoeringsgegevens: 300 webpagina's, elk 9 beslissingen, 2 cent; Opus 5 beoordeelde 900 beslissingen en bijna elke fout zat waar Jev zelf een lage waarschijnlijkheid meldde, dus alleen twijfelgevallen hoeven te worden herzien.
2.3K papers for 14 cents lines up with my run: 300 web pages, 9 decisions each, 2 cents. On the confidence worry: Opus 5 graded 900 of the decisions, and nearly every miss sat where Jev itself reported a low probability. So you only review the doubt:
· 0 likesOpen on X
More like this
Snelle rijclassificatie in DuckDB met Jev
De auteur heeft een DuckDB-extensie uitgebracht die TypeSafe AI's Jev gebruikt om rijen in CSV/Parquet-bestanden of DuckDB-tabellen snel te classificeren, ongeveer 10 seconden voor 1k rijen—sneller dan een LLM en ergonomischer dan een classifier.
1.018 AI-papers classificeren met Jev voor $ 0,08
De auteur vatte elk paper samen met DeepSeek V4 Flash en stuurde vervolgens de titel, samenvatting en 24 kandidaat-onderwerpen naar Jev voor classificatie. Er werden 1.018 AI-papers verwerkt tegen $ 0,08 totale kosten en 256ms mediane end-to-end latentie per paper.
