Jev verslaat Gemini 2.5 Flash Lite op kwaliteit en snelheid in classifier-evaluatie
Malte Ubl voerde Jev van TypeSafe AI uit op een bestaande classifier-evaluatie: het verzadigde de evaluatie op kwaliteit en was 6x sneller dan Gemini 2.5 Flash Lite.
Jev's snelle gelijktijdige evaluaties maken inputmutatie en significantieanalyse mogelijk
Nathan LeClaire suggereert dat Jev's vermogen om veel evaluaties snel en gelijktijdig uit te voeren het mogelijk maakt inputs op te splitsen, te muteren en te experimenteren terwijl numerieke resultaten worden opgeslagen, wat mogelijk significantieanalyse mogelijk maakt.
Here's food for thought @simonw one thing unique about jev is that you can do so many evaluations so fast (incl. concurrently) that you could break apart, mutate and experiment with inputs and store the numeric results, this probably would allow some 'significance analysis'
· 0 likesOpen on X
More like this
Snelle rijclassificatie in DuckDB met Jev
De auteur heeft een DuckDB-extensie uitgebracht die TypeSafe AI's Jev gebruikt om rijen in CSV/Parquet-bestanden of DuckDB-tabellen snel te classificeren, ongeveer 10 seconden voor 1k rijen—sneller dan een LLM en ergonomischer dan een classifier.
1.018 AI-papers classificeren met Jev voor $ 0,08
De auteur vatte elk paper samen met DeepSeek V4 Flash en stuurde vervolgens de titel, samenvatting en 24 kandidaat-onderwerpen naar Jev voor classificatie. Er werden 1.018 AI-papers verwerkt tegen $ 0,08 totale kosten en 256ms mediane end-to-end latentie per paper.
