Jev verslaat Gemini 2.5 Flash Lite op kwaliteit en snelheid in classifier-evaluatie
Malte Ubl voerde Jev van TypeSafe AI uit op een bestaande classifier-evaluatie: het verzadigde de evaluatie op kwaliteit en was 6x sneller dan Gemini 2.5 Flash Lite.
Jev classificeerde 300 webpagina's in 7 paginatypen, waarvan 88 overeenkwamen met de resultaten van Opus 5, met 61 ms per pagina, en een side-by-side weergave van beide modellen wordt geleverd.
Classifying node types is the same shape as what I ran: Jev sorted 300 web pages into 7 page types and 88 of 100 matched Opus 5. At 61 ms a page the animation budget stays yours. Side by side replay of both models: