Jev slår Gemini 2.5 Flash Lite i kvalitet och hastighet i klassificerarutvärdering
Malte Ubl körde TypeSafe AI:s Jev mot en befintlig klassificerarutvärdering: den mättade utvärderingen i kvalitet och var 6x snabbare än Gemini 2.5 Flash Lite.
En användare visar hur JEV bearbetar 6 030 köparfrågor och kontrollerar 1 005 YC-företagsnamn, med 37 636 utslag och 9,1 miljoner tokens på 40 sekunder för 0,38 $, mycket billigare än Claude Sonnets 36 $.
JEV is INSANE It read 6,030 ChatGPT answers to buyer questions about 1,005 YC companies and checked every company name in every answer. 37,636 verdicts. 9.1M tokens. 40 seconds. $0.38. Grading the same 6,030 answers with Claude Sonnet cost me $36 last month. 71% of these