Jev slår Gemini 2.5 Flash Lite i kvalitet och hastighet i klassificerarutvärdering
Malte Ubl körde TypeSafe AI:s Jev mot en befintlig klassificerarutvärdering: den mättade utvärderingen i kvalitet och var 6x snabbare än Gemini 2.5 Flash Lite.
Författaren byggde ett system som via Jev API skickar 12 frågor till var och en av 150 fiktiva personas för att fråga om deras produktadoptionsavsikt. Den faktiska kostnaden var 1,8 yen och tiden var cirka 5 sekunder; det är tillräckligt snabbt, men inkluderar latens.
I built a system to ask 150 fictional personas on the trending Jev about their product adoption intent. It throws 12 questions via API for each of the 150 personas. The actual cost was 1.8 yen, and the time taken was about 5 seconds. It's plenty fast, but it includes latency