Jev slår Gemini 2.5 Flash Lite i kvalitet och hastighet i klassificerarutvärdering
Malte Ubl körde TypeSafe AI:s Jev mot en befintlig klassificerarutvärdering: den mättade utvärderingen i kvalitet och var 6x snabbare än Gemini 2.5 Flash Lite.
En användare körde ett anpassat benchmark som jämförde Jev med GPT-Terra för dokumentinmatning i företagets kunskapsbas: Jev var 94 % snabbare och 98,6 % billigare, men tillförlitligheten nådde inte förväntningarna.
Ran a custom benchmark comparing Jev with GPT-Terra, the current main model powering document ingestion for our company knowledge base. The results are promising, although reliability was not quite where I expected it to be. As expected, Jev was 94% faster and 98.6% cheaper than