Jev slår Gemini 2.5 Flash Lite i kvalitet och hastighet i klassificerarutvärdering
Malte Ubl körde TypeSafe AI:s Jev mot en befintlig klassificerarutvärdering: den mättade utvärderingen i kvalitet och var 6x snabbare än Gemini 2.5 Flash Lite.
Författaren bad Jev att klassificera utdrag från TypeSafe och OpenRouters pressmeddelanden och dokumentsidor i en av 13 kategorier, med ett granskningsbart ChainForge-flöde.
To make this chart, we asked Jev which of 13 categories best describes each excerpt, taken from typesafe and OpenRouter's press releases and doc pages. "System One model" was one, "Decision model" was another. The flow is available to inspect right here: https://chainforge.ai/play/?f=161gf9kjcdygh…