Jev превосходит Gemini 2.5 Flash Lite по качеству и скорости в оценке классификатора
Malte Ubl прогнал Jev от TypeSafe AI на существующей оценке классификатора: он насытил оценку по качеству и оказался в 6 раз быстрее Gemini 2.5 Flash Lite.
Пользователь демонстрирует обработку JEV 6 030 вопросов покупателей и проверку 1 005 названий компаний YC: 37 636 вердиктов и 9,1 млн токенов за 40 секунд за 0,38 доллара, что значительно дешевле 36 долларов у Claude Sonnet.
JEV is INSANE It read 6,030 ChatGPT answers to buyer questions about 1,005 YC companies and checked every company name in every answer. 37,636 verdicts. 9.1M tokens. 40 seconds. $0.38. Grading the same 6,030 answers with Claude Sonnet cost me $36 last month. 71% of these