Jev превосходит Gemini 2.5 Flash Lite по качеству и скорости в оценке классификатора
Malte Ubl прогнал Jev от TypeSafe AI на существующей оценке классификатора: он насытил оценку по качеству и оказался в 6 раз быстрее Gemini 2.5 Flash Lite.
Автор выполнил по 9 решений на каждой из 300 публичных веб-страниц за 2 цента, затем Opus 5 оценил все 900: общее согласие 85,8/100, а при уверенности Jev — 98/100, с открытым исходным кодом и сравнительным видео.
First thing I did with open access: 300 public web pages, 9 decisions each, 2 cents total, then Opus 5 graded 900 of them. 85.8 of 100 agree, and where Jev is sure it is 98 of 100. Open source, with a side by side video: