Jev перевершує Gemini 2.5 Flash Lite за якістю та швидкістю в оцінці класифікатора
Malte Ubl запустив Jev від TypeSafe AI на наявній оцінці класифікатора: він наситив оцінку за якістю та був у 6 разів швидшим за Gemini 2.5 Flash Lite.
Користувач ділиться даними запуску Jev: 300 веб-сторінок, по 9 рішень, 2 центи; Opus 5 оцінив 900 рішень, і майже всі помилки припали на місця, де сам Jev повідомляв низьку ймовірність, тож перевіряти потрібно лише сумнівні випадки.
2.3K papers for 14 cents lines up with my run: 300 web pages, 9 decisions each, 2 cents. On the confidence worry: Opus 5 graded 900 of the decisions, and nearly every miss sat where Jev itself reported a low probability. So you only review the doubt: