Jev, 분류기 평가에서 품질과 속도 모두 우세
Malte Ubl이 TypeSafe AI의 Jev를 기존 분류기 평가에 적용한 결과, 품질에서 평가를 포화시켰고 Gemini 2.5 Flash Lite보다 6배 빨랐다.
사용자가 Jev 실행 데이터를 공유: 300개 웹페이지, 각 9개 결정, 2센트. Opus 5가 900개 결정을 평가했고 거의 모든 오류가 Jev 자체가 낮은 확률로 보고한 위치에 집중되어 의심스러운 부분만 검토하면 된다.
2.3K papers for 14 cents lines up with my run: 300 web pages, 9 decisions each, 2 cents. On the confidence worry: Opus 5 graded 900 of the decisions, and nearly every miss sat where Jev itself reported a low probability. So you only review the doubt: