Jev, 분류기 평가에서 품질과 속도 모두 우세
Malte Ubl이 TypeSafe AI의 Jev를 기존 분류기 평가에 적용한 결과, 품질에서 평가를 포화시켰고 Gemini 2.5 Flash Lite보다 6배 빨랐다.
작성자는 2,200개의 사고 흔적에 대해 Jev의 CoT 모니터링을 테스트하여 분류에서 Sonnet 5를 능가하고 Luna보다 3.7배, Sonnet보다 6배 빠르다고 보고했다.
I ran Jev against Claude and ChatGPT for CoT Monitoring on 2,200 thought traces. It beat Sonnet 5 at classification, but the main selling point is the speed, classifying 3.7x faster than Luna and 6x faster than Sonnet! 🧵