Jev يتفوق على Gemini 2.5 Flash Lite في جودة وسرعة تقييم المصنف
شغّل Malte Ubl نموذج Jev من TypeSafe AI على تقييم مصنف موجود، فحقق تشبعًا في الجودة وكان أسرع 6 مرات من Gemini 2.5 Flash Lite.
معيار عام يضم 900 قرار تدقيق ويب حقيقي، إجابات Jev وOpus 5 جنبًا إلى جنب، جميع الصفوف مفتوحة بترخيص MIT. سجل Jev 85.8/100، متعادلًا مع Opus 5.
Congrats on shipping Solomon. If you want a public yardstick for it: 900 real web audit decisions with Jev and Opus 5 answers side by side, all rows open, MIT. Jev matched Opus 5 on 85.8 of 100. Would be great to see where Solomon 27b lands: