Jev ชนะ Gemini 2.5 Flash Lite ทั้งด้านคุณภาพและความเร็วในการประเมินตัวจำแนก
Malte Ubl ทดลองใช้ Jev ของ TypeSafe AI กับชุดประเมินตัวจำแนกที่มีอยู่ โดยทำคะแนนคุณภาพได้เต็มชุดประเมินและเร็วกว่า Gemini 2.5 Flash Lite 6 เท่า
ผู้เขียนรัน 9 การตัดสินใจบนหน้าเว็บสาธารณะ 300 หน้า ด้วยค่าใช้จ่ายรวม 2 เซนต์ จากนั้น Opus 5 ประเมินทั้ง 900: ความสอดคล้องโดยรวม 85.8/100 และสูงถึง 98/100 เมื่อ Jev มั่นใจ พร้อมโอเพนซอร์สและวิดีโอเปรียบเทียบ
First thing I did with open access: 300 public web pages, 9 decisions each, 2 cents total, then Opus 5 graded 900 of them. 85.8 of 100 agree, and where Jev is sure it is 98 of 100. Open source, with a side by side video: