Jev vượt Gemini 2.5 Flash Lite về chất lượng và tốc độ trong đánh giá bộ phân loại
Malte Ubl chạy Jev của TypeSafe AI trên một đánh giá bộ phân loại hiện có: nó bão hòa đánh giá về chất lượng và nhanh gấp 6 lần Gemini 2.5 Flash Lite.
Tác giả thực hiện 9 quyết định trên mỗi trang trong 300 trang web công khai với tổng chi phí 2 xu, sau đó Opus 5 chấm 900 kết quả: đồng thuận chung 85,8/100, tăng lên 98/100 khi Jev chắc chắn, kèm mã nguồn mở và video so sánh.
First thing I did with open access: 300 public web pages, 9 decisions each, 2 cents total, then Opus 5 graded 900 of them. 85.8 of 100 agree, and where Jev is sure it is 98 of 100. Open source, with a side by side video: