Jev vượt Gemini 2.5 Flash Lite về chất lượng và tốc độ trong đánh giá bộ phân loại
Malte Ubl chạy Jev của TypeSafe AI trên một đánh giá bộ phân loại hiện có: nó bão hòa đánh giá về chất lượng và nhanh gấp 6 lần Gemini 2.5 Flash Lite.
Một người dùng cho thấy JEV xử lý 6.030 câu hỏi người mua và kiểm tra 1.005 tên công ty YC, đưa ra 37.636 phán quyết và 9,1 triệu token trong 40 giây chỉ với 0,38 USD, rẻ hơn nhiều so với 36 USD của Claude Sonnet.
JEV is INSANE It read 6,030 ChatGPT answers to buyer questions about 1,005 YC companies and checked every company name in every answer. 37,636 verdicts. 9.1M tokens. 40 seconds. $0.38. Grading the same 6,030 answers with Claude Sonnet cost me $36 last month. 71% of these