Jev vượt Gemini 2.5 Flash Lite về chất lượng và tốc độ trong đánh giá bộ phân loại
Malte Ubl chạy Jev của TypeSafe AI trên một đánh giá bộ phân loại hiện có: nó bão hòa đánh giá về chất lượng và nhanh gấp 6 lần Gemini 2.5 Flash Lite.
Tác giả đã xây dựng một hệ thống gửi 12 câu hỏi qua Jev API đến từng nhân vật trong số 150 nhân vật hư cấu để hỏi về ý định chấp nhận sản phẩm của họ. Chi phí thực tế là 1,8 yên và thời gian thực hiện khoảng 5 giây; đủ nhanh, nhưng bao gồm độ trễ.
I built a system to ask 150 fictional personas on the trending Jev about their product adoption intent. It throws 12 questions via API for each of the 150 personas. The actual cost was 1.8 yen, and the time taken was about 5 seconds. It's plenty fast, but it includes latency