Jev vượt Gemini 2.5 Flash Lite về chất lượng và tốc độ trong đánh giá bộ phân loại
Malte Ubl chạy Jev của TypeSafe AI trên một đánh giá bộ phân loại hiện có: nó bão hòa đánh giá về chất lượng và nhanh gấp 6 lần Gemini 2.5 Flash Lite.
Trên 55 yêu cầu nhận diện ý định thực tế, Jev đạt trung bình 0,78 giây so với 3 giây của qwen3.8-flash, nhanh hơn khoảng 4 lần.
55条真实的意图识别需求,qwen3.8-flash 平均3s/个, jev 平均0.78s ,4倍的差距 #jev #llm #agent #harness #deepseek #qwen