Jev vượt Gemini 2.5 Flash Lite về chất lượng và tốc độ trong đánh giá bộ phân loại
Malte Ubl chạy Jev của TypeSafe AI trên một đánh giá bộ phân loại hiện có: nó bão hòa đánh giá về chất lượng và nhanh gấp 6 lần Gemini 2.5 Flash Lite.
Jev 1.13.0 vs GPT-6 Luna: So sánh điểm chuẩn JevBench
So sánh JevBench của Benchmark Heaven cho thấy Jev 1.13.0 đạt 86,6% công khai và 36,7% niêm phong, trong khi GPT-6 Luna đạt 99,6% và 95,5%. Luna vẫn xếp hạng #30 trên JevBench; trục chi phí ($0,135 so với $0,040 mỗi 1.000 quyết định) và ngưỡng dưới 50 là những yếu tố giải thích.
GPT-6 Luna (medium) gets nearly everything right: 99.6% public, 95.5% sealed. Jev 1.13.0: 86.6% and 36.7%. Luna still ranks #30 on JevBench. One column explains it: $0.135 per 1,000 decisions vs $0.040, Cost axis 36.0. Below 50, the gate applies. https://benchmarkheaven.com/jev-models/v1.4.1?compare=jev-1.13.0,gpt-6-luna…
· 0 likesOpen on X
More like this
Phân loại hàng nhanh trong DuckDB với Jev
Tác giả đã phát hành tiện ích mở rộng DuckDB sử dụng Jev của TypeSafe AI để phân loại nhanh các hàng trong tệp CSV/Parquet hoặc bảng DuckDB, khoảng 10 giây cho 1k hàng—nhanh hơn LLM và tiện dụng hơn bộ phân loại.
Phân loại 1.018 bài báo AI bằng Jev với chi phí 0,08 USD
Tác giả tóm tắt từng bài báo bằng DeepSeek V4 Flash, sau đó gửi tiêu đề, tóm tắt và 24 chủ đề ứng viên cho Jev để phân loại, xử lý 1.018 bài báo AI với tổng chi phí 0,08 USD và độ trễ đầu-cuối trung vị 256ms mỗi bài.
