Jev vượt Gemini 2.5 Flash Lite về chất lượng và tốc độ trong đánh giá bộ phân loại
Malte Ubl chạy Jev của TypeSafe AI trên một đánh giá bộ phân loại hiện có: nó bão hòa đánh giá về chất lượng và nhanh gấp 6 lần Gemini 2.5 Flash Lite.
FLock.io công bố bài kiểm tra độ chính xác 68 câu hỏi do bên thứ ba ghi lại: mô hình THIS/THAT 1.0 của FLock đạt 94,1%, trong khi Jev (dịch vụ System One được lưu trữ) đạt 76,5%. Bài đăng nhận định đây là kết quả đầy hứa hẹn cho một mô hình ra quyết định chuyên biệt, đồng thời lưu ý các tác vụ phức tạp cần tìm kiếm đồ thị hoặc số học nhiều bước vẫn còn nhiều thách thức.
In a test of 68 questions recorded by a third party for accuracy: - FLock's THIS / THAT Model 1.0: 94.1% - Jev (hosted System One service): 76.5% A promising result for a specialised decision model. Complex tasks requiring graph search or multi-step arithmetic remain