Dữ liệu Jevals: điểm chuẩn độc lập cho TypeSafe Jev
Dữ liệu benchmark độc lập so sánh Jev (mô hình System One) của TypeSafe AI với nhiều LLM về điểm quyết định, độ chính xác, hiệu chỉnh, chi phí và độ trễ.
Kho lưu trữ này là bản tái tạo mở của mô hình Jev của TypeSafe AI, cung cấp một công cụ quyết định có kiểu không tự hồi quy với 150M tham số. Đạt độ chính xác 0,697 trên benchmark typed-decisions (Jev: 0,727), hiệu chuẩn tốt hơn và có thể huấn luyện miễn phí trên Colab.
该仓库明确复现 TypeSafe AI 的 Jev 模型,包含完整代码、训练与评估流程,并在 typed-decisions 基准上与 Jev 对比,属于深入研究/复现项目。