Dữ liệu Jevals: điểm chuẩn độc lập cho TypeSafe Jev
Dữ liệu benchmark độc lập so sánh Jev (mô hình System One) của TypeSafe AI với nhiều LLM về điểm quyết định, độ chính xác, hiệu chỉnh, chi phí và độ trễ.
Kết nối TypeSafe Jev với Pokémon Showdown, ghi lại 40 trận đấu và 940 quyết định API với kết quả có thể tái hiện, bộ dữ liệu và đoạn phát lại có chú thích. Nghiên cứu độc lập, không phải điểm chuẩn chính thức.
该仓库真实连接并调用 TypeSafe Jev API,在 Pokémon Showdown 中进行了 40 场对战、940 次 API 决策实验,提供完整代码、数据、结果与回放,属于实质性的集成与评估项目。