بيانات Jevals: معيار مستقل لـ TypeSafe Jev
بيانات معيارية مستقلة تقارن Jev (نموذج System One) من TypeSafe AI مع عدة نماذج LLM من حيث درجة القرار والدقة والمعايرة والتكلفة والاستجابة.
هذا المستودع هو إعادة إنتاج مفتوحة لنموذج Jev من TypeSafe AI، ويوفر محرك قرارات مصنّف غير تراجعي بحجم 150M معلمة. يحقق دقة 0.697 على معيار typed-decisions (Jev: 0.727)، مع معايرة أفضل، ويمكن تدريبه مجانًا على Colab.
该仓库明确复现 TypeSafe AI 的 Jev 模型,包含完整代码、训练与评估流程,并在 typed-decisions 基准上与 Jev 对比,属于深入研究/复现项目。