Jevals Verileri: TypeSafe Jev için bağımsız kıyaslama
TypeSafe AI'nin Jev (System One modeli) ile çeşitli LLM'leri karar skoru, doğruluk, kalibrasyon, maliyet ve gecikme açısından karşılaştıran bağımsız kıyaslama verileri.
Bu depo, TypeSafe AI'nin Jev modelinin açık bir yeniden üretimidir; 150M parametreli, otoregresif olmayan tipli karar motoru sağlar. typed-decisions benchmark'ında 0,697 doğruluk (Jev: 0,727) elde eder, daha iyi kalibrasyonla ve Colab'da ücretsiz olarak eğitilebilir.
该仓库明确复现 TypeSafe AI 的 Jev 模型,包含完整代码、训练与评估流程,并在 typed-decisions 基准上与 Jev 对比,属于深入研究/复现项目。