Jevals Verileri: TypeSafe Jev için bağımsız kıyaslama
TypeSafe AI'nin Jev (System One modeli) ile çeşitli LLM'leri karar skoru, doğruluk, kalibrasyon, maliyet ve gecikme açısından karşılaştıran bağımsız kıyaslama verileri.
AnyJev, herhangi bir açık LLM'yi Jev tarzı bir karar modeline dönüştüren açık araştırma kütüphanesidir; tipli kararlar, kalibre edilmiş olasılıklar, eğitimsiz L0/L1 kalibrasyonu ve Jev ile karşılaştırmalı kıyaslamalar sunar.
该仓库是一个实质性的研究项目,实现并评测了Jev风格的决策模型(AnyJev),将任意LLM转换为带类型化决策和可靠概率的模型,并与TypeSafe AI的Jev结果进行对比,属于深入研究Jev/System One思路的技术资源。