Jevals-gegevens: onafhankelijke benchmark voor TypeSafe Jev
Onafhankelijke benchmarkgegevens die Jev (System One-model) van TypeSafe AI vergelijken met verschillende LLM's op beslissingsscore, nauwkeurigheid, kalibratie, kosten en latentie.
AnyJev is een open onderzoeksbibliotheek die elke open LLM omzet in een Jev-stijl beslissingsmodel, met getypeerde beslissingen, gekalibreerde kansen, trainingsvrije L0/L1-kalibratie en benchmarkvergelijkingen met Jev.
该仓库是一个实质性的研究项目,实现并评测了Jev风格的决策模型(AnyJev),将任意LLM转换为带类型化决策和可靠概率的模型,并与TypeSafe AI的Jev结果进行对比,属于深入研究Jev/System One思路的技术资源。