Jevals-gegevens: onafhankelijke benchmark voor TypeSafe Jev
Onafhankelijke benchmarkgegevens die Jev (System One-model) van TypeSafe AI vergelijken met verschillende LLM's op beslissingsscore, nauwkeurigheid, kalibratie, kosten en latentie.
Een op ModernBERT gebaseerde beslissingsengine met 151M parameters die TypeSafe Jev en Laya verslaat op de LocalLLaMA/typed-decisions benchmark met 77,10% nauwkeurigheid en een Brier-score van 0,0636, en een WebGPU-browserdemo bevat.
该仓库构建并评测了一个基于 ModernBERT 的非自回归决策引擎,在 LocalLLaMA/typed-decisions 基准上与 TypeSafe Jev 1.13.0 对比,受 Jev 架构启发,并提供 WebGPU 可运行 demo,属于对 TypeSafe Jev 模型的深入研究。