Данные Jevals: независимый бенчмарк для TypeSafe Jev
Независимые бенчмарк-данные, сравнивающие Jev (модель System One) от TypeSafe AI с несколькими LLM по показателям решения, точности, калибровке, стоимости и задержке.
Механизм принятия решений на 151 млн параметров на базе ModernBERT, превосходящий TypeSafe Jev и Laya в бенчмарке LocalLLaMA/typed-decisions с точностью 77,10% и показателем Брайера 0,0636, а также содержащий браузерное демо на WebGPU.
该仓库构建并评测了一个基于 ModernBERT 的非自回归决策引擎,在 LocalLLaMA/typed-decisions 基准上与 TypeSafe Jev 1.13.0 对比,受 Jev 架构启发,并提供 WebGPU 可运行 demo,属于对 TypeSafe Jev 模型的深入研究。