Dados Jevals: benchmark independente para TypeSafe Jev
Dados de benchmark independentes comparando o Jev (modelo System One) da TypeSafe AI com vários LLMs em pontuação de decisão, precisão, calibração, custo e latência.
Projeto de pesquisa e implementação de código aberto inspirado em Jev e System One da TypeSafe. Treina e serve modelos spark-s1 no DGX Spark, com avaliação JevBench, segurança de chamadas de ferramentas e fábrica de dados de decisão.
该仓库是一个深入研究 TypeSafe Jev / System One 的开源实现项目,包含模型训练、JevBench 评测、与 Jev 的对比实验、工具调用安全评估及决策数据工厂,实质内容充分。