Дані Jevals: незалежний бенчмарк для TypeSafe Jev
Незалежні бенчмарк-дані, що порівнюють Jev (модель System One) від TypeSafe AI з різними LLM за показниками рішення, точності, калібрування, вартості та затримки.
Проєкт із відкритим кодом для дослідження та впровадження, натхненний Jev і System One від TypeSafe. Навчає та запускає моделі spark-s1 на DGX Spark, включно з оцінкою JevBench, безпекою викликів інструментів і фабрикою даних рішень.
该仓库是一个深入研究 TypeSafe Jev / System One 的开源实现项目,包含模型训练、JevBench 评测、与 Jev 的对比实验、工具调用安全评估及决策数据工厂,实质内容充分。