Дані Jevals: незалежний бенчмарк для TypeSafe Jev
Незалежні бенчмарк-дані, що порівнюють Jev (модель System One) від TypeSafe AI з різними LLM за показниками рішення, точності, калібрування, вартості та затримки.
Підключає TypeSafe Jev до Pokémon Showdown, записуючи 40 боїв і 940 рішень API з відтворюваними результатами, наборами даних та анотованими повторами. Незалежне дослідження, а не офіційний бенчмарк.
该仓库真实连接并调用 TypeSafe Jev API,在 Pokémon Showdown 中进行了 40 场对战、940 次 API 决策实验,提供完整代码、数据、结果与回放,属于实质性的集成与评估项目。