Jevals 데이터: TypeSafe Jev 독립 벤치마크
TypeSafe AI의 Jev(System One 모델)와 여러 LLM을 결정 점수, 정확도, 보정, 비용, 지연 시간 측면에서 비교하는 독립적인 벤치마크 데이터입니다.
100CC-BY-4.0
TypeSafe Jev를 Pokémon Showdown에 연결하여 40번의 배틀과 940개의 API 결정을 기록했습니다. 재현 가능한 결과, 데이터셋, 주석이 달린 리플레이를 제공합니다. 독립 연구이며 공식 벤치마크가 아닙니다.
该仓库真实连接并调用 TypeSafe Jev API,在 Pokémon Showdown 中进行了 40 场对战、940 次 API 决策实验,提供完整代码、数据、结果与回放,属于实质性的集成与评估项目。