Jevals 데이터: TypeSafe Jev 독립 벤치마크
TypeSafe AI의 Jev(System One 모델)와 여러 LLM을 결정 점수, 정확도, 보정, 비용, 지연 시간 측면에서 비교하는 독립적인 벤치마크 데이터입니다.
100CC-BY-4.0
TypeSafe의 비공개 Jev 결정 모델에 대한 실험적 최소 재구성으로, 훈련, 평가 및 서빙 API를 포함합니다. 숨겨진 상태의 포인터 헤드를 사용하여 선택지 확률을 읽고 유형별 질문에 답합니다.
该仓库明确以TypeSafe AI的Jev/System One决策模型为主题,基于公开文档和黑盒探针研究进行假设性重建,实现了无解码循环的指针头架构,并提供训练、评估和服务API,属于实质性的实验研究。