Jevals 데이터: TypeSafe Jev 독립 벤치마크
TypeSafe AI의 Jev(System One 모델)와 여러 LLM을 결정 점수, 정확도, 보정, 비용, 지연 시간 측면에서 비교하는 독립적인 벤치마크 데이터입니다.
100CC-BY-4.0
Qwen3-0.6B 백본에 LoRA를 적용해 TypeSafe Jev/System One 스타일 결정 엔드포인트를 구현하는 학습 프로젝트이며, OpenAI 호환 채팅/생성 서버와 MiniJev 호환 평가를 포함합니다. 프로덕션 소프트웨어가 아닙니다.
README 明确以 TypeSafe Jev/System One 的概念和 API 规范为基础,实现了 /v1/systemone 决策接口,并在 Qwen3-0.6B + LoRA 上进行训练、服务与评测,包含 MiniJev 对照和 holdout 结果,属于真实深入的研究/实验项目。