Jevals データ: TypeSafe Jev の独立ベンチマーク
TypeSafe AI の Jev(System One モデル)と複数の LLM を、判定タスクにおける決定スコア、精度、キャリブレーション、コスト、遅延で比較する独立したベンチマークデータ。
100CC-BY-4.0
Qwen3-0.6B バックボーンに LoRA を適用し、TypeSafe Jev/System One スタイルの意思決定エンドポイントを実装した学習プロジェクト。OpenAI 互換のチャット/生成サーバーと MiniJev 互換の評価も含む。本番用ではありません。
README 明确以 TypeSafe Jev/System One 的概念和 API 规范为基础,实现了 /v1/systemone 决策接口,并在 Qwen3-0.6B + LoRA 上进行训练、服务与评测,包含 MiniJev 对照和 holdout 结果,属于真实深入的研究/实验项目。