Jevals データ: TypeSafe Jev の独立ベンチマーク
TypeSafe AI の Jev(System One モデル)と複数の LLM を、判定タスクにおける決定スコア、精度、キャリブレーション、コスト、遅延で比較する独立したベンチマークデータ。
100CC-BY-4.0
TypeSafeのクローズドなJev意思決定モデルの実験的な最小再構築。トレーニング、評価、サービングAPIを含み、隠れ状態上のポインターヘッドで選択肢の確率を読み取り、型付き質問に答えます。
该仓库明确以TypeSafe AI的Jev/System One决策模型为主题,基于公开文档和黑盒探针研究进行假设性重建,实现了无解码循环的指针头架构,并提供训练、评估和服务API,属于实质性的实验研究。