Jevが分類器評価で品質と速度の両方で優位
Malte Ubl氏がTypeSafe AIのJevを既存の分類器評価に適用したところ、品質で評価を飽和させ、Gemini 2.5 Flash Liteより6倍高速だった。
FLock.ioが第三者記録の68問正答率テストを公開。FLockのTHIS/THAT Model 1.0は94.1%、Jev(ホスト型System Oneサービス)は76.5%。投稿は専門意思決定モデルとして有望な結果としつつ、グラフ探索や多段算術を要する複雑なタスクは課題が残ると述べている。
In a test of 68 questions recorded by a third party for accuracy: - FLock's THIS / THAT Model 1.0: 94.1% - Jev (hosted System One service): 76.5% A promising result for a specialised decision model. Complex tasks requiring graph search or multi-step arithmetic remain