Jevが分類器評価で品質と速度の両方で優位
Malte Ubl氏がTypeSafe AIのJevを既存の分類器評価に適用したところ、品質で評価を飽和させ、Gemini 2.5 Flash Liteより6倍高速だった。
著者はJev APIを通じて150の架空ペルソナにそれぞれ12の質問を送り、製品採用意向を尋ねるシステムを構築した。実際のコストは1.8円、所要時間は約5秒で十分速いが、レイテンシを含む。
I built a system to ask 150 fictional personas on the trending Jev about their product adoption intent. It throws 12 questions via API for each of the 150 personas. The actual cost was 1.8 yen, and the time taken was about 5 seconds. It's plenty fast, but it includes latency