Back to explore

Jevのトルコ語ベンチマーク結果

開発者がトルコ語タスクでのJevのパフォーマンスを共有:TRLawBench-3で44/100、Turkish MMLU Proで59.42%。gpt-6-astraの81.38%、gemma4:31bの63.64%を下回る。

Jev'in Türkçe içerikteki yetenekleri soruluyor. Halihazırda TRLawBench-3'te test etmiştim 44/100 yaptı. Bunun haricinde magibu ekibi de kendi testlerini yapmış. Turkish MMLU Pro'da test etmişler sonuçlar aşağıda: gpt-6-astra (API): %81,38 gemma4:31b: %63,64 Jev: %59,42

Jevのトルコ語ベンチマーク結果 1
· 1 likesOpen on X