Back to explore

Türkisch-Benchmark-Ergebnisse von Jev

Ein Entwickler teilt die Leistung von Jev bei türkischen Aufgaben: 44/100 bei TRLawBench-3 und 59,42 % bei Turkish MMLU Pro, unter den 81,38 % von gpt-6-astra und den 63,64 % von gemma4:31b.

Jev'in Türkçe içerikteki yetenekleri soruluyor. Halihazırda TRLawBench-3'te test etmiştim 44/100 yaptı. Bunun haricinde magibu ekibi de kendi testlerini yapmış. Turkish MMLU Pro'da test etmişler sonuçlar aşağıda: gpt-6-astra (API): %81,38 gemma4:31b: %63,64 Jev: %59,42

Türkisch-Benchmark-Ergebnisse von Jev 1
· 1 likesOpen on X