Back to explore

Jevs turkiska benchmarkresultat

En utvecklare delar Jevs prestanda på turkiska uppgifter: 44/100 på TRLawBench-3 och 59,42% på Turkish MMLU Pro, under gpt-6-astras 81,38% och gemma4:31bs 63,64%.

Jev'in Türkçe içerikteki yetenekleri soruluyor. Halihazırda TRLawBench-3'te test etmiştim 44/100 yaptı. Bunun haricinde magibu ekibi de kendi testlerini yapmış. Turkish MMLU Pro'da test etmişler sonuçlar aşağıda: gpt-6-astra (API): %81,38 gemma4:31b: %63,64 Jev: %59,42

Jevs turkiska benchmarkresultat 1
· 1 likesOpen on X