Back to explore

Jev Turkse benchmarkresultaten

Een ontwikkelaar deelt de prestaties van Jev op Turkse taken: 44/100 op TRLawBench-3 en 59,42% op Turkish MMLU Pro, onder de 81,38% van gpt-6-astra en de 63,64% van gemma4:31b.

Jev'in Türkçe içerikteki yetenekleri soruluyor. Halihazırda TRLawBench-3'te test etmiştim 44/100 yaptı. Bunun haricinde magibu ekibi de kendi testlerini yapmış. Turkish MMLU Pro'da test etmişler sonuçlar aşağıda: gpt-6-astra (API): %81,38 gemma4:31b: %63,64 Jev: %59,42

Jev Turkse benchmarkresultaten 1
· 1 likesOpen on X