Awesome Jev: ранні проєкти і сценарії
Добірка спільноти збирає ранні проєкти й ідеї Jev для розробників, які вже мають доступ до API.
Розробник ділиться результатами Jev на турецькій мові: 44/100 у TRLawBench-3 і 59,42% у Turkish MMLU Pro, що нижче за 81,38% у gpt-6-astra та 63,64% у gemma4:31b.
Jev'in Türkçe içerikteki yetenekleri soruluyor. Halihazırda TRLawBench-3'te test etmiştim 44/100 yaptı. Bunun haricinde magibu ekibi de kendi testlerini yapmış. Turkish MMLU Pro'da test etmişler sonuçlar aşağıda: gpt-6-astra (API): %81,38 gemma4:31b: %63,64 Jev: %59,42