Back to explore

Perbandingan akurasi model Jev: resmi sempurna, varian bervariasi

Seorang pengguna komunitas membandingkan akurasi Jev resmi, AnyJev (Qwen3-4B), Laya, dan djev dalam tes 20 soal. Jev resmi menjawab semua dengan benar, AnyJev 95%, Laya 65%, dan djev hanya 35%. Selain itu, djev mengubah jawaban pada 19 dari 20 soal ketika urutan opsi diubah, menunjukkan ketidakstabilan yang jelas.

准确率一下就拉开了: 官方 Jev 20 题全对 AnyJev(Qwen3-4B)95% Laya 65% djev(Mac 4bit)35% djev 更离谱,选项换个顺序,20 题里 19 题变了答案(想问问djev,你是属变色龙的吗😂)

· 0 likesOpen on X