Back to explore

معيار عام لقرارات Jev الحقيقية: 900 قرار قيّمها Opus 5

يتضمن المعيار 900 قرار حقيقي من Jev قيّمها Opus 5 بنسبة توافق 85.8/100، وتتركز حالات الاختلاف تقريبًا بالكامل حيث أبلغ Jev عن ثقة منخفضة، ويمكن لأي شخص إعادة تشغيله على نموذجه الخاص.

Open weight builders will need a public yardstick. One went out today: 900 real Jev decisions graded by Opus 5, 85.8 of 100 agree, and the misses sit almost entirely where Jev reported low confidence. Anyone can rerun it against their own model:

· 0 likesOpen on X