Back to explore

تقييم نموذج Jev على BANKING77 وتحليل الحقن العدائي

تشير المدونة المشار إليها إلى أن Jev يحقق دقة zero-shot بنسبة 81.2% على BANKING77، وهي أقل من 89.9% لـ MiniLM+head الخطي؛ النص المحقون غيّر احتمالية التنبؤ من 0.76 إلى 0.48، مما يشير إلى خطر أمني محتمل.

⚠️ Caveats: • Vendor evals score agreement with GPT-6 Astra + Fable 5.1, not ground truth • BANKING77 (@manojlds): MiniLM + linear head 89.9%, Jev zero-shot 81.2% • Injected text moved a block prob 0.76 → 0.48 https://stacktoheap.com/blog/2026/09/22/jev-attack-of-the-classifiers/…

تقييم نموذج Jev على BANKING77 وتحليل الحقن العدائي 1
· 1 likesOpen on X