Jev يتفوق على Gemini 2.5 Flash Lite في جودة وسرعة تقييم المصنف
شغّل Malte Ubl نموذج Jev من TypeSafe AI على تقييم مصنف موجود، فحقق تشبعًا في الجودة وكان أسرع 6 مرات من Gemini 2.5 Flash Lite.
قياس Jev: 18,000 حكم والتحقق من معايرة الاحتمالات
أمضى المؤلف أسبوعًا في قياس Jev: 18,000 حكم على مواصفة HTTP كاملة مقابل 8 سنتات، ثم قام بوسم 59 جملة يدويًا للتحقق مما إذا كانت الاحتمالات ذات معنى. جاء كل نطاق أقل من توقعه.
Everyone posted a Jev demo last week. I spent the week measuring it instead. 18,000 judgments across a full HTTP spec. 8 cents. Then I hand labelled 59 sentences to check whether the probabilities mean anything. Every bucket came in below its prediction. 🧵
· 0 likesOpen on X
More like this
تصنيف سريع للصفوف في DuckDB باستخدام Jev
أصدر المؤلف إضافة DuckDB تستخدم Jev من TypeSafe AI لتصنيف الصفوف بسرعة في ملفات CSV/Parquet أو جداول DuckDB، حوالي 10 ثوانٍ لـ 1k صف، أسرع من LLM وأسهل من المصنف.
تصنيف 1018 ورقة بحثية في الذكاء الاصطناعي باستخدام Jev بتكلفة 0.08 دولار
لخّص المؤلف كل ورقة باستخدام DeepSeek V4 Flash، ثم أرسل العنوان والملخص و24 موضوعًا محتملًا إلى Jev للتصنيف، فتمت معالجة 1018 ورقة بحثية في الذكاء الاصطناعي بتكلفة إجمالية 0.08 دولار وزمن استجابة وسيط 256 مللي ثانية لكل ورقة.
