Jev 在分类器评测中质量与速度均胜出
Malte Ubl 将 TypeSafe AI 的 Jev 用于现有分类器评测,结果在质量上饱和评测集,速度比 Gemini 2.5 Flash Lite 快 6 倍。
作者分享使用 Jev 进行手动标注的体验,并指出 Jev 仅用 opus 运行且误与另一 opus 对比,现指导其用多个不同模型进行标注。
אחד הדברים שצריך קצת לעבוד קשה פה זה לתייג ידנית גם עוד כל מיני דברים ואני צריך לוודא בעצמי (ומי אמר שאני רשאי לתייג כמו שצריך? מי עשה אותי תייגן?) גם שמתי לב בנוסף שjev רץ רק עם opus ומדד בטעות מול opus אחר. אז הנחיתי אותו עכשיו לעשות תיוגים עם מספר מודלים שונים ממספר