Jev 在分类器评测中质量与速度均胜出
Malte Ubl 将 TypeSafe AI 的 Jev 用于现有分类器评测,结果在质量上饱和评测集,速度比 Gemini 2.5 Flash Lite 快 6 倍。
作者用 DeepSeek V4 Flash 生成摘要,再将标题、摘要和 24 个候选主题交给 Jev 分类,完成 1018 篇 AI 论文的归类,总成本 0.08 美元,单篇中位端到端延迟 256 毫秒。
I used Jev to classify 1,018 AI research papers. The result: $0.08 total cost and 256ms median end-to-end latency per paper. The pipeline was: 1. Summarize each paper with DeepSeek V4 Flash 2. Send the title + summary + 24 possible topics to Jev 3. Use Jev to classify each