Jev 在分类器评测中质量与速度均胜出
Malte Ubl 将 TypeSafe AI 的 Jev 用于现有分类器评测，结果在质量上饱和评测集，速度比 Gemini 2.5 Flash Lite 快 6 倍。
对 Jev 模型进行 1.8 万次判断测量与概率校准验证
作者用一周时间对 Jev 模型进行测量：在完整 HTTP 规范上完成 1.8 万次判断，成本 8 美分；并手工标注 59 个句子检验概率含义，发现每个分桶的实际结果都低于预测值。
Everyone posted a Jev demo last week. I spent the week measuring it instead. 18,000 judgments across a full HTTP spec. 8 cents. Then I hand labelled 59 sentences to check whether the probabilities mean anything. Every bucket came in below its prediction. 🧵
· 0 次赞在 X 打开
更多类似内容
用 Jev 在 DuckDB 中快速分类数据行
作者发布了一个 DuckDB 扩展，使用 TypeSafe AI 的 Jev 对 CSV/Parquet 文件或 DuckDB 表中的行进行快速分类，约 10 秒处理 1k 行，比 LLM 更快且比分类器更易用。
用 Jev 分类 1018 篇 AI 论文：总成本 0.08 美元
作者用 DeepSeek V4 Flash 生成摘要，再将标题、摘要和 24 个候选主题交给 Jev 分类，完成 1018 篇 AI 论文的归类，总成本 0.08 美元，单篇中位端到端延迟 256 毫秒。
