返回探索

OneCodeReviewBench:Jev 与托管决策 API 的代码审查对比

Mohebifar 团队发布 OneCodeReviewBench,包含约 2000 个覆盖 12 种语言的类型化代码审查与搜索决策样本。结果显示 Jared Palmer 的 27B 模型 Kev 在选择题和评分题上优于 Jev 等托管决策 API。

We just put out OneCodeReviewBench: ~2000 typed code review + search decisions across 12 languages. Fun finding: @jaredpalmer 's 27B (Kev) beat Jev and other hosted decision APIs in choice and score questions! https://arxiv.org/abs/2610.33389

OneCodeReviewBench:Jev 与托管决策 API 的代码审查对比 1
· 3 次赞在 X 打开