用 Jev 分类模型逐步选择合法 token 编写 C++
作者用 TypeSafe 的 Jev 决策/分类模型做实验:每步只提供语法合法的候选 token,让模型选择,从而生成 C++ 代码。
Mohebifar 团队发布 OneCodeReviewBench,包含约 2000 个覆盖 12 种语言的类型化代码审查与搜索决策样本。结果显示 Jared Palmer 的 27B 模型 Kev 在选择题和评分题上优于 Jev 等托管决策 API。
We just put out OneCodeReviewBench: ~2000 typed code review + search decisions across 12 languages. Fun finding: @jaredpalmer 's 27B (Kev) beat Jev and other hosted decision APIs in choice and score questions! https://arxiv.org/abs/2610.33389