Back to explore

OneCodeReviewBench: Jev und gehostete Entscheidungs-APIs im Vergleich

Mohebifars Team hat OneCodeReviewBench veröffentlicht, mit rund 2.000 typisierten Code-Review- und Suchentscheidungen in 12 Sprachen. Ergebnis: Jared Palmers 27B-Modell Kev schlägt Jev und andere gehostete Entscheidungs-APIs bei Auswahl- und Bewertungsfragen.

We just put out OneCodeReviewBench: ~2000 typed code review + search decisions across 12 languages. Fun finding: @jaredpalmer 's 27B (Kev) beat Jev and other hosted decision APIs in choice and score questions! https://arxiv.org/abs/2610.33389

OneCodeReviewBench: Jev und gehostete Entscheidungs-APIs im Vergleich 1
· 3 likesOpen on X