Back to explore

JevはLLMではない:型付き回答と確率を返し、引用チェックベンチマークで勝利

JevはLLMではなく、テキストではなく型付き回答と確率を返す。GPT-5.4、Sonnet 5、Gemini 3.1 Proとの42件の引用チェックで、実際の公開文に対して77.8%対66.7%で勝利し、コストは1/50。GitHubベンチマークリポジトリ付き。

Jev is not an LLM. It returns a typed answer and a probability, no text. 42 citation checks vs GPT-5.4, Sonnet 5 and Gemini 3.1 Pro. They won the easy half 100%. It won the real published sentences, 77.8% to 66.7%, at 1/50th the cost. https://github.com/TheWayWithin/jev-bench…

JevはLLMではない:型付き回答と確率を返し、引用チェックベンチマークで勝利 1
· 0 likesOpen on X