Jevでコードベース分類器を構築
開発者がJevでコードベース分類器を構築し、エージェントが生成する過剰設計なコードの解決策になり得ると述べ、次のテスト対象を尋ねている。
Sydney RunkleがSeanとDanielのガイドを共有。Jevをジャッジとして使うことがオンライン評価に優れている理由、他のLLMとの実験、エージェントでの試し方を解説。
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!