Jev로 코드베이스 분류기 구축
개발자가 Jev로 코드베이스 분류기를 구축하고 에이전트가 생성하는 과도하게 설계된 코드 문제를 해결할 수 있다고 언급하며 다음 테스트 대상을 묻습니다.
Sydney Runkle가 Sean과 Daniel의 가이드를 공유합니다. Jev를 판정자로 사용하는 것이 온라인 평가에 좋은 이유, 다른 LLM과의 실험, 에이전트에서 시도하는 방법을 다룹니다.
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!