Создание классификатора кодовой базы с помощью Jev
Разработчик делится созданием классификатора кодовой базы с помощью Jev, предполагая, что это может решить проблему переусложнённого кода от агентов, и спрашивает, что тестировать дальше.
Sydney Runkle делится руководством Шона и Дэниела о том, почему Jev в роли судьи отлично подходит для онлайн-оценок, включая эксперимент с другими LLM и способы попробовать это на своих агентах.
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!