Criando um classificador de código com Jev
Um desenvolvedor compartilha a criação de um classificador de código com Jev, sugerindo que pode resolver código superengenheirado por agentes, e pergunta o que testar a seguir.
Sydney Runkle compartilha o guia de Sean e Daniel sobre por que o Jev como juiz é ótimo para avaliações online, incluindo um experimento contra outros LLMs e como testá-lo em seus agentes.
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!