Jev ile kod tabanı sınıflandırıcısı oluşturma
Bir geliştirici Jev ile kod tabanı sınıflandırıcısı oluşturduğunu paylaşıyor, ajanların ürettiği aşırı mühendislik kodunu çözebileceğini öne sürüyor ve sırada neyin test edileceğini soruyor.
Sydney Runkle, Sean ve Daniel'in rehberini paylaşıyor: Jev'i yargıç olarak kullanmanın çevrimiçi değerlendirmeler için neden harika olduğu, diğer LLM'lere karşı bir deney ve ajanlarınızda nasıl deneyeceğiniz.
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!