Xây dựng bộ phân loại cơ sở mã với Jev
Một nhà phát triển chia sẻ việc xây dựng bộ phân loại cơ sở mã với Jev, cho rằng có thể giải quyết mã quá phức tạp do tác nhân tạo ra, và hỏi nên thử nghiệm gì tiếp theo.
Sydney Runkle chia sẻ hướng dẫn của Sean và Daniel về lý do Jev làm giám khảo phù hợp cho đánh giá trực tuyến, gồm thử nghiệm so với các LLM khác và cách dùng thử với agent của bạn.
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!