Створення класифікатора кодової бази з Jev
Розробник ділиться створенням класифікатора кодової бази з Jev, припускаючи, що це може вирішити проблему переускладненого коду від агентів, і запитує, що тестувати далі.
Sydney Runkle ділиться посібником Шона та Деніела про те, чому Jev як суддя чудово підходить для онлайн-оцінювання, включаючи експеримент проти інших LLM і способи спробувати це на своїх агентах.
jev as a Judge proves to be a cheaper and more precise alternative to LLM as a judge for online evals. great guide from Sean and Daniel on why Jev is great for evals, an experiment vs other LLMs, and how to try this out for your agents!