Back to explore

Experiência construindo um conjunto de avaliação para modelos System One como Jev

Morgan compartilha a experiência de construir um conjunto de avaliação para modelos System One como Jev: as duas primeiras tentativas falharam, mas ensinaram muito, e a velocidade e o baixo custo do Jev tornam os testes rápidos mais fáceis do que com um LLM.

It has been a really interesting experience to build an eval suite for System One Models like Jev. My first two attempts didn't work out. But I learned a lot in the process, and since Jev is so fast, and cheap, it's a lot easier to run quick tests than with an LLM. I'm on

Experiência construindo um conjunto de avaliação para modelos System One como Jev 1
· 0 likesOpen on X