Criando um classificador de código com Jev
Um desenvolvedor compartilha a criação de um classificador de código com Jev, sugerindo que pode resolver código superengenheirado por agentes, e pergunta o que testar a seguir.
Josh observa que Jev tem bom desempenho em classificação zero-shot, mas classificadores especializados são mais vantajosos em ambientes comerciais. Ele menciona que @trycua ajustou um modelo pequeno que obteve 99,7% na avaliação de preenchimento de formulários, enquanto o Jev hospedado obteve 83,6%, e compartilha sua experiência ajustando o GLiNER 2.5 em 51 minutos.
Jev is great at zero-shot classification, but specialist classifiers will dominate commercial use cases. @trycua tuned a tiny model that scored 99.7% on their form-filling eval. Hosted Jev scored 83.6%. I tuned GLiNER 2.5 on a task in 51 minutes yesterday and it crushes