Budowanie klasyfikatora bazy kodu z Jev
Deweloper dzieli się budową klasyfikatora bazy kodu z Jev, sugerując, że może rozwiązać problem przekombinowanego kodu od agentów, i pyta, co testować dalej.
Josh zauważa, że Jev dobrze radzi sobie w klasyfikacji zero-shot, ale w środowiskach komercyjnych korzystniejsze są wyspecjalizowane klasyfikatory. Wspomina, że @trycua dostroił mały model, który uzyskał 99,7% w ocenie wypełniania formularzy, podczas gdy hostowany Jev uzyskał 83,6%, i dzieli się doświadczeniem dostrajania GLiNER 2.5 w 51 minut.
Jev is great at zero-shot classification, but specialist classifiers will dominate commercial use cases. @trycua tuned a tiny model that scored 99.7% on their form-filling eval. Hosted Jev scored 83.6%. I tuned GLiNER 2.5 on a task in 51 minutes yesterday and it crushes