Back to explore

Jev поступається Gemini у бенчмарку класифікації електронних листів, але все ще розглядається для продакшену

Автор протестував Jev на наборі з 1 565 ділових листів німецькою та англійською від промислових постачальників за 10 категоріями: точність виявилася нижчою, ніж у Gemini, але автор зосередився на характері помилок і досі планує впровадити Jev у продакшен.

Jev lost to Gemini on our email classification benchmark. I’m still interested in putting it into production. We tested 1,565 German and English business emails across 10 categories from Industrial suppliers. The interesting result wasn’t accuracy. It was where the mistakes

Jev поступається Gemini у бенчмарку класифікації електронних листів, але все ще розглядається для продакшену 1
· 438 likesOpen on X