Back to explore

Jev przegrywa z Gemini w benchmarku klasyfikacji e-maili, ale wciąż jest rozważany do wdrożenia produkcyjnego

Autor przetestował Jev na zestawie 1 565 niemieckich i angielskich e-maili biznesowych od dostawców przemysłowych w 10 kategoriach, stwierdzając niższą dokładność niż Gemini, ale skupił się na tym, gdzie pojawiają się błędy, i nadal planuje wdrożenie produkcyjne.

Jev lost to Gemini on our email classification benchmark. I’m still interested in putting it into production. We tested 1,565 German and English business emails across 10 categories from Industrial suppliers. The interesting result wasn’t accuracy. It was where the mistakes

Jev przegrywa z Gemini w benchmarku klasyfikacji e-maili, ale wciąż jest rozważany do wdrożenia produkcyjnego 1
· 438 likesOpen on X