Back to explore

Jev verliert im E-Mail-Klassifizierungs-Benchmark gegen Gemini, wird aber weiterhin für den Produktionseinsatz erwogen

Der Autor testete Jev anhand eines Benchmarks mit 1.565 deutschen und englischen Geschäfts-E-Mails von Industrielieferanten in 10 Kategorien. Jev war weniger genau als Gemini, doch der Autor interessierte sich für die Fehlermuster und erwägt weiterhin den Produktionseinsatz.

Jev lost to Gemini on our email classification benchmark. I’m still interested in putting it into production. We tested 1,565 German and English business emails across 10 categories from Industrial suppliers. The interesting result wasn’t accuracy. It was where the mistakes

Jev verliert im E-Mail-Klassifizierungs-Benchmark gegen Gemini, wird aber weiterhin für den Produktionseinsatz erwogen 1
· 438 likesOpen on X