Back to explore

Jev kalah dari Gemini pada benchmark klasifikasi email, namun masih dipertimbangkan untuk produksi

Penulis menguji Jev pada benchmark 1.565 email bisnis berbahasa Jerman dan Inggris dari pemasok industri dalam 10 kategori, dan menemukan akurasinya lebih rendah dari Gemini, tetapi ia menyoroti pola kesalahannya dan masih berencana menerapkannya di produksi.

Jev lost to Gemini on our email classification benchmark. I’m still interested in putting it into production. We tested 1,565 German and English business emails across 10 categories from Industrial suppliers. The interesting result wasn’t accuracy. It was where the mistakes

Jev kalah dari Gemini pada benchmark klasifikasi email, namun masih dipertimbangkan untuk produksi 1
· 438 likesOpen on X