Back to explore

Jev vs Gemini: uji perbandingan pada 300 permintaan pelanggan

Penulis menguji Jev dan Gemini pada 300 permintaan pelanggan. Mengajukan lebih banyak pertanyaan memangkas panggilan model dari ~7 menjadi 3 dan meningkatkan akurasi keduanya. Jev juga menunjukkan trade-off hampir 4 kali lebih baik saat menyaring jawaban yang salah.

1/7 I tested Jev and Gemini on 300 customer requests. Asking MORE questions cut the agent from ~7 model calls to 3, and made BOTH models more accurate. But Jev also had a nearly 4x better trade-off when filtering wrong answers. Then Gemini hit a limit that had nothing to do

Jev vs Gemini: uji perbandingan pada 300 permintaan pelanggan 1
· 1 likesOpen on X