Back to explore

Jev vs Gemini: 300 müşteri talebi üzerinde karşılaştırma testi

Yazar, 300 müşteri talebinde Jev ve Gemini'yi test etti. Daha fazla soru sormak, model çağrılarını ~7'den 3'e düşürdü ve her iki modelin de doğruluğunu artırdı. Jev ayrıca yanlış cevapları filtrelerken neredeyse 4 kat daha iyi bir denge gösterdi.

1/7 I tested Jev and Gemini on 300 customer requests. Asking MORE questions cut the agent from ~7 model calls to 3, and made BOTH models more accurate. But Jev also had a nearly 4x better trade-off when filtering wrong answers. Then Gemini hit a limit that had nothing to do

Jev vs Gemini: 300 müşteri talebi üzerinde karşılaştırma testi 1
· 1 likesOpen on X