Back to explore

Jev vs Gemini: test comparativo su 300 richieste dei clienti

L'autore ha testato Jev e Gemini su 300 richieste dei clienti. Fare più domande ha ridotto le chiamate al modello da ~7 a 3 e migliorato l'accuratezza di entrambi. Jev ha anche mostrato un trade-off quasi 4 volte migliore nel filtrare le risposte errate.

1/7 I tested Jev and Gemini on 300 customer requests. Asking MORE questions cut the agent from ~7 model calls to 3, and made BOTH models more accurate. But Jev also had a nearly 4x better trade-off when filtering wrong answers. Then Gemini hit a limit that had nothing to do

Jev vs Gemini: test comparativo su 300 richieste dei clienti 1
· 1 likesOpen on X