Back to explore

Jev vs Gemini: test porównawczy na 300 zapytaniach klientów

Autor przetestował Jev i Gemini na 300 zapytaniach klientów. Zadawanie większej liczby pytań zmniejszyło wywołania modelu z ~7 do 3 i poprawiło dokładność obu. Jev wykazał też prawie 4-krotnie lepszy kompromis przy filtrowaniu błędnych odpowiedzi.

1/7 I tested Jev and Gemini on 300 customer requests. Asking MORE questions cut the agent from ~7 model calls to 3, and made BOTH models more accurate. But Jev also had a nearly 4x better trade-off when filtering wrong answers. Then Gemini hit a limit that had nothing to do

Jev vs Gemini: test porównawczy na 300 zapytaniach klientów 1
· 1 likesOpen on X