Back to explore

Jev vs Gemini: bài kiểm tra so sánh trên 300 yêu cầu khách hàng

Tác giả đã thử nghiệm Jev và Gemini trên 300 yêu cầu của khách hàng. Hỏi nhiều câu hỏi hơn đã giảm số lần gọi mô hình từ khoảng 7 xuống 3 và cải thiện độ chính xác của cả hai. Jev cũng cho thấy sự đánh đổi tốt hơn gần 4 lần khi lọc các câu trả lời sai.

1/7 I tested Jev and Gemini on 300 customer requests. Asking MORE questions cut the agent from ~7 model calls to 3, and made BOTH models more accurate. But Jev also had a nearly 4x better trade-off when filtering wrong answers. Then Gemini hit a limit that had nothing to do

Jev vs Gemini: bài kiểm tra so sánh trên 300 yêu cầu khách hàng 1
· 1 likesOpen on X