Trong benchmark WebMCP, Jev một mình xử lý DOM thô đạt 25/49 nhiệm vụ. Khi kết hợp chọn công cụ WebMCP và Mercury 2.5 viết tham số, đạt 49/49 với chi phí mô hình thấp hơn khoảng 112 lần so với GPT-6 Astra.
🧪 The WebMCP benchmark by @0xidanlevin is the best stress test so far. Jev alone on the raw DOM: 25/49 tasks. Jev picking WebMCP tools + Mercury 2.5 writing args: 49/49, ~112x lower model cost than GPT-6 Astra. https://webmcp.com/benchmark
Gregor Zunic giới thiệu tác nhân trình duyệt mã nguồn mở kết hợp Browser Use và Jev, tìm chuyến bay trong 7 giây với chi phí 0,0039 USD, dùng không gian hành động mới mỗi bước, không gian trạng thái DOM và LLM nhỏ dự phòng để nhập.
Scott Williams dự đoán các mô hình phong cách Jev tùy chỉnh (giải mã ràng buộc song song) sẽ giúp hệ thống tác nhân hiện có tiết kiệm token hơn, tạo ra triệu phú.
Người dùng ca ngợi mô hình JEV vì tốc độ tái tạo cực nhanh từng chuyển động và lệnh, tin rằng bot sẽ trở nên thông minh hơn.
