Back to explore

Jev досягає 100% виконання завдань у бенчмарку WebMCP

Jev у поєднанні з Mercury 2.5, використовуючи WebMCP, розв'язав 100% завдань у бенчмарку, за приблизно 112 разів нижчої вартості моделі, ніж GPT-6 Astra з computer use та виконанням коду.

We just ran Jev on our WebMCP benchmark. The result: basically broke the benchmark. Jev + Mercury 2.5 (a fast, low-cost LLM) using WebMCP solved 100% of the tasks at roughly 112× lower model cost than GPT-6 Astra using computer use with code execution. Compared to Astra using

Jev досягає 100% виконання завдань у бенчмарку WebMCP 1
· 2 тис. likesOpen on X