Back to explore

Jev чудово показав себе в бенчмарку WebMCP

У бенчмарку WebMCP Jev самостійно на сирому DOM виконує 25/49 завдань. У поєднанні з вибором інструментів WebMCP і написанням аргументів Mercury 2.5 досягає 49/49, а вартість моделі приблизно в 112 разів нижча, ніж у GPT-6 Astra.

🧪 The WebMCP benchmark by @0xidanlevin is the best stress test so far. Jev alone on the raw DOM: 25/49 tasks. Jev picking WebMCP tools + Mercury 2.5 writing args: 49/49, ~112x lower model cost than GPT-6 Astra. https://webmcp.com/benchmark

Jev чудово показав себе в бенчмарку WebMCP 1
· 0 likesOpen on X