WebMCP kıyaslamasında Jev tek başına ham DOM üzerinde 25/49 görevi tamamlıyor. WebMCP araç seçimi ve Mercury 2.5'in argüman yazmasıyla 49/49'a ulaşıyor ve model maliyeti GPT-6 Astra'dan yaklaşık 112 kat daha düşük.
🧪 The WebMCP benchmark by @0xidanlevin is the best stress test so far. Jev alone on the raw DOM: 25/49 tasks. Jev picking WebMCP tools + Mercury 2.5 writing args: 49/49, ~112x lower model cost than GPT-6 Astra. https://webmcp.com/benchmark
Gregor Zunic, Browser Use ve Jev'i birleştiren açık kaynak tarayıcı ajanını tanıttı; uçuşları 7 saniyede 0,0039 dolara buluyor, her adımda yeni eylem uzayı, DOM durum uzayı ve yazma için küçük LLM yedeği kullanıyor.
Scott Williams, özel Jev tarzı modellerin (paralel kısıtlı kod çözme) mevcut şirket ajan sistemlerini token açısından daha verimli kılacağını ve milyonerler yaratacağını öngörüyor.
Kullanıcı, JEV modelinin her hareketi ve komutu son derece hızlı yeniden üretmesini övüyor ve botların daha akıllı olacağına inanıyor.
