Back to explore

Jev ermöglicht Computernutzung ohne Screenshots

Jev nutzt ein lokales CoreML-Modell zur Segmentierung von Schaltflächen und UI-Elementen auf dem Bildschirm, während On-Device-OCR die Beschriftungen liest – Computernutzung ohne Screenshots oder LLMs.

Okay so Jev can actually do computer use really well Without any screenshots, or LLMs and no Pixels leave my mac I dont even read the Dom elements A local CoreML model segments every button and UI element on screen. On-device OCR reads the labels. That text is all Jev gets.

· 1886 likesOpen on X