Back to explore

Jev maakt computergebruik zonder screenshots mogelijk

Jev gebruikt een lokaal CoreML-model om knoppen en UI-elementen op het scherm te segmenteren, met on-device OCR die labels leest, waardoor computergebruik zonder screenshots of LLM's mogelijk is.

Okay so Jev can actually do computer use really well Without any screenshots, or LLMs and no Pixels leave my mac I dont even read the Dom elements A local CoreML model segments every button and UI element on screen. On-device OCR reads the labels. That text is all Jev gets.

· 1,9K likesOpen on X