Jev로 Computer Use 가속화: LLM 메모리와 Jev 실행
LLM이 메모리와 컨텍스트를 보유하고 agent-desktop으로 스냅샷을 찍어 Jev에 전송하면 Jev가 올바른 요소를 선택해 작업을 수행하여 Computer Use를 가속화합니다. Cursor 지원 및 헤드리스 모드.
저자는 browser use와 Jev가 실제 GUI 자동화에서는 아직 장난감 수준이라고 주장하며, 2024년 공개한 Midscene의 초기 DOM 기반 구현을 언급한다.
browser use + Jev 在我看来也就是个玩具,大部分人无脑吹 Jev 用来做 GUI automation 的都是没有真正用它在真实场景下跑过多少 GUI automation 任务的。 24 年 gpt 4o 刚出来没多久我们就开源了 https://github.com/web-infra-dev/midscene… ,早期的版本就是基于 dom