JevでComputer Useを高速化:LLMの記憶とJevによる操作実行
LLMが記憶とコンテキストを保持し、agent-desktopでスナップショットを取得してJevに送信、Jevが適切な要素を選んで操作を実行し、Computer Useを高速化。Cursor対応、ヘッドレス運用も可能。
Jevとsai_borgは、統合・インストール・権限なしでソフトウェアを操作する方法を示す。ウィンドウを指定し、画面を読み取り、ループを実行してキーを押す。
Jev + @sai_borg just solved "there is no way into this software" you point it at a window. it reads what is on screen, the loop runs, the keys get pressed no integrations nothing installed no access to the game's insides no permissions granted free to start: