Jev, 주행 시뮬레이터에서 실시간 운전
작성자가 Jev를 주행 시뮬레이터의 원시 제어에 연결해 실시간 주행 장면을 공개하며, 프레임 단위 영상 생성이 아닌 실시간 반응을 강조한다.
저자는 MuJoCo에서 Jev를 실시간 로봇 정책으로 테스트했고 초기 어려움을 겪은 뒤 각 업데이트를 두 번의 호출로 나눴다. 먼저 다음 행동을 결정하고, 그다음 팔과 그리퍼를 어떻게 움직일지 정한다. Jev는 이미지를 받지 않고 단순화된 기하와 접촉 정보를 텍스트로 받는다.
tested Jev as a real-time robotics policy in MuJoCo it struggled at first, so i split each update into two calls: decide what to do next, then decide how to move the arm and gripper Jev doesn’t accept images, it gets simplified geometry and contacts as text here