Jevが運転シミュレータでリアルタイム走行
投稿者はJevを運転シミュレータの生の操作系に接続し、リアルタイムで運転する様子を公開。フレーム単位の動画生成ではなくリアルタイム応答を強調している。
MuJoCoでJevをリアルタイムロボティクス方策として試したところ苦戦したため、各更新を「次に何をするか」と「アームとグリッパをどう動かすか」の2回の呼び出しに分割。Jevは画像を受け取らず、簡略化された形状と接触をテキストで受け取る。
tested Jev as a real-time robotics policy in MuJoCo it struggled at first, so i split each update into two calls: decide what to do next, then decide how to move the arm and gripper Jev doesn’t accept images, it gets simplified geometry and contacts as text here