Jevがロボットナビゲーションのsim2realギャップを縮小
この投稿は、Jevがセマンティックロボットナビゲーションにおけるシミュレーションと現実のギャップを縮小するのに役立つと述べています。
THE JEV GUIDE · CURATED EDITION
TypeSafe Jevに関する発表、解説、デモ、コミュニティ事例をトピック別に整理しています。各項目からXの元投稿を確認できます。
キュレーション選定 · 全件ではありません · 手動更新
Sponsors
これらの製品がこのディレクトリを支援しています。 あなたの製品も載せませんか?
この投稿は、Jevがセマンティックロボットナビゲーションにおけるシミュレーションと現実のギャップを縮小するのに役立つと述べています。
Ben Kolligs氏は最近の3つのLLMリリースを追跡し、関連する75本の論文のうち、Jev支援分析によって60本がロボットシステム・実験・データ生成に実際にモデルを使用していることを特定。研究分析におけるJevの実用性を示しています。
生成AI Jevとロボティクスの組み合わせ可能性を探るイベント。Liquid AI『d1-3B』やOpenAI『Decisions API』を実際に試し、12月の深圳訪問についても語ります。
投稿では、Jevのような意思決定モデルは判断・分類・スコアリングを担当し、画像を直接見るわけではないと指摘。ロボットやドローンでは、視覚システムがまず「何が、いくつ、どこにあるか」をモデルに伝える必要があると述べている。
JEV 決定モデルをきっかけに、現実世界でのAIの自律的判断とタイムリーな通知について考察し、身体性シナリオ向けのストリーミング動画理解・視覚定位モデル「VLX-Flow」と「VLX-Seek」を紹介。
One card in the feed, every sixteen, on every page of it. $50 a week, cancel any week.
投稿は、JEVが判断を担う一方、ロボットやドローンはまずシーンを正確に認識し、対象を数え、何もないと判断した上で、JEVに信頼できる判断を委ねる必要があると述べています。
この投稿はロボットナビゲーション用のJevハーネスについて言及しており、TypeSafe Jevモデルの実用化を示しています。
開発者のBen C氏が、TypeSafe AI JevとCloudflare Clairicを使用してロボット制御ハーネスを構築中。例として「台所に行ってコンロを見つけて」というプロンプトを示しています。
ft-labがロボットMicroduckの進捗を共有。Jevで咥えられない対象を除外し、咥えられる物体を探して接近・咥える流れを実現。判定はカメラのみ。足元の物体は見えないため、後退して探す必要があることも判明。
ある音声システムの自然な会話品質を評価し、それをロボットの音声層として使い、JEV がその他の部分を担う構成を構想しています。
著者は公開データと独自レシピで訓練した4BのJevスタイル判定モデルを紹介。RoboPulse、RoboRewardBench、実ロボット展開で最大27BのマルチモーダルJevスタイルモデルを上回り、特定タスクでは専用報酬モデルが依然優れていると述べています。
意思決定モデル構築インフラ「JevAny」をオープンソース化し、ロボット操作に特化した「JevAny-Robotics-4B」を微調整して、操作判断タスクに活用します。 Link
Star the project on GitHub to support continued updates and curation.