こんにちは、IDXソリューション部 Y.O.です。 VRヘッドセット「Meta Quest 3」をNVIDIAのIsaacSimに接続し、シミュレーション上の産業用ロボットアームをVRコントローラーとゲームパッドの2通りで遠隔操作できる環境を構築した事例を紹介します。 キーワード：フィジカルAI　デジタルツイン　IsaacSim　テレオペレーション　VR はじめに テレオペレーションとは、人の操作をリアルタイムにロボットへ伝えて動かす手法です。遠隔地での作業に使えるだけでなく、ロボットに動作を教える模倣学習やVLA（Vision-Language-Action）の学習データ（人による操作のお手本）を集める手段としても注目されています。 今回の取り組みでは、VRコントローラーを使った直感的な操作と、ゲームパッドを使った操作の2通りで、シミュレーション上のロボットアームを動かせるようにしました。また、VRヘッドセットでロボットの動きを立体的に確認できるようにすることで、ロボットと対象物の位置関係を把握しやすくしています。 記事の前半では2つの構成に共

こんにちは、IDXソリューション部のM.Tです。 市販の教育用四足歩行ロボットを題材に、ロボットモデルの作成から強化学習、実機デプロイまでを行ったSim2Real開発の事例を紹介します。 キーワード：フィジカルAI　デジタルツイン　IsaacSim　IsaacLab　Sim2Real　強化学習 はじめに この記事では、NVIDIAのIsaacSim/IsaacLabを用いた強化学習の開発事例を紹介します。IsaacSimには各社ロボットメーカーの機体が標準アセットとして用意されていますが、今回はそれらを使わず、市販の教育用ロボットを題材に選びました。シミュレーション上で使用するロボットモデルの作成から強化学習環境の作成・実行、そして生成したポリシーを実機に搭載して動作させるまで、Sim2Realの一連の流れを実際に行った内容をお伝えします。 使用したロボットと開発環境 使用したロボット Yahboom社の「DOGZILLA S2」を使用しています。犬型の4足歩行ロボットで、全部で12関節あり、各関節にサーボモーターを搭載しています。またIMU、