こんにちは、IDXソリューション部 Y.O.です。 VRヘッドセット「Meta Quest 3」をNVIDIAのIsaacSimに接続し、シミュレーション上の産業用ロボットアームをVRコントローラーとゲームパッドの2通りで遠隔操作できる環境を構築した事例を紹介します。 キーワード：フィジカルAI　デジタルツイン　IsaacSim　テレオペレーション　VR はじめに テレオペレーションとは、人の操作をリアルタイムにロボットへ伝えて動かす手法です。遠隔地での作業に使えるだけでなく、ロボットに動作を教える模倣学習やVLA（Vision-Language-Action）の学習データ（人による操作のお手本）を集める手段としても注目されています。 今回の取り組みでは、VRコントローラーを使った直感的な操作と、ゲームパッドを使った操作の2通りで、シミュレーション上のロボットアームを動かせるようにしました。また、VRヘッドセットでロボットの動きを立体的に確認できるようにすることで、ロボットと対象物の位置関係を把握しやすくしています。 記事の前半では2つの構成に共