Niantic Spatial、Flexion、NVIDIA：ヒューマノイド向けSim2Realギャップの解消
Niantic Spatial, Inc.
Niantic Spatial、Flexion、NVIDIAは、シミュレーション内でRGBベースのヒューマノイドナビゲーションポリシーを訓練し、それを現実世界へゼロショット転移させるパイプラインを実証しました。概要
Niantic Spatial、Flexion、NVIDIAは、高忠実度のデジタルツインを活用することでヒューマノイドロボットのSim2Realギャップを埋めるエンドツーエンドのパイプラインを発表しました。標準的な360度動画からフォトリアルな3Dガウススプラットと整合したコリジョンメッシュを生成するNiantic Spatialのreal2simキャプチャ技術と、NVIDIAのIsaac SimおよびFlexionの強化学習フレームワークを組み合わせることで、開発者は堅牢なRGBベースのナビゲーションポリシーを訓練できます。このアプローチにより、ロボットはシミュレーション環境で複雑な移動や障害物回避を学習し、現実世界のオフィス環境へのゼロショット転移を成功させることが可能になります。
(出典：Niantic Spatial, Inc.)