Niantic Spatial, Flexion y NVIDIA: reduciendo la brecha Sim2Real para humanoides

Niantic Spatial, Inc.
Niantic Spatial, Flexion y NVIDIA demuestran con éxito un flujo de trabajo para entrenar políticas de navegación de humanoides basadas en RGB en simulación y transferirlas a la realidad sin entrenamiento previo.

Resumen

Niantic Spatial, Flexion y NVIDIA han presentado un flujo de trabajo de extremo a extremo que reduce la brecha sim2real para robots humanoides mediante el uso de gemelos digitales de alta fidelidad. Al combinar la tecnología de captura real2sim de Niantic Spatial —que genera salpicaduras gaussianas en 3D fotorrealistas y mallas de colisión alineadas a partir de vídeo estándar de 360°— con Isaac Sim de NVIDIA y los marcos de aprendizaje por refuerzo de Flexion, los desarrolladores pueden entrenar políticas de navegación basadas en RGB robustas. Este enfoque permite a los que los robots aprendan la navegación compleja y la evitación de obstáculos en entornos simulados antes de lograr una transferencia exitosa a oficinas del mundo real.

(Fuente:Niantic Spatial, Inc.)