Meta lanza SceneScript, la solución con IA y RA para crear escenas 3D

Meta lanza SceneScript, una innovadora solución de Inteligencia Artificial (IA) diseñada para generar representaciones tridimensionales de escenas, permitiendo a los dispositivos de realidad aumentada (RA) comprender mejor los entornos físicos. 

En un comunicado, Meta destacó la importancia de combinar IA contextualizada con dispositivos de RA que proporcionen información en tiempo real a los usuarios. Para lograr esto, es crucial que los dispositivos comprendan la geometría de los espacios en 3D. 

Los cascos de realidad mixta como Meta Quest 3 actualmente crean representaciones virtuales de espacios físicos utilizando datos visuales y sensores 3D. Sin embargo, estas representaciones pueden ser imprecisas, especialmente en entornos complejos o únicos. 

Para abordar esta limitación, Reality Labs Research desarrolló SceneScript, un modelo de IA entrenado para inferir directamente la geometría de una habitación utilizando aprendizaje automático de extremo a extremo. Esto resulta en representaciones compactas, completas y fácilmente interpretables de escenas físicas. 

SceneScript se entrena utilizando conjuntos de datos sintéticos de entornos interiores, ya que no existe suficiente información disponible públicamente para su entrenamiento. Este modelo tiene el potencial de desbloquear casos de uso clave en dispositivos de RM y RA, así como mejorar a los asistentes digitales al proporcionarles contexto del mundo físico. 

Con la nueva herramienta SceneScript, Meta representa un avance emocionante en la capacidad de los dispositivos de RA para comprender y representar entornos físicos, lo que podría tener un impacto significativo en una variedad de aplicaciones y servicios.