El último sistema de investigación de IA de Meta hace que los auriculares y las gafas comprendan la distribución y los muebles de su habitación.

Llamado EscenaGuión, Meta dice que el sistema aprovecha la misma técnica subyacente que los modelos de lenguaje grandes (LLM), excepto que en lugar de predecir el siguiente fragmento de lenguaje, predice elementos arquitectónicos y de mobiliario dentro de una captura de nube de puntos 3D del mismo tipo que los auriculares ya capturan para permitir el seguimiento posicional independiente. .

El resultado es una serie de formas primitivas en 3D que representan los límites básicos del mueble o elemento determinado.

Quest 3 es capaz de generar una malla 3D sin procesar de su habitación y puede inferir las posiciones de sus paredes, piso y techo a partir de esta malla 3D. Pero el auricular actualmente no sabe qué formas dentro de esta malla representan elementos más específicos como puertas, ventanas, mesas, sillas y sofás. Los auriculares Quest permiten a los usuarios marcar manualmente estos objetos como simples cuboides rectangulares si así lo desean, pero como esto es opcional y los desarrolladores arduos no pueden confiar en que los usuarios lo hayan hecho.

Si una tecnología como SceneScript se integrara en la configuración de escenas de realidad mixta de Quest 3, los desarrolladores podrían colocar automáticamente contenido virtual sobre o alrededor de elementos de mobiliario específicos. Podrían reemplazar solo sus ventanas con portales, o su silla con un asiento virtual, o cambiar su sofá a una posición de saco de arena. Estas cosas son posibles hoy en día pidiéndole al usuario que marque los muebles manualmente o, a veces, con algoritmos manuales que interpreten la malla de la escena, pero SceneScript podría hacerlo perfecto y automático.

Tecnología como SceneScript también podría tener un enorme potencial para los asistentes de IA en futuros auriculares y sus eventuales gafas AR. Meta da el ejemplo de preguntas como "¿Este escritorio cabe en mi dormitorio?" o "¿Cuántos botes de pintura se necesitarían para pintar esta habitación?", así como comandos como "Coloca la [aplicación AR/MR] en la mesa grande".

Por ahora, Meta describe SceneScript puramente como una investigación, no como una actualización de características del producto a corto plazo. Si bien esta tecnología podría llegar eventualmente a Quest 3, no hay indicios de que eso suceda pronto.

• Distribución de relaciones públicas y contenido potenciado por SEO. Consiga amplificado hoy.
• PlatoData.Network Vertical Generativo Ai. Empodérate. Accede Aquí.
• PlatoAiStream. Inteligencia Web3. Conocimiento amplificado. Accede Aquí.
• PlatoESG. Carbón, tecnología limpia, Energía, Ambiente, Solar, Gestión de residuos. Accede Aquí.
• PlatoSalud. Inteligencia en Biotecnología y Ensayos Clínicos. Accede Aquí.
• Fuente: https://www.uploadvr.com/meta-scenescript-research/