All of it Now visualiza a Encanto en el Hollywood Bowl con una pantalla de realidad espacial

Un creador de experiencias visuales con sede en Los Ángeles utiliza la revolucionaria pantalla de realidad espacial de Sony para diseñar un emocionante espectáculo en vivo asistido por RA.

como ayudamos

El Desafío

• El creador de experiencias visuales AOIN necesitaba herramientas de producción virtual de alta calidad para visualizar el diseño de preproducción de un espectáculo en vivo mejorado con AR.

La Solución

• Sony Se utilizó Spatial Reality Display para presentar una visualización 3D precisa del recinto del Hollywood Bowl

El Resultado

• Todos los actores creativos pueden visualizar el lugar y los elementos creativos en contexto.
• No es necesario que los espectadores usen gafas 3D ni auriculares para disfrutar de una experiencia inmersiva.

“Muchas de las personas con las que trabajamos en la industria y en el mundo de la producción virtual nos dijeron que teníamos que ver la nueva pantalla de Sony. Fue una de las cosas más geniales que he visto”.
-Berto Mora, Director de Tecnología, AOIN

Creando experiencias digitales extraordinarias
All of it Now (AOIN) es un equipo de tecnólogos y creadores de contenido con sede en Los Ángeles que ofrece experiencias visuales inmersivas para marcas, agencias, artistas y eventos. Con raíces en la producción de cine y televisión, el diseño de movimiento y la TI, el trabajo de AOIN abarca el diseño, la previsualización (previs), la búsqueda de ubicaciones virtuales, la consultoría de realidad aumentada/realidad extendida (RA/XR) y los datos de seguimiento de cámaras.

Un proyecto reciente de AOIN fue su participación en la ambiciosa realización de Encanto de Disney en el Hollywood Bowl En Los Ángeles, se presentaron elementos de realidad aumentada en vivo visibles para la audiencia, así como un proceso de posproducción para transmitir a los espectadores de Disney+. Para ayudar a dar vida a una experiencia auténtica de esta magnitud en el recinto al aire libre, AOIN confió en la pantalla de realidad espacial (SRD) de Sony, que presenta contenido tridimensional altamente realista sin el uso de gafas especiales o cascos de realidad virtual.

Un punto de inflexión en la producción virtual
“Muchas de las personas con las que trabajamos en la industria y en el mundo de la producción virtual nos dijeron que teníamos que probar la nueva pantalla de Sony”, recuerda Berto Mora, director de tecnología de AOIN, quien vio la tecnología exhibida en la NAB Show. “Fue una de las cosas más geniales que he visto”.

Un aspecto especialmente atractivo para Mora y el equipo de AOIN es la perfecta integración de la pantalla con la herramienta de creación 3D en tiempo real Unreal Engine. Mora también destaca la capacidad de SRD para visualizar contenido 3D sin necesidad de usar gafas o auriculares especiales, y su idoneidad para mostrar contenido inmersivo de una manera muy realista utilizando un dispositivo de sobremesa.

Un enfoque innovador para la visualización 3D
El cofundador Danny Firpo utilizó SRD para generar nuevas formas de creatividad y ayudar a optimizar el flujo de trabajo de preproducción de AOIN para el proyecto Encanto. “Utilizamos la pantalla de realidad espacial para ayudar a visualizar el recinto del Hollywood Bowl. Además, como el contenido está motivado por la proyección, muchos de los efectos utilizados en la transmisión de realidad aumentada se basaron en partículas. La pantalla de Sony proporcionó imágenes tanto en un espacio 2D como en 3D, lo que permitió una mejor comprensión de los caminos que tomaban las partículas. Esto nos permitió espacializarlas y contextualizarlas”.

Además de permitir una mejor comprensión de las partículas, el SRD resultó muy útil para encontrar las posiciones adecuadas de la cámara para el espectáculo. “Fue muy útil ver el Bowl en un espacio 3D y utilizarlo de forma colaborativa para identificar las posiciones de la cámara y las rutas de los cables”, confirma Firpo. “El entorno 3D sirvió como una herramienta de preproducción fundamental y el uso de esta pantalla nos proporcionó algunos momentos especiales. Nos coordinamos estrechamente con el director de fotografía y los operadores de cámara individuales para mostrarles el camino en Unreal dentro del Hollywood Bowl; esto fue útil para planificar las rutas de las cámaras con el brazo articulado. Pudimos ver planos espectaculares como resultado de ver los movimientos de la cámara en el espacio 3D”.

Comprensión inmersiva de flujos de trabajo complejos
Nicole Plaza, productora ejecutiva de AOIN, amplía las potentes capacidades de la pantalla: “La realidad aumentada es nueva para mucha gente, por lo que es importante contar con una herramienta que permita a los directores y a otras personas comprender lo que estamos haciendo. Les permite sumergirse en ese espacio 3D y comprender nuestros flujos de trabajo más rápidamente”.

“Trabajamos en muchos espacios y mundos 3D a través de los motores, en concreto Unreal Engine”, señala Mora. “Es difícil transmitir lo que estás viendo a través de una pantalla plana y bidimensional. Lo bueno del SRD es que ahora puedes visualizar ese contenido en 3D y comprenderlo mejor, en lugar de pedirle a alguien que lo imagine. Con eso viene la capacidad de jugar con la profundidad y la percepción del 3D con el ojo humano. Y todo eso hace que el contenido sea más valioso”.

Navega intuitivamente por espacios virtuales
Firpo también valora las capacidades de presentación que ofrece el SRD. “La pantalla nos permite literalmente poder mirar alrededor y navegar por los espacios de forma intuitiva. Crea una capa de tecnología transparente para aquellos que no están acostumbrados a los entornos Unreal. Además, la pantalla es muy fácil de usar para nosotros y para los clientes. No necesitas ningún botón para navegar por ella. Y al final del día, todos aprecian la tecnología y les encanta ver el contenido”.

AOIN ha recibido respuestas positivas al SRD de sus propios clientes creativos. “Los diseñadores de producción a menudo trabajan con el espacio 2D”, dice Firpo. “Por lo tanto, para ellos ver sus diseños en un espacio 3D antes de que se complete una versión final es útil para proporcionar contexto y referencia espacial. Además, ver esos efectos de realidad aumentada interactuando con las piezas de diseño de producción es algo muy especial para muchos de estos equipos de producción, y hemos recibido comentarios realmente excelentes. Más allá de ver el resultado final o las maquetas, podemos proporcionar información sobre todo el proceso”.

“Muchos de los artistas que trabajan en el contenido también pueden ir al lugar y verlo en vivo”, añade Firpo. “Creo que es muy gratificante y crea un refuerzo positivo el hecho de que los artistas puedan ver su trabajo primero en un espacio 2D, luego en el espacio 3D con la pantalla de realidad espacial durante la previsualización y la preproducción, y finalmente en vivo en cámara durante la transmisión”.

Visualización 3D realista sin necesidad de gafas
La pantalla de realidad espacial presenta varias innovaciones, entre ellas un algoritmo de renderizado en tiempo real, una lente microóptica y un sensor de visión patentado de alta velocidad. Mora señala que uno de sus aspectos favoritos de la pantalla es su tecnología de detección ocular de alta velocidad. “El seguimiento de la mirada de los ojos permite saber que no se trata de una pantalla convencional. El cambio de perspectiva en tiempo real es un gran atractivo que la hace mucho más interesante. Esta característica complementa muy bien los entornos XR”.

El equipo de AOIN también valora la posibilidad de ver su contenido sin la molestia de gafas 3D o cascos especiales. “La pantalla parece más realista y presenta el contenido con mayor precisión cuando lo estás creando. Proporciona un efecto diferente en comparación con el uso de gafas”, coincide Mora. “Como alguien que ya usa gafas todos los días, hay una capa de fatiga y fricción añadida”, añade Firpo. “El peso de las gafas en la cara limita la cantidad de tiempo que puedes usarlas. También puede causar tensión en el cuello, y las gafas pueden dañar la cara y hacerte sudar. También existe la posibilidad de que se ensucie y se manche, lo que puede degradar la experiencia de visualización y afectar a la calidad de la imagen”.

La tranquilidad de trabajar con un líder de la industria
Firpo también afirma que la familiaridad y la experiencia con el nombre Sony contribuyeron a la decisión de AOIN de elegir el SRD. “Nosotros, nuestros clientes, productores y operadores de cámara confiamos en la marca Sony. El uso de una pantalla Sony agrega un nivel de confianza, así como compatibilidad, ya que a menudo usamos cámaras Sony en el sitio. Tener una línea de productos Sony que utiliza muchos productos diferentes como VENICE y SRD nos da la tranquilidad de que la reproducción del color es precisa”.

AOIN está entusiasmada con el potencial de la pantalla no solo para la preproducción, previsualización y realidad aumentada, sino también para efectos virtuales en cámara con proyectos de televisión y cine de mayor duración, así como para la producción virtual, áreas en las que la empresa se está expandiendo rápidamente. Con la promesa que ofrecen los personajes digitales y las interacciones metahumanas, las posibilidades son infinitas. El SRD de Sony seguirá ayudando a AOIN a socializar estos conceptos con sus clientes de una manera sumamente realista e impresionante a medida que continúan experimentando con la tecnología y ampliando los límites de la visualización.