El 3D como motor en la American University y Cannes

Perfeccionando habilidades narrativas en 3D con la ayuda de la pantalla de realidad espacial de Sony en la American University y exhibiendo proyectos profesionales en Cannes.

El desafío

• Supere las limitaciones de los auriculares AR y VR convencionales
• Supervisar y revisar los proyectos de captura 3D de los estudiantes con la mayor calidad posible
• Exhiba contenidos 3D en el XR Marché du Film de Cannes

La Solución

• Aproveche aproximadamente 4 millones de píxeles por ojo proporcionados por la pantalla de realidad espacial
• Aprovecha el sistema Unity para renderizar gráficos en tiempo real

El Resultado

• Permite una visualización 3D muy precisa y con un nivel de detalle impresionante
• Detiene el tráfico en las exposiciones comerciales.
• Establece una nueva y poderosa modalidad para la visualización de contenidos

Un hombre de muchas partes
Krzysztof Pietroszek no se impresiona fácilmente. Su trayectoria profesional incluye un doctorado en informática y un máster en cine, mientras que sus viajes personales lo han llevado a las cumbres del Mont Blanc y el Kilimanjaro. Ha producido un largometraje premiado, desarrollado videojuegos de realidad virtual y publicado más de 40 artículos de investigación revisados ​​por pares. Ahora está incorporando Pantalla de realidad espacial de Sony en su trabajo.

“Si bien contamos con tecnologías confiables, aunque no perfectas, para capturar lo que llamamos 'hologramas', su visualización adecuada se ha limitado a unas gafas que nadie tiene”, dice Pietroszek. “E incluso si tienes las gafas, estás limitado a quizás 100,000 vértices. Eso significa que tienes que reducir la escala de la captura de alta calidad. La pantalla de realidad espacial te da la capacidad de mostrar una resolución mucho, mucho mayor. Y puedes hacer que la pantalla sea interactiva. Puedes extender la mano e interactuar con el objeto”.

Impresionando a la comunidad cinematográfica en Cannes
En nombre de la start-up que fundó, Tabletop Stories, Pietroszek llevó la pantalla de realidad espacial de Sony a una exposición en el Marché du Film XR de Cannes. “Cuando la gente pasaba, la veía de reojo y se detenía. Necesitaban ver qué era y cómo funcionaba”.

Tabletop Stories presenta películas en realidad aumentada, que normalmente se muestran en teléfonos inteligentes y tabletas, donde el contenido de la historia se superpone a la imagen de la cámara en tiempo real de la sala. Pietroszek dice: “La diferencia es enorme entre mostrar realidad aumentada en una tableta, en la que se supone que el contenido está en el aire, y ver el mismo contenido en la pantalla de realidad espacial, en realidad en el aire sin gafas. La gente está realmente sorprendida”.

“En esencia, la realización cinematográfica inmersiva rompe la cuarta pared. Esta pantalla te permite hacerlo con una resolución mucho, mucho mayor”. - Dr. Krzysztof Pietroszek, American University y Tabletop Stories

Enseñanza de cine inmersivo en la American University
Pietroszek imparte una clase de captura volumétrica. “Capturamos con una sola cámara y el software Depthkit, que es asequible y muy fácil de usar. No es una captura volumétrica real porque se obtienen hologramas de un solo lado (media persona). Pero para una clase introductoria, es genial. La pantalla de realidad espacial es muy buena para esto. Podemos girarla hacia ti y funciona bien”.

Pietroszek considera que la pantalla de realidad espacial es más útil que los monitores 3D con múltiples vistas. “Para mis aplicaciones, los monitores con múltiples vistas no funcionan realmente. La resolución es muy, muy baja. Se necesitan múltiples imágenes y el ángulo de visión es tan pequeño que realmente no tienen sentido”.

Visualización de la realidad espacial y representación unitaria
La pantalla Sony Spatial Reality Display permite a los espectadores ver imágenes tridimensionales volumétricas sin necesidad de gafas especiales ni gafas de realidad virtual. 3 La pantalla funciona a partir de imágenes generadas por ordenador; en el caso de la American University, se utiliza una PC con Windows® que ejecuta el motor de renderizado Unity®.1.2 “Capacitamos a los estudiantes en Unity”, afirma Pietroszek. “Es muy fácil mostrar el contenido en la pantalla. Funciona sin problemas. Simplemente se reproduce”. La pantalla cuenta con una lente microóptica de alta precisión para separar las imágenes del ojo izquierdo y del ojo derecho. Además, la pantalla sigue el movimiento del ojo hasta el milisegundo, girando la imagen en sincronía a medida que el espectador inclina o mueve la cabeza hacia arriba y hacia abajo, hacia la izquierda y la derecha, e incluso hacia adelante y hacia atrás. El resultado es una sensación abrumadora de un objeto tridimensional sólido.

Perspectivas de futuro
Pietroszek prevé múltiples aplicaciones futuras para la pantalla de realidad espacial. “Sin duda, la recomendaría para demostraciones y ferias comerciales y para aplicaciones especializadas como el modelado 3D. Además, estoy trabajando en un proyecto de telemedicina. Tenemos la idea de utilizar la volumetría para que expertos remotos puedan ayudar a médicos sin experiencia”.