Head-wearable Holographic Head-mounted Display with 6 Degrees of Freedom

Resumen Técnico: Pantalla de Montaje en la Cabeza Holográfica con 6 Grados de Libertad para Uso en la Cabeza

Planteamiento del Problema
Las pantallas de montaje en la cabeza (HMD, por sus siglas en inglés) para Realidad Virtual (VR) y Realidad Aumentada (AR) a menudo sufren del conflicto de vergencia-acomodación (VAC), una causa principal de fatiga ocular y mareo por movimiento 3D. Esto ocurre porque las HMD convencionales muestran imágenes a una profundidad focal fija, lo que no coincide con la profundidad perceptual del espectador. Las HMD holográficas (holo-HMD) se consideran una solución ideal, ya que pueden reconstruir campos de luz a profundidades variables, resolviendo naturalmente el VAC. Sin embargo, una barrera crítica para las holo-HMD prácticas es la carga computacional de generar datos holográficos en tiempo real. Los métodos tradicionales de Computación de Holografía Generada por Computadora (CGH), como el método de fuente de luz puntual, requieren cálculos masivos proporcionales al número de puntos de luz del objeto y a los píxeles del holograma. Esto hace que la generación en tiempo real de hologramas que soporten seis grados de libertad (6DoF) —incluyendo tanto rotación como traslación— sea extremadamente difícil, especialmente en el hardware limitado que suele acompañar a los dispositivos portátiles.

Metodología
Los autores proponen un sistema que combina un nuevo algoritmo de cálculo rápido con un prototipo óptico personalizado para lograr una visualización holográfica de 6DoF en tiempo real.

• Algoritmo de Cálculo Rápido (Corrección de Fase):
  La innovación central es un algoritmo de cálculo rápido basado en el concepto de Transmisión de Video Holométrico (HVS). En lugar de recalcular todo el campo de luz del objeto para cada fotograma basándose en el movimiento de la cabeza del usuario, el sistema precalcula la "luz del objeto" (el frente de onda del objeto virtual) en un plano específico.

  • Pre-cálculo: La distribución de la luz del objeto se calcula una sola vez basándose en la definición del objeto virtual.
  • Corrección de Fase: A medida que el usuario mueve su cabeza (6DoF), el sistema no vuelve a computar la luz del objeto. En su lugar, aplica una corrección de fase a los datos de luz precalculados. Esta corrección tiene en cuenta la diferencia de trayectoria óptica causada por la rotación y traslación del usuario con respecto al plano del holograma.
  • Reducción de Complejidad: La complejidad computacional de esta corrección de fase es $O(P)$, donde $P$ es el número de píxeles del holograma. Crucialmente, es independiente del número de fuentes de luz puntuales ($N$) en el objeto. Esto contrasta con el método estándar de luz puntual, que tiene una complejidad de $O(PN)$. Esto permite al sistema manejar objetos complejos sin aumentar el tiempo de cálculo por fotograma.
  • Límites de Muestreo: Los autores derivaron límites teóricos para los ángulos de rotación para prevenir el aliasing durante el proceso de remuestreo de la corrección de fase, determinando un ángulo de rotación máximo válido de aproximadamente $5.77^\circ$ para la longitud de onda específica utilizada.

• Prototipo de Sistema Óptico:
  Los autores desarrollaron un prototipo de holo-HMD monocular con las siguientes características:

  • Óptica: Un haz láser se colima y es modulado por un Modulador Espacial de Luz (SLM). La luz difractada forma una imagen real, que luego es magnificada por un espejo cóncavo para crear una imagen virtual para el usuario. Una barrera en el punto focal elimina el ruido de difracción de orden cero y de orden superior.
  • Pantalla a Todo Color: El sistema utiliza multiplexación por división de tiempo con un único paquete de láser semiconductor RGB. El SLM opera a 60 Hz con una tasa de campo de color de 360 Hz, cambiando de color seis veces por fotograma para sintetizar imágenes a todo color sin parpadeo.
  • Seguimiento e Integración: Un sensor de movimiento basado en Arduino rastrea el movimiento de la cabeza (6Doos), enviando datos a una PC. La PC ejecuta el algoritmo de corrección de fase y actualiza el SLM en tiempo real.
  • Transformación de Coordenadas: El sistema incluye un algoritmo de transformación de coordenadas específico para compensar los efectos de magnificación del espejo cóncavo y los errores de ensamblaje (por ejemplo, ligeros desalineamientos en la posición de la imagen real), asegurando que la imagen reconstruida aparezca en la profundidad correcta.

Contribuciones Clave

1. Algoritmo de 6DoF en Tiempo Real: La propuesta de un algoritmo basado en la corrección de fase que desacopla el tiempo de cálculo de la complejidad del objeto, permitiendo la generación de hologramas en tiempo real para la visualización 6DoF en hardware estándar.
2. Prototipo Integrado: El desarrollo de un prototipo de holo-HMD compacto, ligero (287 g), que integra seguimiento de movimiento, reconstrucción a todo color y óptica de campo de visión amplio.
3. Compensación de Errores: La implementación de transformaciones de coordenadas para corregir los errores de ensamblaje óptico y las propiedades de magnificación específicas del espejo cóncavo utilizado en el prototipo.

Resultados

• Rendimiento: El sistema alcanzó una tasa de fotogramas de aproximadamente 35.7 a 40 fps (25–28 ms por fotograma) para la generación de CGH. El tiempo de cálculo se mantuvo constante independientemente del número de fuentes de luz puntuales, confirmando la eficiencia del método de corrección de fase.
• Campo de Visión (FOV): El prototipo logró un FOV máximo teórico de $18.23^\circ$ y un FO de experimentación de $17.06^\circ$.
• Calidad de Imagen:
  • Profundidad: Los experimentos demostraron una expresión de profundidad exitosa, donde los objetos en diferentes profundidades (50 mm y 250 mm) estaban en foco solo cuando la cámara se enfocaba en ellos, mientras que otros permanecían desenfocados.
  • Color: Se logró la reconstrucción a todo color mediante multiplexación por división de tiempo, sin parpadeo observado.
  • Movimiento 6DoF: El sistema mostró con éxito imágenes reconstruidas que permanecieron fijas en relación con el entorno externo mientras el usuario movía la cabeza. Esto incluyó traslación hacia adelante/atrás ($\pm 150$ mm), rotación de balanceo (roll $\pm 30^\circ$), rotación de cabeceo (pitch $\pm 1.5^\circ$) y rotación de guiñada (yaw $\pm 3^\circ$).
  • Limitaciones: Los ángulos de rotación para el cabeceo (pitch) y la guiñada (yaw) estuvieron limitados por la naturaleza plana del plano de luz del objeto precalculado y la necesidad de prevenir el aliasing. Se observaron artefactos de difracción de orden superior durante las rotaciones de balanceo (roll) amplias.

Significancia y Reivindicaciones
El artículo afirma que este trabajo aborda uno de los desafíos más críticos de las holo-HMD: lograr la generación de datos holográficos en tiempo real para seis grados de libertad. Al integrar el seguimiento de movimiento, un FO amplio y la visualización a color en un paquete único, ligero y compacto, los autores demuestran que las holo-HMD prácticas se están volviendo factibles.

Los autores señalan modestamente que, si bien el FO actual ($\approx 20^\circ$) es comparable al de algunas gafas de AR existentes, es más estrecho que los sistemas de VR modernos o las gafas de AR avanzadas (a menudo $>50^\circ$). Identifican que es necesario un trabajo futuro para expandir el FO utilizando tecnologías como Elementos Ópticos Holográficos (HOEs) o sistemas de guía de ondas, así como para mejorar la calidad de la imagen abordando el ruido de moteado (speckle noise). No obstante, el estudio proporciona una guía útil y una prueba de concepto funcional para el desarrollo futuro y la implementación práctica de pantallas holográficas para uso en la cabeza.