El futuro iPhone podría obtener imágenes panorámicas de campo de luz para una realidad virtual inmersiva

Apple ha estado investigando cómo traer imágenes panorámicas de campo de luz a la cámara del iPhone, una función que te permitiría sumergirte mientras exploras escenas capturadas con paralaje, separación clara de objetos y otros efectos visuales en realidad virtual o aumentada.

---

DESTACADOS DE LA HISTORIA:

• Apple ha ganado una patente para imágenes de campo de luz en iPhone y iPad
• La invención replica la funcionalidad proporcionada por las cámaras plenopticas
• Tales imágenes cobrarían vida en realidad virtual o aumentada.

---

Apple investiga imágenes de campo de luz en iPhone y iPad

Las cámaras plenópticas como la Lytro logran esto empleando una matriz de microlentes colocadas frente a un sensor de imagen para detectar información de color, intensidad y dirección. En los teléfonos inteligentes, el espacio es escaso, por lo que Apple ideó una solución que no requiere un conjunto de lentes.

En una patente recientemente otorgada titulada «Captura, procesamiento y visualización de campos de luz panorámica», el fabricante del iPhone prevé usar gestos con las manos para hacer que la cámara del iPhone capture una escena desde diferentes posiciones. Uno de los gestos ilustrados consiste en mover un iPhone o iPad en un símbolo de infinito en picado para capturar una escena desde múltiples ángulos.

Por el contrario, las panorámicas regulares que puede capturar en su iPhone en este momento implican mover el dispositivo de izquierda a derecha o de arriba a abajo para capturar una secuencia de imágenes de una escena, que luego se unen para formar una fotografía de gran angular. En la fotografía de campo de luz, un dispositivo captura tanto el color como la dirección en la que viajan los rayos de luz en el espacio.

También se captura la información de los sensores integrados, como la posición de la cámara y la orientación del dispositivo. El algoritmo de Apple luego almacenaría las imágenes individuales, sus posiciones relativas y la información de profundidad como un panorama de campo de luz con el que luego se podría interactuar de varias maneras.

La captura de imágenes de campo de luz implicaría ventajas que no se limitan a la profundidad de campo selectiva (que ya lo hace la cámara del iPhone) o la determinación de la dirección de los rayos de luz.

Exploración de imágenes de campo de luz en AR y VR

En una realización, un usuario puede desplazarse por diferentes vistas en 3D de la escena. Debido a que el sistema es consciente de las posiciones relativas de las imágenes y los objetos individuales, podría permitir que un usuario explore la escena desde diferentes posiciones y ángulos con seis grados de libertad.

Puede ver algunas de las aplicaciones más prácticas de la tecnología emergente de imágenes de campo de luz en un video publicado en los documentos técnicos SIGGRAPH 2020 .

Cuando se experimenta en una pantalla montada en la cabeza (se dice que Apple está trabajando en esas cosas), un espectador puede ver detrás o por encima de los objetos en la escena, acercar o alejar la escena o ver diferentes partes de la escena, explica Apple. Agregue un efecto de paralaje a la mezcla y obtendrá una experiencia de realidad aumentada muy inmersiva basada en sus propias imágenes panorámicas de campo de luz.

Como escribe Apple en los documentos de patente concedidos:

La imagen que se captura tiene en cuenta el paralaje en el sentido de que cuando la imagen se representa en realidad virtual, los objetos de la escena se moverán correctamente según su posición en el mundo y la posición relativa del espectador con respecto a ellos. Además, el contenido de la imagen parece fotográficamente realista en comparación con las representaciones de contenido generado por computadora que normalmente se ven en sistemas de realidad virtual.

Un espectador también podría traducir en diferentes direcciones y rotar con el contenido, otra gran característica al explorar estas cosas en realidad virtual o aumentada.

? Consejos de fotografía con iPhone que todos deberían saber

Apple dice que las tecnologías de imágenes de 360 ??grados existentes, como la fotosfera, solo permiten tres grados de libertad, lo que limita la experiencia a la rotación de la cabeza. Las fotosferas no admiten la traducción del usuario a través del contenido como pueden cuando exploran el panorama del campo de luz.

Para obtener más información sobre esta patente, visite el sitio web de la USPTO .