Científicos reconstruyen habitaciones a partir de reflejos oculares al estilo ‘CSI’


Hay un dicho que dice que los ojos son la ventana al alma de una persona, pero según un equipo de investigadores de la Universidad de Marylandlos ojos podrían ser en cambio un espejoproporcionando suficientes datos para reconstruir exactamente que una persona en un video clip corto estaba mirando como un modelo 3D interactivo.

Muchos factores hechos CSI, y sus derivados, una popular franquicia de CBS, pero lo que atrajo a muchos espectadores, semana tras semana, fue la tecnología de punta que los investigadores de la escena del crimen tenían a su disposición. Un cuadro de video granulado y de baja resolución capturado en medio de la noche por una cámara de seguridad podría mejorarse repetidamente hasta que revelara las fibras individuales en la camisa de un sospechoso. La mayoría de las herramientas utilizadas para resolver crímenes en el programa solo existen en el escritores imaginación, pero los investigadores están logrando avances impresionantess cuando se trata de la cantidad de datos que se pueden extraer de unos pocos cuadros de secuencias de video.

Aprovechando investigaciones previas sobre tecnología de campo de radiación neuronal (NeRF), donde las escenas u objetos complejos se pueden recrear completamente en 3D utilizando solo un conjunto parcial de imágenes 2D capturadas en varios ángulos, y el hecho de que la forma de la córnea del ojo es más o menos la misma para todos los adultos sanos, la Universidad de Maryland, los investigadores pudieron generar recreaciones en 3D de escenas simples basadas en imágenes extraídas de los reflejos de los ojos. no esperes los resultados para ser utilizado para resolver cualquier crimen, aunque.

Este enfoque, como se detalla en un estudio publicado recientemente, viene con algunos desafíos únicos. Para empezar, la recreación de modelos 3D a partir de imágenes 2D generalmente comienza con material fuente de alta calidad, como un video capturado con la cámara digital de un teléfono inteligente moderno. Aquí, los reflejos se extraen de una porción diminuta de baja resolución de cada cuadro y se superponen sobre las texturas complejas del iris del ojo, que también varía en color de una persona a otra, lo que requiere un extenso procesamiento posterior para limpiarlo. las imágenes

Para complicar aún más este enfoque, está el hecho de que la serie de imágenes 2D que se utilizan para crear la reconstrucción se originan todas en la misma ubicación, con solo ligeras variaciones introducidas a medida que el ojo del sujeto mira a su alrededor. Si alguna vez ha intentado generar un modelo 3D de un objeto o una habitación usando la cámara de un teléfono inteligente y una aplicación, sabe que debe moverse y grabarlo desde todos los lados y ángulos para obtener resultados óptimos. Pero esa no es una opción aquí.

Como resultado, los modelos 3D generados con esta nueva técnica tienen una resolución muy baja y poca detalles. Todavía puedes identificar objetos como un perro de peluche o un juguete Kirby de color rosa brillante, como lo hicieron los investigadores. pero estos resultados también se lograron utilizando condiciones óptimas: escenas muy básicas, iluminación muy deliberada e imágenes de fuente de alta resolución.

Cuando los investigadores intentaron aplicar su enfoque a las imágenes, no fueron responsables de capturarlas, pero aun así se crearon utilizando condiciones de iluminación ideales, como un clip de Miley Cyrus de su Bola de demolición video musical procedente de YouTube, es imposible discernir lo que está viendo en el modelo 3D resultante. La mancha vaga es probablemente un agujero en una cubierta blanca a través de la cual miraba la lente de la cámara para lograr el aspecto específico de esta toma, pero ni siquiera el equipo de CSI de Grissom pudo confirmarlo usando este modelo 3D. Tan fascinante como esta investigación puede serva a pasar un tiempo antes de que se convierta en una herramienta que tenga aplicaciones prácticas.



Source link-45