Disney creó una herramienta de IA que elimina automáticamente la edad de los actores


Demostrando aún más el poder de la inteligencia artificial cuando se trata de alterar imágenes de manera fotorrealista, investigadores de Disney han revelado una nueva herramienta de envejecimiento/desenvejecimiento que puede hacer que un actor parezca convincentemente mayor o más jovensin necesidad de semanas de complejos y costosos trabajos de efectos visuales.

Al ver una película de gran éxito como la de 2018 Ant-Man y la Avispa, la mayoría de los espectadores pueden reconocer fácilmente el trabajo de los muchos estudios de efectos visuales que contribuyen a estas películas, con sus llamativos momentos en los que Ant-Man se encoge o crece hasta alcanzar proporciones gigantescas. Pero a veces es el trabajo de efectos visuales más sutil con el que puede ser más difícil lograr resultados fotorrealistas, como las tomas con versiones más jóvenes de los actores Michelle Pfeiffer y Michael Douglas. Para obtener resultados como los que se ven en la película, los artistas talentosos deben pasar semanas borrando las arrugas y otros signos reveladores de la edad del rostro de un actor, o reemplazarlo por completo con un doble generado por computadora.

Los efectos visuales son una poderosa herramienta cinematográfica, pero hay muchas razones para encontrar formas de hacerlos más fáciles de crear; de aligerar la carga de los artistas que ya están sobrecargados de trabajo y mal pagados, hasta hacer que las herramientas sean accesibles para los cineastas que no trabajan con inmensos presupuestos del tamaño de Hollywood. Por supuesto, incluso para los grandes estudios, también existe un motivo de lucro al poder automatizar este tipo de trabajo.

Es por eso que compañías como Disney invierten en investigación para ayudar a avanzar en el arte de los efectos visuales, pero en los últimos años estos investigadores también han estado explorando cómo la inteligencia artificial puede simplificar el trabajo de VFX. Hace dos años, Disney Research Studios desarrolló herramientas impulsadas por IA que podría generar videos de intercambio de caras con suficiente calidad y resolución para ser utilizado para la realización de películas profesionales (en lugar de los cuestionables GIF de baja resolución que se comparten en Internet). Este año, los investigadores están demostrando una nueva herramienta que aprovecha los trucos de la IA para hacer que los actores parezcan mayores o más jóvenes, menos las semanas de trabajo que normalmente se necesitan para perfeccionar ese tipo de tomas.

Reenvejecimiento facial listo para producción para efectos visuales

Ya se ha probado el uso de redes neuronales y aprendizaje automático para envejecer o reducir el envejecimiento de una persona, y aunque los resultados son lo suficientemente convincentes cuando se aplican a imágenes fijas, no produjeron resultados fotorrealistas en video en movimiento, con artefactos temporales que aparecen y desaparecen. de cuadro a cuadro, y la apariencia de la persona ocasionalmente se vuelve irreconocible mientras se reproduce el video alterado.

Para crear una herramienta de inteligencia artificial que cambiara la edad, que estuviera lista para las demandas de Hollywood y lo suficientemente flexible para trabajar con imágenes en movimiento o tomas en las que un actor no siempre mira directamente a la cámara, los investigadores de Disney, como detallado en un artículo publicado recientemente, primero creó una base de datos de miles de rostros sintéticos generados aleatoriamente. Las herramientas de envejecimiento de aprendizaje automático existentes se usaron para envejecer y reducir el envejecimiento de estos miles de sujetos de prueba inexistentes, y esos resultados se usaron para entrenar una nueva red neuronal llamada FRAN (red de envejecimiento facial).

Una ilustración paso a paso de cómo FRAN genera cambios de envejecimiento/desenvejecimiento que se aplican a la cara de entrada original.

Cuando FRAN recibe una foto de rostro de entrada, en lugar de generar una foto de rostro alterada, predice qué partes de la cara se alterarían con la edad, como la adición o eliminación de arrugas, y esos resultados luego se superponen sobre la cara original como una capa adicional. canal de información visual añadida. Este enfoque conserva con precisión la apariencia y la identidad del artista, incluso cuando su cabeza se mueve, cuando su rostro mira a su alrededor o cuando las condiciones de iluminación en una toma cambian con el tiempo. También permite que un artista ajuste y modifique los cambios generados por la IA, lo cual es una parte importante del trabajo de VFX: hacer que las alteraciones se mezclen perfectamente en una toma para que los cambios sean invisibles para la audiencia.



Source link-45