Si pensabas que el último DLSS 3 de Nvidia (se abre en una pestaña nueva) La tecnología de aceleración de la velocidad de fotogramas fue bastante engañosa, como dicen, no has visto nada. Permítanos presentarle NeRFs o Neural Radiance Fields, (se abre en una pestaña nueva) un método acelerado por IA terriblemente inteligente para generar escenas 3D completas a partir de un puñado de fotos.
La idea es conceptualmente simple. Tome algunas imágenes 2D de algo. Ejecutarlo a través de algunos algoritmos de IA. Renderice la cosa o las cosas, o una escena compleja completa, en 3D completo. Y en tiempo real.
Es similar al escaneo de fotos para crear escenas en 3D pero con bondad adicional de IA. Ese es el argumento de venta, al menos. Los NeRF no son exclusivos de Nvidia. Pero la compañía está haciendo algunas cosas particularmente interesantes con los NeRF que son relevantes para los juegos de PC en lugar de la creación de películas, que es donde ha estado gran parte del ruido en torno a los NeRF hasta ahora.
Puede ver este video detallado de Corridor Crew (se abre en una pestaña nueva) a principios de este año mostró lo increíble que es la tecnología NeRF para crear videos fotorrealistas a partir de unas pocas fotos. Pero una palabra de advertencia. Una vez que lo hayas visto, te hará dudar si algo de lo que ves en el video o la película es real o se ha vuelto a renderizar con NeRF. Es escalofriante.
De hecho, incluso hay aplicaciones basadas en NeRF disponibles para teléfonos inteligentes Android y Apple, como Luma AI, para que pueda probar la tecnología usted mismo.
Volviendo a la PC, además de que todo el proceso es increíblemente inteligente, ofrece una serie de ventajas inmediatas y obvias. En lugar de necesitar modelos 3D detallados y muchas texturas de alta resolución que consumen mucho ancho de banda, todo lo que se necesita para renderizar una escena compleja son algunas fotos o imágenes.
Nvidia está llevando eso a nuevos extremos, los llamados NeRF «compactos» que requieren alrededor de 100 veces menos datos para representar una escena. Los beneficios que puede tener en términos de ancho de banda y almacenamiento son bastante obvios.
Sin embargo, las implementaciones anteriores de la tecnología NeRF requerían mucho tiempo para entrenar y procesar el modelo de IA. Los NeRF «instantáneos» de Nvidia, por el contrario, pueden hacer todo el proceso en segundos.
Obviamente, todo esto apunta en una dirección bastante tentadora, es decir, usar NeRF para renderizar juegos en tiempo real. Imagine el ancho de banda potencial y el rendimiento reemplazando todos esos datos de modelo, textura e iluminación para una escena de juego con unas pocas imágenes. Y luego agregue el truco de que los resultados parecen más realistas que los motores y el arte de juegos convencionales.
Escucha, no estamos diciendo que esto esté a la vuelta de la esquina. Pero la tecnología NeRF está evolucionando increíblemente rápido. El concepto surgió hace apenas dos años y ya está generando resultados increíbles. Si revolucionará los juegos de PC, bueno, el tiempo lo dirá. Mientras esperamos, puede profundizar en el trabajo de investigación de Nvidia sobre el tema aquí (se abre en una pestaña nueva).