está buscando quitarle el aguijón a la creación de mundos virtuales en 3D con un nuevo modelo. GET3D puede generar personajes, edificios, vehículos y otros tipos de objetos 3D, dice NVIDIA. El modelo también debería poder crear formas rápidamente. La compañía señala que GET3D puede generar alrededor de 20 objetos por segundo usando una sola GPU.
Los investigadores entrenaron al modelo usando imágenes 2D sintéticas de formas 3D tomadas desde múltiples ángulos. NVIDIA dice que tomó solo dos días alimentar alrededor de 1 millón de imágenes en GET3D usando GPU A100 Tensor Core.
El modelo puede crear objetos con «texturas de alta fidelidad y detalles geométricos complejos», Isha Salian de NVIDIA. Las formas que hace GET3D «tienen la forma de una malla triangular, como un modelo de papel maché, cubierto con un material texturizado», agregó Salian.
Los usuarios deberían poder importar rápidamente los objetos en motores de juegos, modeladores 3D y renderizadores de películas para editarlos, ya que GET3D los creará en formatos compatibles. Eso significa que podría ser mucho más fácil para los desarrolladores crear mundos virtuales densos para juegos y el metaverso. NVIDIA citó la robótica y la arquitectura como otros casos de uso.
La compañía dijo que, basándose en un conjunto de datos de entrenamiento de imágenes de automóviles, GET3D pudo generar sedanes, camiones, autos de carrera y camionetas. También puede producir zorros, rinocerontes, caballos y osos después de haber sido entrenado con imágenes de animales. Como era de esperar, NVIDIA señala que cuanto más grande y diverso sea el conjunto de entrenamiento que se introduce en GET3D, «más variado y detallado será el resultado».
Con la ayuda de otra herramienta NVIDIA AI, es posible aplicar varios estilos a un objeto con indicaciones basadas en texto. Puede aplicar un aspecto quemado a un automóvil, convertir un modelo de una casa en una casa embrujada o, como sugiere un video que muestra la tecnología, aplicar rayas de tigre a cualquier animal.
El equipo de investigación de NVIDIA que creó GET3D cree que las futuras versiones podrían entrenarse con imágenes del mundo real en lugar de datos sintéticos. También es posible entrenar el modelo en varios tipos de formas 3D a la vez, en lugar de tener que centrarse en una categoría de objetos en un momento dado.
Todos los productos recomendados por Engadget son seleccionados por nuestro equipo editorial, independiente de nuestra empresa matriz. Algunas de nuestras historias incluyen enlaces de afiliados. Si compra algo a través de uno de estos enlaces, podemos ganar una comisión de afiliado. Todos los precios son correctos en el momento de la publicación.