NVIDIA presenta Avatar Cloud Engine (ACE), un modelo de IA personalizado que integra IA en personajes no jugables (NPC) para interacciones de lenguaje de juego natural.
Con la ayuda de esta herramienta, los desarrolladores de software y juegos podrán crear e integrar modelos únicos de IA de voz, conversación y movimiento. El proyecto se lleva a cabo en asociación con Convai, una empresa que desarrolla IA conversacional para entornos de juegos en línea.
Así es como NVIDIA desglosa los cimientos del modelo:
- NVIDIA NeMo: para crear, personalizar e implementar modelos de lenguaje utilizando datos propietarios. Los modelos de lenguaje grande se pueden personalizar con la tradición y las historias de fondo de los personajes y se pueden proteger contra conversaciones contraproducentes o inseguras a través de NeMo Guardrails.
- NVIDIA Riva: para el reconocimiento de voz automático y texto a voz para habilitar la conversación de voz en vivo.
- NVIDIA Omniverse Audio2Face: para crear instantáneamente una animación facial expresiva de un personaje de juego para que coincida con cualquier pista de voz. Audio2Face presenta conectores Omniverse para Unreal Engine 5, por lo que los desarrolladores pueden agregar animación facial directamente a los personajes de MetaHuman.
NVIDIA también mostró el modelo al demostrar un ejemplo de una conversación generada por IA con un NPC. Como puede ver en el video a continuación, el personaje responde preguntas basadas en la historia de fondo narrativa con la ayuda de la IA generativa.
La nueva herramienta de NVIDIA es un avance significativo para la industria del juego. Estamos emocionados de ver cómo se incorpora la IA en los próximos juegos, ya que cambiará significativamente la experiencia de jugar un título en particular, principalmente cuando se trata de NPC.
NVIDIA ACE: dando vida a los NPC
Los desarrolladores de juegos y las nuevas empresas ya están utilizando las tecnologías de IA generativa de NVIDIA. Por ejemplo, GSC Game World está utilizando Audio2Face en el tan esperado STALKER 2 Corazón de Chernobyl. Y el desarrollador independiente Fallen Leaf está utilizando Audio2Face para la animación facial de personajes en Fuerte Solís, su thriller de ciencia ficción en tercera persona ambientado en Marte. Además, Charisma.ai, una empresa que habilita personajes virtuales a través de IA, está aprovechando Audio2Face para potenciar la animación en su motor de conversación.
a través de NVIDIA
NVIDIA está aprovechando la IA en todos los ámbitos y los juegos son un segmento esencial en el que la empresa también está incorporando su tecnología Neural Compression para obtener detalles de hasta 16x, entrenando los modelos DLSS 3 en servidores NVIDIA para obtener detalles y calidad mejorados y una nueva tecnología de caché radiante que puede ayudar a mejorar el rendimiento del seguimiento de rutas en títulos como Cyberpunk 2077 que lo utilizan.