Era solo cuestión de tiempo antes de que alguien combinara el generador de imágenes Stable Diffusion AI y la línea de comandos de Minecraft. Este es probablemente uno de los mejores usos de los generadores de imágenes de IA que he visto hasta ahora, esencialmente utilizando una combinación de capturas de pantalla de Minecraft e indicaciones de texto para crear imágenes muy detalladas cada vez que el usuario realiza cambios en su diseño dentro del mundo del juego de Minecraft.
Sean Simon, más conocido como ThoseSixFaces (o Lozmosis en Reddit) (se abre en una pestaña nueva)), publicó el video anterior ayer mostrando una versión acelerada de sus guiones ejecutándose en vivo mientras jugaban en el juego.
Funciona tomando capturas de pantalla desde un ángulo específico mientras se juega, redimensionándolas o recortándolas a 512×512 píxeles y guardándolas en una carpeta. Cada cuadro se genera en «un intervalo fijo, o cada vez que el jugador coloca/quita un bloque». Usando una versión de InvokeAI (se abre en una pestaña nueva) que Sean modificó, el modelo luego «apunta a la última imagen en la carpeta y genera la imagen de difusión estable». Otro script luego muestra la imagen de salida usando tkinter (se abre en una pestaña nueva).
Difusión estable (se abre en una pestaña nueva) Sin embargo, lo principal es traducir cada cuadro en hermosas imágenes generadas por IA, lo que Sean explica «elimina el ruido en un valor aleatorio entre 0.47-0.5». Entonces, aunque Sean puede usar indicaciones para empujar la IA en la dirección preferida usando image2image (se abre en una pestaña nueva)todavía hay un pequeño margen de maniobra en lo aleatorios que pueden ser los resultados generados.
Tal como está ahora, el proceso implica ejecutar varios scripts, aunque Sean está «ansioso por comprimir todo esto en un solo script».
Es un proyecto fascinante, y mis profesores de arte de la universidad estarían muy emocionados de verlo funcionar; parecían tener una obsesión con traducir el trabajo a diferentes medios y luego volver a traducirlo. En ese sentido, un comentarista de Reddit sugiere en broma un proceso inverso a Sean, en el que la IA «convertiría las artes en minecraft».
Sean responde: «Empecé a preparar algo», por lo que puede que no pase mucho tiempo antes de que veamos que los mundos de Minecraft se generan utilizando indicaciones de imágenes de IA. O, de hecho, los mundos de Minecraft se traducen en imágenes y luego vuelven a los mundos de Minecraft.
Vaya, en qué mundo vivimos.
Lamentablemente, los scripts de Sean aún no están disponibles para descargar desde Github, pero esté atento a su Gorjeo (se abre en una pestaña nueva) para actualizaciones
Ahora, hemos visto el uso de Stable Diffusion en VR (se abre en una pestaña nueva)y el CEO del bot de imágenes de Discord, Midjourney, especula que las futuras consolas tendrán un «chip de IA gigante y todos los juegos serán sueños». (se abre en una pestaña nueva).» Este proyecto de Minecraft es una adición más a la emocionante narrativa centrada en la IA que está surgiendo en la esfera de los juegos en este momento.