Powder, una herramienta de recorte de IA para juegos, puede detectar cuando un creador grita durante una transmisión


Powder, un software de recorte impulsado por inteligencia artificial que toma lo más destacado de las transmisiones de juegos y los convierte en videos cortos, pronto podrá detectar gritos para que los jugadores creen montajes aún mejores. La plataforma también está trabajando en software de conversión de voz a texto para que los creadores puedan obtener una transcripción de toda su transmisión y buscar palabras clave.

Powder ha desarrollado más de 40 modelos de IA específicos de juegos, incluido análisis de audio y detección de risas, así como modelos independientes para títulos populares como Fortnite, Valorant, Apex Legends, Call of Duty, Rocket League, Fall Guys, Elden Ring y Among Us. . La compañía también está lanzando un modelo para Counter-Strike 2.

Todos los modelos funcionan de manera similar; La IA escanea las grabaciones de la transmisión, ya sea de Twitch, YouTube o un archivo MP4, y encuentra picos de actividad, incluidas victorias, asistencias, muertes y otros momentos del juego basados ​​en el rendimiento. Powder toma estos aspectos destacados y crea montajes cortos para que los creadores los suban a las redes sociales.

Créditos de imagen: Polvo

De manera similar a su capacidad de reconocimiento de risas, la plataforma pronto lanzará otra herramienta de inteligencia artificial que reconoce las fluctuaciones en la voz para que los creadores puedan generar clips de ellos gritando, una reacción común cuando se juegan intensas partidas igualadas. La compañía anticipa un lanzamiento a mediados de diciembre.

«Desde risas incontrolables y abandonos de ira hasta incluso cuando no sucede nada obvio en la pantalla, los mejores momentos en los que el juego es altamente subjetivo y deben reflejarse con varias perspectivas diferentes que se extienden más allá del juego en sí», Barthélémy, cofundador y director ejecutivo de Powder. Kiss dijo a TechCrunch. “Esto nos aseguró que necesitábamos capturar la emoción de jugar con la comunidad. Esta combinación de momentos basados ​​en habilidades y momentos profundamente emocionales es lo que hace que la creación de contenido de juegos sea tan única y especial”.

El próximo mes también llegará a la plataforma la tecnología de voz a texto, que brinda a los creadores una transcripción de una transmisión y les permite buscar rápidamente palabras específicas y obtener los mejores momentos destacados. Los streamers también pueden ingresar indicaciones de estado de ánimo. Por ejemplo, «Búscame cinco clips divertidos en los que mis fans se vuelvan locos». El software está diseñado con la jerga de los jugadores para ayudar a que los resultados sean más exactos y precisos.

«Poder buscar y contextualizar clips en videos largos como transmisiones de Twitch con IA es el santo grial para los creadores de contenido y los equipos que los apoyan, desde sus editores de video hasta sus agentes y gerentes», dijo Kiss.

Créditos de imagen: Polvo

Además, Powder está actualizando su función «Community Hype», que se lanzará la próxima semana. El modelo de IA se lanzó en septiembre y detecta picos de chat. La actualización recomendará clips en los que la comunidad «se vuelve loca», dijo Kiss.

“El lanzamiento de la segunda fase de detección de Community Hype tiene como objetivo desbloquear otra perspectiva que influye en lo que constituye un ‘momento destacado’ en una transmisión. Una dimensión de esto es comprender lo que piensa la comunidad, que conoce mejor a un streamer. Las comunidades tienen un gran sentido de lo que importa en una sesión o transmisión de juego determinada. En este último lanzamiento, cuando la comunidad se vuelve loca y quiere recordar un momento, ese es un momento que Powder AI te recomendará guardar como un clip para compartir”, explicó.

Según la encuesta de Powder a más de 3200 streamers, los creadores pasan un promedio de 53 horas al mes o 630 horas al año buscando momentos destacados y editando clips. Powder afirma ahorrar a los streamers más de 10 horas por semana o 520 horas al año.

La startup con sede en Francia fue fundada en 2018 por Kiss, Yannis Mangematin, Stanislas Coppin y Christian Navelot. Ha recaudado 22 millones de dólares hasta la fecha.



Source link-48