Microsoft presenta nueva patente para sonido generado por IA en juegos y películas

Microsoft ha presentado una nueva patente para el uso de música/bandas sonoras/audio generados por IAen una amplia gama de medios, incluidas películas, videojuegos, grabaciones en vivo y campos relacionados. La patente se titula « MODELOS DE INTELIGENCIA ARTIFICIAL PARA CREAR MATERIALES DE AUDIO » y fue publicada el 17 de noviembre de 2022. MICROSOFT TECHNOLOGY LICENSING , LLC es el solicitante de la patente.

La descripción de la patente explica cómo se puede generar sonido en tiempo real con un sistema de inteligencia artificial construido con grandes conjuntos de datos que incluirán técnicas de aprendizaje automático utilizando señales visuales, de audio y de texto. Puede leer la descripción exacta de la patente a continuación.

Un método para entrenar uno o más modelos de IA para generar partituras de audio que acompañan conjuntos de datos visuales incluye recibir datos de entrenamiento que contienen una pluralidad de conjuntos de datos audiovisuales y analizar cada uno de los múltiples conjuntos de datos audiovisuales para extraer una pluralidad de características visuales, características textuales y características de audio. El método también incluye hacer coincidir múltiples funciones visuales y de texto con múltiples funciones de audio a través de una red de aprendizaje automático. En función de las correlaciones entre las características visuales, de texto y de audio, uno o más modelos de IA se entrenan para producir una o más partituras de audio para acompañar un conjunto de datos determinado.

Según la patente, esta nueva tecnología ayudará al sistema a generar sonido en tiempo real dependiendo de la situación o, más simplemente, ayudará a generar sonido dinámico/adaptativo . Curiosamente, esta tecnología separará la experiencia de cada persona en función de su elección y situación en un videojuego, si consideramos los videojuegos como ejemplo de implementación de esta tecnología.

La nueva IA para sonido de Microsoft podría ir mucho más allá del uso habitual de música dinámica/adaptativa en los juegos. Las acciones del jugador se pueden evaluar dinámicamente en tiempo real con señales de audio y música apropiadas. Como resultado, la experiencia de sonido diferirá de persona a persona.

Por ejemplo, usamos partituras de fondo y sonido pregrabados en videojuegos y películas que se han grabado de acuerdo con una situación predeterminada que un usuario encontrará en un juego o película en particular. Sin embargo, los videojuegos usan más tecnología de IA que las películas; En los videojuegos, muchas áreas ya están implementando IA, ya sea la interacción del jugador con los NPC o el nivel principal de sonido dinámico basado en los movimientos del jugador.

Por otro lado, las películas son más rígidas en comparación con los videojuegos porque cada aspecto de la película está predeterminado y grabado, y nada cambia en tiempo real para los espectadores. Así, como se describe en la patente, esta nueva tecnología podría ser revolucionaria en el campo de los medios. Esto cambiará todo y los jugadores o espectadores se sentirán más involucrados e inmersos que nunca en los medios que consumen.

Tampoco es tan descabellado si lo pensamos de manera realista, ya que la tecnología de IA ha evolucionado mucho en los últimos años, desde simplemente usar IA para anuncios dirigidos hasta crear fotos y videos ultrarrealistas con una sola línea de texto; la tecnología ha recorrido un largo camino y tarde o temprano se introducirá en todas las áreas de la industria de los medios para automatizar procesos largos.

Será interesante ver algo así como bandas sonoras creadas por inteligencia artificial en tiempo real. Entonces, ¿qué piensas de esto? ¿Estás deseando experimentar algo así? Háganos saber en la sección de comentarios.