Recientemente, Adobe Research, en colaboración con la Northwestern University, ha desarrollado un sistema de inteligencia artificial llamado Sketch2Sound, una herramienta que promete revolucionar la forma en que los diseñadores de sonido trabajan. Sketch2Sound permite a los usuarios crear efectos de sonido y ambientes profesionales simplemente tarareando, imitando sonidos o con descripciones textuales sencillas.
El sistema analiza tres elementos clave de la entrada vocal del usuario: volumen, timbre (que determina si el sonido es brillante u oscuro) y tono. Luego, combina estas características con la descripción textual del usuario para generar el sonido deseado. Por ejemplo, si el usuario ingresa "ambiente de bosque" y emite un sonido corto, el sistema automáticamente lo identifica como el canto de un pájaro sin necesidad de instrucciones específicas.
Otro punto destacado de Sketch2Sound es su capacidad para comprender el contexto. Al crear música, el usuario puede ingresar "bombo, caja" y tararear el ritmo. El sistema inteligentemente colocará el bombo en las notas bajas y la caja en las notas altas. Este procesamiento inteligente simplifica enormemente el proceso de diseño de sonido.
Para satisfacer las necesidades de los profesionales, el equipo de investigación también ha integrado una tecnología de filtrado especial que permite a los usuarios ajustar la precisión del sonido generado según sea necesario. Los diseñadores de sonido pueden optar por un control muy preciso o por un método más relajado y aproximado. Esta flexibilidad podría hacer que Sketch2Sound sea especialmente popular entre los artistas de Foley. Estos profesionales, responsables de crear efectos de sonido para películas y programas de televisión, podrán crear efectos más rápidamente usando sonido y descripciones de texto, sin necesidad de manipular objetos físicos para producir sonidos.
Aunque los investigadores señalan que las características de audio espacial en las grabaciones de entrada a veces pueden afectar negativamente al sonido generado, están trabajando para solucionar este problema. Actualmente, Adobe aún no ha anunciado si Sketch2Sound se lanzará como producto comercial ni su fecha de lanzamiento.
Enlace al proyecto:https://hugofloresgarcia.art/sketch2sound/
Puntos clave:
🎵 Sketch2Sound es una nueva herramienta de IA que crea efectos de sonido a partir de tarareos y descripciones de texto.
🔊 El sistema analiza el volumen, el timbre y el tono, combinando la entrada de voz del usuario con texto para generar el efecto de sonido deseado.
🎬 Es especialmente útil para artistas de Foley, permitiendo la generación rápida de efectos de sonido para cine y televisión, mejorando la eficiencia del trabajo.
