Blog de Canto
Tecnología que crea imágenes y música
Esta plataforma sigue estando en su fase experimental y de aprendizaje por medio de la inteligencia artificial, pero es una de las áreas a las que les dará prioridad la empresa de IA de imágenes Stable Diffusion. La plataforma se llama Riffusion y por el momento podemos jugar con ella de forma gratuita. Lo que hace esta plataforma es crear imágenes de un espectograma, además de música según los prompts que le asignemos. La calidad del audio y de la imagen siguen siendo demasiado básicos y de mala calidad, pero recordemos que el potencial del Machine Learning es asombroso, ya que sólo necesita cada vez más datos para ser cada vez mejor y entregar un resultado de mayor calidad y profesionalismo hasta el momento en que ya no podamos distinguir qué es real y qué no.
Riffusion es una librería de Stable Diffusion con lo cual podemos crear estas imágenes espectográficas y cierta música con algunas palabras que pongamos, por ejemplo, si ponemos “Rainy day in a dark forest”, tratará de darnos su recomendación según lo que ha aprendido de lo que sería esa música, unido a una imagen de sus frecuencias, armónicos y formantes que la representan. Así es que podemos jugar un buen rato poniéndole palabras para ver qué nos arroja la aplicación. Lo único malo es que por el momento nos da muy poco tiempo, tan sólo 5 segundos y se repite infinitamente como un loop. Sin embargo, como siempre digo, lo importante son las posibilidades que esto comienza a traer, ya que pasará lo mismo que con las imágenes en un futuro próximo. Lo único que tendremos que hacer es poner esa frase y seguramente nos dará una versión de audio que podremos ir entrenando para hacerla cada vez más sofisticada hasta tener una pista de 3 o 4 minutos tal como nos la imaginamos.
Stable Diffusion está creciendo a pasos agigantados y así como otras empresas como OpenAI está tratando de crear otros productos que no sólo sean de imágenes, por ejemplo, como también ya lo está haciendo con Dance Diffusion. Es espectacular el avance que han tenido en este año y seguramente veremos muchas sorpresas de esta empresa en el 2023 ya con estas plataformas más entrenadas. Aquí te dejo la página oficial para que experimentes con lo que se puede hacer actualmente con Riffusion y saques la foto de tu nueva canción en versión espectógrafo.
Comments