MusicLM

Acerca de MusicLM

Generación de música impulsada por IA a partir de texto

MusicLM es un potente modelo de generación musical desarrollado por Google Research que convierte descripciones en lenguaje natural en música de alta fidelidad. Ya sea que busques una melodía de piano relajante, un ritmo tecno vibrante o un trío de jazz improvisando sincronizado, MusicLM interpreta tus ideas y las transforma en audio original.

Modelado jerárquico de secuencia a secuencia

El modelo aborda la generación musical mediante una estructura jerárquica, lo que permite producir clips de audio largos y coherentes a 24 kHz. Esto garantiza claridad y continuidad musical a lo largo de varios minutos de reproducción.

Cómo funciona MusicLM

Composición basada en texto

Los usuarios proporcionan descripciones textuales detalladas o sencillas, como «una melodía de jazz relajante con piano y batería suave», y MusicLM compone música que se ajusta tanto al género como al tono emocional descrito. Reconoce y reproduce matices de estilo, tempo, instrumento y atmósfera.

Doble condicionamiento: texto y melodía

Además de las indicaciones de texto, MusicLM también incorpora condicionamiento de melodías. Esto significa que puedes tararear o silbar una melodía y transformarla en una pieza musical estilísticamente acorde con tu texto.

Capacidades de MusicLM

Generación de formato largo

MusicLM destaca por crear composiciones extensas, manteniendo la coherencia temática y armónica durante varios minutos. Esto es ideal para música de fondo, narración o ambientación.

Modo historia

Mediante una secuencia de indicaciones, los usuarios pueden generar audio que evoluciona con el tiempo. Por ejemplo, una pieza podría comenzar como una banda sonora meditativa y gradualmente transformarse en un ritmo energético para entrenar, reflejando cada fase de una narrativa o experiencia.

Casos de uso de MusicLM

Proyectos creativos

Compositores, cineastas y creadores pueden generar música que se ajuste a su visión sin necesidad de herramientas de producción tradicionales. Simplemente describe la escena y MusicLM creará la banda sonora perfecta.

Experimentación musical

Los artistas pueden explorar nuevos géneros, combinar instrumentos o generar variaciones de la misma idea para encontrar inspiración inesperada.

Aplicaciones educativas y de investigación

Con su conjunto de datos MusicCaps publicado de 5.500 pares de música y texto, MusicLM también apoya la investigación académica en generación de música y aprendizaje automático.

Ejemplos de lo que MusicLM puede generar

De las descripciones

• Una fusión de reggaetón y música electrónica de baile, con un sonido espacial y sobrenatural.
• Reggae de ritmo lento, con bajo y batería, voces relajadas y una guitarra eléctrica sostenida.

De subtítulos inspirados en imágenes

• La persistencia de la memoria de Salvador Dalí se convierte en un paisaje sonoro inquietante y surrealista.
• La danza de Henri Matisse inspira ritmos alegres y animados con energía colectiva.

De instrumentos o géneros

• Genera composiciones solistas basadas en instrumentos como el violonchelo, la flauta o la guitarra eléctrica.
• Elige entre géneros como ambient, 8 bits, big beat o house de los 90.

Aspectos técnicos destacados

• Salida de audio de 24 kHz: Generación de audio de calidad profesional.
• Duración de varios minutos: capaz de mantener la estructura y el tema.
• Acondicionamiento de la melodía: Las melodías tarareadas o silbadas guían la salida.
• Prueba de Diversidad: Genera múltiples variaciones a partir de la misma consigna para mostrar la variedad creativa.