MusicLM

Acerca de MusicLM

Generación de música impulsada por IA a partir de texto

MusicLM es un potente modelo de generación musical desarrollado por Google Research que convierte descripciones en lenguaje natural en música de alta fidelidad. Ya sea que busques una melodía de piano relajante, un ritmo tecno vibrante o un trío de jazz improvisando sincronizado, MusicLM interpreta tus ideas y las transforma en audio original.

Modelado jerárquico de secuencia a secuencia

El modelo aborda la generación musical mediante una estructura jerárquica, lo que permite producir clips de audio largos y coherentes a 24 kHz. Esto garantiza claridad y continuidad musical a lo largo de varios minutos de reproducción.

Cómo funciona MusicLM

Composición basada en texto

Los usuarios proporcionan descripciones textuales detalladas o sencillas, como «una melodía de jazz relajante con piano y batería suave», y MusicLM compone música que se ajusta tanto al género como al tono emocional descritos. Reconoce y reproduce matices de estilo, tempo, instrumento y atmósfera.

Doble condicionamiento: texto y melodía

Además de las indicaciones de texto, MusicLM también incorpora condicionamiento de melodías. Esto significa que puedes tararear o silbar una melodía y transformarla en una pieza musical estilísticamente acorde con tu texto.

Capacidades de MusicLM

Generación de formato largo

MusicLM destaca por crear composiciones extensas, manteniendo la coherencia temática y armónica durante varios minutos. Esto es ideal para música de fondo, narración o ambientación.

Modo historia

Mediante una secuencia de indicaciones, los usuarios pueden generar audio que evoluciona con el tiempo. Por ejemplo, una pieza podría comenzar como una banda sonora meditativa y gradualmente transformarse en un ritmo energético para entrenar, reflejando cada fase de una narrativa o experiencia.

Casos de uso para MusicLM

Proyectos creativos

Compositores, cineastas y creadores pueden generar música que se ajuste a su visión sin necesidad de herramientas de producción tradicionales. Simplemente describe la escena y MusicLM crea una banda sonora a la medida.

Experimentación musical

Los artistas pueden explorar nuevos géneros, combinar instrumentos o generar variaciones de la misma idea para encontrar inspiración inesperada.

Aplicaciones educativas y de investigación

Con su conjunto de datos MusicCaps publicado de 5.500 pares de música y texto, MusicLM también apoya la investigación académica en generación de música y aprendizaje automático.

Ejemplos de lo que MusicLM puede generar

Descripciones

• «A fusion of reggaeton and electronic dance music, with a spacey, otherworldly sound.»
• «Slow tempo, bass-and-drums-led reggae with relaxed vocals and sustained electric guitar.»

De subtítulos inspirados en imágenes

• The Persistence of Memory by Salvador Dalí becomes an eerie, surreal soundscape.
• Dance by Henri Matisse inspires upbeat, joyful rhythms with collective energy.

De instrumentos o géneros

• Generate solo compositions based on instruments like cello, flute, or electric guitar.
• Choose from genres such as ambient, 8-bit, big beat, or 90s house.

Aspectos técnicos destacados

• 24 kHz Audio Output: Professional-quality audio generation.
• Multi-minute Duration: Capable of maintaining structure and theme.
• Melody Conditioning: Hummed or whistled melodies guide the output.
• Diversity Testing: Generates multiple variations from the same prompt to show creative range.