Recientemente, el laboratorio Tongyi ha lanzado oficialmente InspireMusic, su innovadora tecnología de generación de música de código abierto. Esta tecnología tiene como objetivo crear un conjunto de herramientas AIGC de código abierto que integre la generación de música, canciones y audio, ofreciendo una plataforma integral para investigadores, desarrolladores y aficionados a la música.
InspireMusic no solo proporciona a investigadores y desarrolladores herramientas completas para entrenar y ajustar modelos de generación de música/canciones/audio, sino que también les equipa con modelos eficientes para optimizar los resultados. Además, este conjunto de herramientas reduce significativamente la barrera de entrada para la creación musical, permitiendo a los aficionados generar fácilmente una variedad de obras musicales a través de descripciones textuales o indicaciones de audio.
El modo de creación de música a partir de texto de InspireMusic es particularmente notable. Abarca una variedad de estilos musicales, expresiones emocionales y control de estructuras musicales complejas, ofreciendo a los usuarios una gran libertad y flexibilidad creativa. Los usuarios pueden generar obras musicales que se ajusten a sus necesidades ingresando descripciones de texto según sus preferencias, ya sea jazz relajante o melodías infantiles, InspireMusic puede crearlas todas.
Además, InspireMusic cuenta con un diseño flexible de modos de inferencia, incluyendo modelos "rápidos" y modelos de alta calidad, para satisfacer las necesidades de diferentes usuarios. Tanto aquellos que buscan una generación rápida como aquellos que priorizan la alta calidad de audio encontrarán en este conjunto de herramientas la forma de creación adecuada.
Actualmente, InspireMusic ha abierto el código fuente del entrenamiento y la inferencia de la generación de música. Los usuarios pueden acceder y utilizar la herramienta a través de GitHub, ModelScope y HuggingFace Spaces.
En el futuro, el laboratorio Tongyi planea abrir aún más los modelos básicos de generación de canto y audio de InspireMusic para atraer a más investigadores, desarrolladores y usuarios a participar activamente en la experiencia y el desarrollo. Creemos que, con el esfuerzo conjunto de todos, InspireMusic se perfeccionará continuamente y aportará más sorpresas al campo de la creación musical.
Repositorio de GitHub: InspireMusic (https://github.com/FunAudioLLM/InspireMusic)
Demo en línea:
ModelScope: https://modelscope.cn/studios/iic/InspireMusic/summary
HuggingFace Spaces: https://huggingface.co/spaces/FunAudioLLM/InspireMusic