Recentemente, o laboratório Tongyi lançou oficialmente sua inovadora tecnologia de geração de música - InspireMusic. Essa tecnologia visa criar um kit de ferramentas AIGC de código aberto que integra a geração de música, canções e áudio, fornecendo uma plataforma abrangente para pesquisadores, desenvolvedores e entusiastas da música.
O InspireMusic não apenas fornece aos pesquisadores e desenvolvedores ferramentas abrangentes para treinamento e ajuste fino de modelos de geração de música/canções/áudio, mas também os equipa com modelos eficientes para otimizar os resultados da geração. Ao mesmo tempo, este kit de ferramentas reduz significativamente a barreira de entrada para a criação musical, permitindo que os entusiastas da música gerem facilmente uma variedade de trabalhos musicais através de simples descrições de texto ou prompts de áudio.
O modo de criação de música a partir de texto do InspireMusic é particularmente notável. Ele abrange vários estilos musicais, expressões emocionais e controle de estruturas musicais complexas, oferecendo aos usuários grande liberdade e flexibilidade criativa. Os usuários podem gerar trabalhos musicais que atendam às suas necessidades inserindo descrições de texto de acordo com suas preferências pessoais, seja jazz relaxante ou melodias infantis, o InspireMusic consegue reproduzir tudo.
Além disso, o InspireMusic possui um design de modo de inferência flexível, incluindo modelos rápidos e modelos de alta qualidade de som, para atender às necessidades de diferentes usuários. Seja buscando geração rápida ou saída de alta qualidade de som, os usuários podem encontrar seu próprio método de criação neste kit de ferramentas.
Atualmente, o InspireMusic já lançou o código de treinamento e inferência de geração de música, e os usuários podem acessar e usar através do repositório GitHub, do espaço criativo ModelScope e do HuggingFace Spaces.
No futuro, o laboratório Tongyi planeja abrir ainda mais os modelos básicos de geração de canto e áudio do InspireMusic, para atrair mais pesquisadores, desenvolvedores e usuários a participar ativamente da experiência e do desenvolvimento. Acreditamos que, com os esforços conjuntos de todos, o InspireMusic será continuamente aprimorado, trazendo mais surpresas para o campo da criação musical.
Repositório GitHub: InspireMusic (https://github.com/FunAudioLLM/InspireMusic)
Demo Online:
Espaço criativo ModelScope: https://modelscope.cn/studios/iic/InspireMusic/summary
HuggingFace Spaces: https://huggingface.co/spaces/FunAudioLLM/InspireMusic
