Das Tongyi-Labor hat kürzlich seine innovative Musikgenerierungstechnologie InspireMusic als Open Source veröffentlicht. Diese Technologie zielt darauf ab, ein Open-Source-AIGC-Toolkit zu schaffen, das Musik-, Song- und Audiogenerierungsfunktionen vereint und Forschern, Entwicklern und Musikliebhabern eine umfassende Kreativplattform bietet.
InspireMusic bietet Forschern und Entwicklern nicht nur umfangreiche Tools zum Trainieren und Optimieren von Musik-/Song-/Audiogenerierungsmodellen, sondern auch effiziente Modelle zur Optimierung der Generierungsergebnisse. Gleichzeitig senkt dieses Toolkit die Einstiegshürde für die Musikproduktion erheblich, sodass Musikliebhaber mit einfachen Textbeschreibungen oder Audiohinweisen mühelos vielfältige Musikwerke erstellen können.
Besonders bemerkenswert ist der Text-zu-Musik-Modus von InspireMusic. Er umfasst verschiedene Musikstile, emotionale Ausdrucksformen und die Steuerung komplexer Musikstrukturen und bietet Benutzern ein hohes Maß an kreativer Freiheit und Flexibilität. Benutzer können Musikwerke nach ihren Wünschen erstellen, indem sie Textbeschreibungen eingeben – ob entspannter Jazz oder kindgerechte Melodien, InspireMusic kann alles erzeugen.
Darüber hinaus verfügt InspireMusic über ein flexibles Inferenz-Design, einschließlich Fast-Modellen und High-Fidelity-Modellen, um den Bedürfnissen verschiedener Benutzer gerecht zu werden. Ob schnelle Generierung oder hochwertige Ausgabe bevorzugt wird, dieses Toolkit bietet für jeden die passende Methode.
Derzeit sind die Trainings- und Inferenzcodes für die Musikgenerierung von InspireMusic Open Source. Benutzer können über das GitHub-Repository, den ModelScope-Kreativraum und HuggingFace Spaces darauf zugreifen und sie verwenden.
Zukünftig plant das Tongyi-Labor, die Basismodelle für die Gesangserzeugung und Audioerzeugung von InspireMusic weiter zu öffnen, um mehr Forscher, Entwickler und Benutzer zur aktiven Teilnahme und Entwicklung zu bewegen. Wir sind zuversichtlich, dass InspireMusic durch gemeinsame Anstrengungen kontinuierlich verbessert wird und dem Bereich der Musikproduktion immer mehr Überraschungen bescheren wird.
GitHub-Repository: InspireMusic (https://github.com/FunAudioLLM/InspireMusic)
Online-Demo:
ModelScope-Kreativraum: https://modelscope.cn/studios/iic/InspireMusic/summary
HuggingFace Spaces: https://huggingface.co/spaces/FunAudioLLM/InspireMusic