Kürzlich hat Hedra Labs eine Vorschauversion von Character-1 veröffentlicht, einer Technologie, die es Nutzern ermöglicht, dynamische Videos von Personen zu erstellen, die sprechen und singen, basierend auf beliebigen Fotos und Sprachinhalten.
Stellen Sie sich vor: Sie laden ein Foto einer Person hoch und fügen beliebige Sprachinhalte hinzu. Im Handumdrehen wird ein dynamisches Video generiert, das die Person auf dem Foto zum Leben erweckt – sie spricht oder singt, wobei Lippenbewegungen, Gesichtsausdrücke und Körperhaltung perfekt auf die Sprachinhalte abgestimmt sind! Klingt aufregend, oder?
Offizielles Demo-Video von Hedra Labs
Hauptmerkmale und Highlights:
Plattformübergreifende Kompatibilität: Character-1 kann sowohl auf Desktop- als auch auf Mobilgeräten problemlos verwendet werden.
Generierung unbegrenzter Länge: Die aktuelle Vorschauversion unterstützt die Generierung von 30 Sekunden langen Videos. Bei ausreichender H100-Versorgung können 90 Sekunden Inhalt pro 60 Sekunden generiert werden.
Unterstützung verschiedener Ausdrucksformen: Character-1 unterstützt nicht nur Dialoge, sondern auch Gesang und Rap.
Hedra bietet eine benutzerfreundliche Oberfläche, die auch für Nicht-Profis einfach zu bedienen ist. Benutzer können die Hedra-Website besuchen, Text-to-Speech-Funktionen verwenden oder Audiodateien direkt hochladen, eine Charakterbeschreibung eingeben und dann ein dynamisches Video generieren.
Die KI-Technologie von Hedra gewährleistet eine hohe Qualität und Realitätsnähe der Videobinhalte. Gesichtsausdrücke, Körperhaltung und die Synchronität der Sprache erreichen überzeugende Ergebnisse.
Wie die offiziellen Beispiele zeigen, kann Character-1 Gesang, Schauspiel und die Darstellung von Charakteren mit verschiedenen Emotionen perfekt wiedergeben. Die Technologie beschränkt sich nicht auf menschliche Charaktere, sondern kann auch ausdrucksstarke, leblose Objekte generieren, sofern diese über deutlich erkennbare Gesichtsmerkmale verfügen.
Die Anwendung ist sehr einfach. Die Schritte sind wie folgt:
Öffnen Sie die Hedra-Erlebnisadresse: https://top.aibase.com/tool/hedra
Auf der Seite sehen Sie die Benutzeroberfläche.
Die Benutzeroberfläche ist einfach. Geben Sie im ersten Feld Ihren Dialog ein und wählen Sie eine Stimme. Sie können natürlich auch Ihre eigene Audiodatei importieren, wenn Sie keine generierte Audiodatei verwenden möchten.
Hier gebe ich einfach den Satz „Hallo, dies ist ein von AIbase erstelltes Sprechvideo. Heute zeigen wir Ihnen Hedra und wie einfach die Videogenerierung ist“ ein.
Dann lade ich im zweiten Feld das Bild der Person hoch, die sprechen soll. Hier lade ich ein vorher erstelltes Foto einer Frau hoch.
Wer kein fertiges Bild hat, kann im unteren Textfeld seinen Charakter beschreiben und auf „Erstellen“ klicken, um ihn zu generieren.
Nach dem Hochladen des Bildes klicken Sie im dritten Feld unten auf „Video generieren“.
Hier ist das Ergebnisvideo:
Man sieht, dass das von Hedra generierte Sprechvideo eine recht lebhafte Person zeigt. Nicht nur der Mund bewegt sich, sondern auch andere Körperteile, und es gibt auch Gesichtsausdrücke. Da die Plattform jedoch nur wenige Stimmen zur Auswahl bietet, passt der Akzent der ausländischen Stimme nicht so gut zu meinem Bild. Ein weiterer kleiner Nachteil ist, dass das generierte Video etwas unscharfer als mein Originalbild ist. Ich hoffe, die Plattform wird die Bildqualität in Zukunft verbessern.
Hier lade ich selbst eine Audiodatei hoch, die ich mit CapCut erstellt habe. Ich habe eine weibliche Stimme ausgewählt und den Text direkt eingegeben und vorlesen lassen.
Ein erneuter Test:
Audio importieren auswählen
Das Ergebnis sieht wie folgt aus:
Das Problem mit der Unschärfe kann mit der Videoverbesserungsfunktion von Krea AI behoben werden. Beachten Sie jedoch, dass die kostenlose Testversion nur Videos mit einer Länge von maximal 10 Sekunden unterstützt. Längere Videos müssen selbst zugeschnitten werden. Wählen Sie außerdem keine zu hohe Framerate. Ich habe 60 fps gewählt und musste dann für die Fertigstellung bezahlen – sehr ärgerlich!
