Kürzlich hat die KI-Videoplattform D-ID ein brandneues KI-Videofunktionsübersetzungswerkzeug namens AI Video Translate vorgestellt. Dieses Tool kann Videos in verschiedene Sprachen übersetzen und dabei nicht nur den Inhalt, sondern auch die Stimme des Sprechers klonen und die Lippenbewegungen anpassen, um eine perfekte Synchronität zwischen Übersetzung und Video zu gewährleisten.
Produktzugang:https://top.aibase.com/tool/d-id-ai-video-translate
Die Funktionen des Tools umfassen:
Sprachklonung: Automatische Klonung der Stimme des Sprechers für sprachübergreifende Konsistenz.
Lippensynchronisation: Perfekte Synchronisierung der Lippenbewegungen des Sprechers für ein natürliches Erscheinungsbild.
Batch-Rendering: Schnelle Übersetzung Ihrer Videos in bis zu 29 Sprachen.
Benutzerfreundliche Oberfläche: Drag-and-Drop-Funktionalität und intuitives Design für einfache Bedienung.
Diese Technologie basiert auf früheren Innovationen von D-ID, wie beispielsweise der Möglichkeit, alte Fotos zum „Leben zu erwecken“ und sie „sprechen“ zu lassen, was vor einigen Jahren große Aufmerksamkeit erregte.
Zur Unterstützung seiner wachsenden Unternehmenskunden hat D-ID 2022 eine Serie-B-Finanzierung in Höhe von 25 Millionen US-Dollar erhalten. Die neue KI-Videofunktionsübersetzungstechnologie wird derzeit D-ID-Abonnenten kostenlos angeboten. Kreative können damit ihre Videos automatisch in 30 Sprachen übersetzen lassen, darunter Arabisch, Mandarin, Japanisch, Hindi, Spanisch und Französisch, um ihr Publikum zu erweitern.
D-ID erklärt, dass diese neue Technologie Kunden dabei helfen kann, ihre Marketing-, Unterhaltungs- und Social-Media-Kampagnen weltweit zu bewerben und gleichzeitig die Kosten für die Lokalisierung zu senken. In der Vergangenheit war die Synchronisation von Videos zwar möglich, aber für kleinere Kreative oft schwer zugänglich.
Der technische Fortschritt verändert die Situation. So hat YouTube kürzlich eine Funktion für mehrsprachige Audioinhalte eingeführt, die Kreativen hilft, Videos in andere Sprachen zu übersetzen. Der bekannte YouTube-Creator MrBeast (Jimmy Donaldson) war einer der ersten Nutzer und übersetzte mit dieser Technologie mehrere beliebte Videos in 11 Sprachen.
Die Entwicklung der KI-Technologie verbessert die Möglichkeiten zum Erstellen, Übersetzen und Klonen von Stimmen stetig. In diesem Jahr kündigte Microsoft die Verwendung von KI zur Echtzeit-Übersetzung und -Synchronisation von YouTube-Videos an, während Vimeo im Juli ein Tool einführte, das die Übersetzung von Audio und Untertiteln unterstützt und die Stimme des Sprechers mit KI-Technologie replizieren kann. Darüber hinaus bieten viele Unternehmen Tools zur Sprachklonung oder KI-Übersetzung an, darunter Descript, ElevenLabs und Speechify.
Die neue Videofunktionsübersetzungstechnologie von D-ID wird über D-ID Studio und seine API bereitgestellt. Das Unternehmen bietet auch eine einmonatige Testversion an. Weitere Demos finden Sie auf der offiziellen Website. Für optimale Ergebnisse sollte die Videolänge zwischen 10 Sekunden und 5 Minuten liegen, die Dateigröße 2 GB nicht überschreiten und das Video idealerweise nur einen Sprecher zeigen, der in die Kamera blickt und dessen Gesicht stets sichtbar ist.
Wichtige Punkte:
✨ D-ID bringt ein KI-Videofunktionsübersetzungswerkzeug heraus, das die automatische Übersetzung in 30 Sprachen, Sprachklonung und Lippensynchronisation unterstützt.
🌍 Dieses Tool hilft Unternehmenskunden, die Lokalisierungskosten für die weltweite Bewerbung zu senken und ihr Publikum zu erweitern.
🎥 Derzeit beträgt die unterstützte Videolänge 10 Sekunden bis 5 Minuten, die Dateigröße ist auf 2 GB begrenzt.