Recientemente, Hedra Labs lanzó una vista previa de investigación de Character-1, una tecnología que permite a los usuarios generar videos dinámicos de personas hablando o cantando a partir de una foto y contenido de voz.

Imagine: sube una foto de una persona y cualquier contenido de voz, y al instante genera un video dinámico que da vida a la foto, haciendo que la persona hable o cante, con sincronización perfecta de labios, expresiones y postura. ¡Emocionante, ¿verdad?

Video de demostración oficial de Hedra Labs

Características principales y puntos destacados:

  • Compatibilidad multiplataforma: Character-1 se puede usar fácilmente en dispositivos de escritorio y móviles.

  • Generación de duración ilimitada: La versión de vista previa actualmente admite la generación de videos de 30 segundos. Si el suministro de H100 es suficiente, se pueden generar 90 segundos de contenido cada 60 segundos.

  • Admite múltiples formas de expresión: Character-1 no solo admite diálogos, sino también canto y rap.

Hedra ofrece una interfaz fácil de usar, accesible incluso para usuarios no profesionales. Los usuarios pueden acceder al sitio web de Hedra, usar la función de texto a voz o subir archivos de audio, ingresar una descripción del personaje y luego generar un video dinámico.

La tecnología de IA de Hedra garantiza la alta calidad y realismo del contenido de video, logrando resultados satisfactorios en cuanto a expresiones faciales, postura y sincronización de voz.

Según los ejemplos proporcionados por la empresa, Character-1 puede interpretar perfectamente canciones, actuaciones y personajes con diferentes emociones. Esta tecnología no se limita a personajes humanos; incluso puede generar objetos inanimados expresivos, siempre que tengan características faciales claras.

El uso es muy sencillo. Los pasos son los siguientes:

Abra la dirección de experiencia Hedra: https://top.aibase.com/tool/hedra

Una vez en la página, verá la interfaz de usuario.

image.png

La interfaz es sencilla. En el primer cuadro, ingrese el diálogo de su personaje y seleccione una voz. Si no desea usar el audio generado, también puede importar su propio audio.

image.png

Aquí, ingresé simplemente la frase: "Hola, este es un video de habla creado por AIbase. Hoy les mostraremos Hedra, haciendo que la generación de videos sea tan simple como respirar".

Luego, en el segundo cuadro, subí la imagen que quiero que hable, en este caso, una foto mía.

image.png

Si no tiene una imagen lista, puede ingresar la descripción de su personaje en el cuadro de texto inferior y hacer clic en "Crear" para generarla.

Después de subir la imagen, haga clic en "Generar video" en la parte inferior del tercer cuadro.

image.png

Aquí está el resultado del video generado:

Como puede ver, el video generado por Hedra es bastante dinámico; no solo se mueve la boca, sino también otras partes del cuerpo, e incluso hay expresiones faciales. Sin embargo, dado que la plataforma ofrece pocas opciones de voz, el acento extranjero no coincide mucho con mi imagen. Otro pequeño inconveniente es que el video resultante es más borroso que mi imagen original. Espero que la plataforma mejore la calidad de imagen en el futuro.

Aquí subí mi propio audio, generado con CapCut, usando una voz femenina y texto a voz.

image.png

Volvamos a probar:

Seleccionando importar audio

image.png

El resultado es el siguiente:

El problema de la borrosidad se puede solucionar con la función de mejora de video de Krea AI. Sin embargo, tenga en cuenta que la versión de prueba gratuita solo permite videos de hasta 10 segundos. Los videos más largos deben cortarse. Además, no seleccione una velocidad de fotogramas demasiado alta; seleccioné 60 fps y la herramienta me pidió pagar una actualización. ¡Qué decepción!

image.png