En el campo de la producción de video y el procesamiento de imágenes, la tecnología de "eliminación de parpadeo" en videos siempre ha sido clave para mejorar la calidad del video. Con el desarrollo de la tecnología, ha surgido un nuevo algoritmo de eliminación de parpadeo llamado BlazeBVD, que no solo puede eliminar rápidamente el parpadeo en los videos, sino que también mantiene la integridad del contenido del video y la autenticidad del color.
BlazeBVD, cuyo nombre completo es Blaze Blind Video Deflickering, es una tecnología automatizada de eliminación de parpadeo de video. Puede mejorar eficazmente la consistencia temporal del video en situaciones de degradación de video desconocidas. La aparición de esta tecnología ha traído un cambio revolucionario a la postproducción de video.
Los problemas de parpadeo de video suelen estar causados por el entorno de grabación, las limitaciones del hardware de la cámara o las técnicas de procesamiento de imágenes. Estos problemas causan inconsistencias de brillo o color entre los fotogramas de video, lo que afecta gravemente la experiencia de visualización. Por lo tanto, es especialmente importante desarrollar una tecnología que pueda eliminar el parpadeo y mantener la integridad del contenido del video.
Principio de funcionamiento de BlazeBVD
El núcleo de la tecnología BlazeBVD radica en el uso del método clásico de ecualización escala-tiempo (Scale-Time Equalization, STE), que captura el parpadeo y los cambios de exposición local mediante el procesamiento del histograma de los fotogramas de video. Este proceso incluye los siguientes pasos clave:
Asistencia de histograma: BlazeBVD primero comprime los valores de píxel en histogramas de iluminación, que pueden capturar con precisión el parpadeo y los cambios de exposición local.
Filtro STE: mediante el método STE, se realiza un procesamiento de suavizado en el histograma de iluminación para generar un conjunto de fotogramas únicos, una imagen de iluminación filtrada y una imagen de exposición.
Módulos de eliminación de parpadeo global y local: BlazeBVD utiliza una red 2D para restaurar las texturas afectadas por cambios de iluminación o problemas de exposición local, y utiliza una red 3D ligera para corregir inconsistencias temporales leves.
Consistencia temporal adaptativa: finalmente, BlazeBVD procesa todos los fotogramas mediante una red espacio-temporal ligera y utiliza una pérdida de deformación ponderada con máscara adaptativa para mejorar la coherencia del video.
Mediante experimentos exhaustivos en videos sintéticos, videos del mundo real y videos generados, BlazeBVD ha demostrado resultados cualitativos y cuantitativos excelentes. No solo elimina el parpadeo mientras mantiene la calidad del video, sino que también alcanza una velocidad de inferencia 10 veces mayor que la de las tecnologías existentes.
Las perspectivas de aplicación de la tecnología BlazeBVD son amplias, y se puede aplicar en varios campos como la edición de video, la postproducción cinematográfica y la generación de contenido de video. Con el continuo progreso de la tecnología, BlazeBVD tiene el potencial de convertirse en un nuevo estándar en el campo del procesamiento de video.
Dirección del artículo: https://arxiv.org/html/2403.06243v1