Na área de produção de vídeo e processamento de imagens, a tecnologia de "remoção de cintilação" de vídeo sempre foi crucial para melhorar a qualidade do vídeo. Com o desenvolvimento da tecnologia, surgiu um novo algoritmo de remoção de cintilação chamado BlazeBVD, que não apenas remove rapidamente a cintilação de vídeos, mas também mantém a integridade do conteúdo do vídeo e a autenticidade das cores.
BlazeBVD, abreviação de Blaze Blind Video Deflickering, é uma tecnologia automatizada de remoção de cintilação de vídeo. Ele pode melhorar efetivamente a consistência temporal do vídeo em condições desconhecidas de degradação de vídeo. O surgimento dessa tecnologia trouxe mudanças revolucionárias para a pós-produção de vídeo.
Problemas de cintilação de vídeo geralmente são causados pelo ambiente de filmagem, limitações de hardware da câmera ou técnicas de processamento de imagem. Esses problemas causam inconsistências de brilho ou cor entre os quadros de vídeo, afetando seriamente a experiência de visualização. Portanto, é extremamente importante desenvolver uma tecnologia que possa eliminar a cintilação e manter a integridade do conteúdo do vídeo.
Princípio de funcionamento do BlazeBVD
O núcleo da tecnologia BlazeBVD reside no uso do método clássico de equalização de escala-tempo (Scale-Time Equalization, STE), processando os histogramas dos quadros de vídeo para capturar cintilação e mudanças de exposição local. Este processo inclui as seguintes etapas principais:
Assistência de histograma: O BlazeBVD primeiro comprime os valores dos pixels em histogramas de iluminação, que podem capturar com precisão a cintilação e as mudanças de exposição local.
Filtro STE: Através do método STE, o histograma de iluminação é suavizado para gerar um conjunto de quadros únicos, uma imagem de iluminação filtrada e uma imagem de exposição.
Módulos de remoção de cintilação global e local: O BlazeBVD usa uma rede 2D para restaurar texturas afetadas por mudanças de iluminação ou problemas de exposição local e usa uma rede 3D leve para corrigir pequenas inconsistências temporais.
Consistência temporal adaptativa: Finalmente, o BlazeBVD processa todos os quadros através de uma rede leve espaço-temporal e melhora a coerência do vídeo através do design de uma perda de deformação ponderada por máscara adaptativa.
Através de experimentos abrangentes em vídeos sintéticos, vídeos do mundo real e vídeos gerados, o BlazeBVD mostrou resultados qualitativos e quantitativos excelentes. Ele não apenas remove a cintilação mantendo a qualidade do vídeo, mas também atinge uma velocidade de inferência 10 vezes maior que a das tecnologias existentes.
O BlazeBVD tem amplas perspectivas de aplicação e pode ser usado em edição de vídeo, pós-produção de filmes, geração de conteúdo de vídeo e muitas outras áreas. Com o avanço contínuo da tecnologia, o BlazeBVD tem o potencial de se tornar um novo padrão na área de processamento de vídeo.
Endereço do artigo: https://arxiv.org/html/2403.06243v1