Live_Portrait_Monitor

Dê vida aos retratos através de um monitor!

Produto ComumImagemAprendizado ProfundoProcessamento de Imagens

Live_Portrait_Monitor é um projeto de código aberto que visa animar retratos usando um monitor ou webcam. O projeto baseia-se no artigo de pesquisa LivePortrait e utiliza técnicas de aprendizado profundo, utilizando composição e redirecionamento de controle para animar retratos de forma eficiente. O autor está ativamente atualizando e melhorando este projeto, que é fornecido apenas para fins de pesquisa.

Clone o código e prepare o ambiente; crie um ambiente Python usando o conda e instale as dependências.
Baixe os pesos pré-treinados e o modelo de detecção facial InsightFace.
Execute o script para inferência e gere um vídeo animado.
Suporta a personalização da imagem de entrada e do vídeo de direcionamento através de parâmetros de linha de comando.
Fornece um script para avaliar a velocidade de inferência de cada módulo.
Agradecimentos aos projetos de código aberto FOMM
Open Facevid2vid
SPADE e InsightFace pelas suas contribuições.

O público-alvo são pesquisadores e desenvolvedores
especialmente aqueles interessados em aprendizado profundo
visão computacional e processamento de imagens. Essa tecnologia pode ajudá-los na pesquisa e desenvolvimento de animação de retratos
fornecendo uma nova forma de interação e expressão.

Pesquisadores usam o Live_Portrait_Monitor para capturar e animar expressões faciais em tempo real.
Desenvolvedores utilizam o projeto para integrá-lo em seus próprios aplicativos
fornecendo aos usuários a funcionalidade de animação de retratos personalizados.
Instituições de ensino utilizam essa tecnologia como um estudo de caso para ensinar os alunos como usar o aprendizado profundo para animar imagens.

Clone o projeto Live_Portrait_Monitor para sua máquina local.
Crie um ambiente Python 3.9.18 usando o conda e ative-o.
Instale as dependências do projeto usando o pip.
Baixe e descompacte os pesos pré-treinados e o modelo de detecção facial InsightFace no diretório especificado.
Execute o script inference_monitor.py ou inference_org.py para inferência e gerar um vídeo animado.

Abrir Site

Live_Portrait_Monitor Situação do Tráfego Mais Recente

Total de Visitas Mensais

474564576

Taxa de Rejeição

36.20%

Média de Páginas por Visita

6.1

Duração Média da Visita

00:06:34

Live_Portrait_Monitor Tendência de Visitas

Live_Portrait_Monitor Distribuição Geográfica das Visitas

Best AI Websites & Tools

Live_Portrait_Monitor

Live_Portrait_Monitor Situação do Tráfego Mais Recente

Live_Portrait_Monitor Tendência de Visitas

Live_Portrait_Monitor Distribuição Geográfica das Visitas

Live_Portrait_Monitor Fontes de Tráfego

Live_Portrait_Monitor Alternativas

Live_Portrait_Monitor — Dê vida aos retratos através de um monitor!

HunyuanVideo-I2V — HunyuanVideo-I2V é uma estrutura de geração de imagem para vídeo lançada pela Tencent, baseada no HunyuanVideo.

UniTok — UniTok é um tokenizador visual unificado para geração e compreensão visual.

VisoMaster — Software poderoso de substituição e edição de vídeo, utilizando tecnologia de IA para resultados naturais.

MatAnyone — MatAnyone é um framework de remoção de fundo de vídeo estável e com foco em objetos específicos, adequado para cenários complexos.

leapfusion-hunyuan-image2video — Uma nova técnica de amostragem de imagem para vídeo, baseada no modelo Hunyuan, para gerar vídeos de alta qualidade.

MangaNinja — MangaNinja é um método de coloração de esboço baseado em referência, que permite correspondência precisa e controle de interação granular.

Shapen — Converte imagens em modelos 3D, utilizáveis para renderização, animação ou impressão 3D.

Marca d'água em Qualquer Coisa — Tecnologia de marca d'água para imagens, permitindo a incorporação de informações de marca d'água localizadas em imagens.

Cooraft — Transforme selfies em vídeos e fotos de estúdio de arte, animações de desenhos animados e renderizações artísticas com apenas um toque.

Implementação PuLID-Flux ComfyUI — Implementação do PuLID-Flux para o ComfyUI

diffusion-e2e-ft — Ferramenta de ajuste fino de modelos de difusão condicional de imagens

Open-MAGVIT2 — Projeto de modelo de geração de imagens autoregressivo de código aberto

Interpolação de Keyframe SVD — Ferramenta de animação que utiliza a técnica SVD para interpolação de keyframes.

AWPortrait-FL — Modelo avançado de geração de retratos baseado em FLUX.1-dev

Show-o — Transformador único para compreensão e geração multimodal unificada

SF3D — Geração rápida de modelos 3D com texturas

AnimateAnyone — Implementação não oficial do Animate Anyone, fornecida pela Novita AI.

InstantMesh — Estrutura de geração de malha 3D eficiente

SDXS — Modelo de difusão latente passo único em tempo real, com geração controlável por imagem.

MovieLLM — MovieLLM é uma estrutura de IA para geração de filmes que aprimora a compreensão de vídeos longos.

DUSt3R — Reconstrução 3D estereoscópica densa sem necessidade de calibração da câmera

AnimateLCM — Este é um modelo que utiliza aprendizado profundo para gerar vídeos animados a partir de descrições de texto.

MoE-LLaVA — Modelo híbrido de especialistas baseado em um modelo de linguagem visual de grande escala.

Separador de Imagens — Uma ferramenta online de recorte de imagem baseada em aprendizado profundo.

Vision Mamba — Framework de aprendizado de representação visual eficiente baseado em um modelo de espaço de estados bidirecional.

Transformadores de Visão com Desruído — Fornece características visuais limpas

ThinkDiffusion — Obtenha resultados em 90 segundos com a interface de usuário de difusão estável mais poderosa, sem codificação e sem configuração.

magickimg — Ferramenta de aprimoramento de imagens com IA