Recientemente, un método de coloreado de bocetos llamado MangaNinja ha llamado la atención generalizada. Solo con introducir un boceto y una imagen de referencia, puede colorear el boceto objetivo basándose en la imagen de referencia. Esta tecnología se basa en modelos de difusión y se centra en el coloreado de bocetos guiado por imágenes de referencia, mejorando en gran medida la precisión del coloreado y la capacidad de control interactivo.
El equipo de investigación, a través de dos diseños innovadores, garantiza la precisa transmisión de los detalles del personaje. En primer lugar, introdujeron un módulo de reorganización de parches para fomentar el aprendizaje de correspondencia entre la imagen de referencia en color y el boceto objetivo. En segundo lugar, adoptaron un esquema de control impulsado por puntos, permitiendo a los usuarios realizar una coincidencia de color precisa.
En sus experimentos, los investigadores construyeron un conjunto de datos de referencia de auto-recopilación y lo compararon con métodos de coloreado existentes. Los resultados mostraron que MangaNinja supera significativamente a otros métodos en precisión de coloreado y calidad de la imagen generada. Una característica importante de este método es su capacidad para lograr un coloreado de alta calidad sin depender de la guía de puntos en los resultados generados.
MangaNinja muestra sus ventajas únicas al manejar escenas desafiantes. Por ejemplo, ante grandes cambios de postura de los personajes o la falta de detalles, la guía por puntos ayuda a resolver estos problemas. Cuando se trata de múltiples objetos, la guía por puntos también evita eficazmente la confusión de colores. Además, los usuarios pueden seleccionar áreas específicas de múltiples imágenes de referencia para colorear con múltiples referencias, proporcionando así orientación a los diversos elementos del boceto y resolviendo eficazmente los conflictos entre elementos visuales similares.
Esta tecnología también admite la coincidencia de color semántica y el control preciso al usar diferentes imágenes de referencia. Los investigadores creen que este método de coloreado interactivo puede ayudar a los usuarios a encontrar inspiración durante el proceso de coloreado y ofrecer más posibilidades creativas.
Proyecto: https://johanan528.github.io/MangaNinjia/
GitHub: https://github.com/ali-vilab/MangaNinjia
Puntos clave:
🌟 MangaNinja es un método de coloreado de bocetos basado en imágenes de referencia, con capacidad de coincidencia precisa y control detallado.
🎨 Mediante un innovador módulo de reorganización de parches y un esquema de control impulsado por puntos, MangaNinja mejora significativamente la precisión del coloreado y la calidad de la imagen.
🖌️ Esta tecnología puede afrontar diversos desafíos de coloreado, incluyendo posturas extremas y la coordinación de múltiples imágenes de referencia, logrando una experiencia de coloreado interactivo de alta calidad.
