망가닌자: 정확한 참조를 따라 선 아트 색칠

초록

확산 모델에서 파생된 MangaNinjia는 참조 안내 선 아트 채색 작업에 특화되어 있습니다. 우리는 정확한 캐릭터 세부 사항 전사를 보장하기 위해 두 가지 신중한 설계를 통합했습니다. 이는 참조 색상 이미지와 대상 선 아트 간의 일치 학습을 용이하게 하는 패치 섞기 모듈과 섬세한 색상 일치를 가능하게 하는 점 주도 제어 체계를 포함하고 있습니다. 자체 수집한 벤치마크에서의 실험은 우리 모델이 정확한 채색 측면에서 현재 솔루션보다 우월함을 입증합니다. 또한 제안된 대화식 점 제어의 잠재력을 보여주며, 기존 알고리즘의 한계를 넘어 어려운 경우, 다중 참조 조화 등을 다룰 수 있음을 보여줍니다.

English

Derived from diffusion models, MangaNinjia specializes in the task of reference-guided line art colorization. We incorporate two thoughtful designs to ensure precise character detail transcription, including a patch shuffling module to facilitate correspondence learning between the reference color image and the target line art, and a point-driven control scheme to enable fine-grained color matching. Experiments on a self-collected benchmark demonstrate the superiority of our model over current solutions in terms of precise colorization. We further showcase the potential of the proposed interactive point control in handling challenging cases, cross-character colorization, multi-reference harmonization, beyond the reach of existing algorithms.

망가닌자: 정확한 참조를 따라 선 아트 색칠

MangaNinja: Line Art Colorization with Precise Reference Following

초록

Summary

Support