Generative KI für Cel-Animation: Eine Übersicht

Generative AI for Cel-Animation: A Survey

January 8, 2025

Autoren: Yunlong Tang, Junjia Guo, Pinxin Liu, Zhiyuan Wang, Hang Hua, Jia-Xing Zhong, Yunzhong Xiao, Chao Huang, Luchuan Song, Susan Liang, Yizhi Song, Liu He, Jing Bi, Mingqian Feng, Xinyang Li, Zeliang Zhang, Chenliang Xu

cs.AI

Zusammenfassung

Die traditionelle Celluloid (Cel) Animationsproduktionspipeline umfasst mehrere wesentliche Schritte, darunter Storyboarding, Layoutdesign, Keyframe-Animation, Zwischenzeichnung und Kolorierung, die erheblichen manuellen Aufwand, technisches Fachwissen und eine bedeutende Zeitinvestition erfordern. Diese Herausforderungen haben historisch gesehen die Effizienz und Skalierbarkeit der Cel-Animationsproduktion beeinträchtigt. Das Aufkommen von generativer künstlicher Intelligenz (GenAI), die große Sprachmodelle, multimodale Modelle und Diffusionsmodelle umfasst, bietet innovative Lösungen durch die Automatisierung von Aufgaben wie der Generierung von Zwischenbildern, Kolorierung und der Erstellung von Storyboards. Diese Umfrage untersucht, wie die Integration von GenAI die traditionellen Animations-Workflows revolutioniert, indem sie technische Hürden senkt, die Zugänglichkeit für eine breitere Palette von Schöpfern durch Tools wie AniDoc, ToonCrafter und AniSora erweitert und Künstlern ermöglicht, sich stärker auf kreative Ausdrucksformen und künstlerische Innovationen zu konzentrieren. Trotz ihres Potenzials stellen Probleme wie die Aufrechterhaltung visueller Konsistenz, die Sicherstellung stilistischer Kohärenz und die Berücksichtigung ethischer Aspekte weiterhin Herausforderungen dar. Darüber hinaus diskutiert dieser Artikel zukünftige Richtungen und untersucht potenzielle Fortschritte in der KI-unterstützten Animation. Für weitere Erkundungen und Ressourcen besuchen Sie bitte unser GitHub-Repository: https://github.com/yunlong10/Awesome-AI4Animation

English

Traditional Celluloid (Cel) Animation production pipeline encompasses multiple essential steps, including storyboarding, layout design, keyframe animation, inbetweening, and colorization, which demand substantial manual effort, technical expertise, and significant time investment. These challenges have historically impeded the efficiency and scalability of Cel-Animation production. The rise of generative artificial intelligence (GenAI), encompassing large language models, multimodal models, and diffusion models, offers innovative solutions by automating tasks such as inbetween frame generation, colorization, and storyboard creation. This survey explores how GenAI integration is revolutionizing traditional animation workflows by lowering technical barriers, broadening accessibility for a wider range of creators through tools like AniDoc, ToonCrafter, and AniSora, and enabling artists to focus more on creative expression and artistic innovation. Despite its potential, issues such as maintaining visual consistency, ensuring stylistic coherence, and addressing ethical considerations continue to pose challenges. Furthermore, this paper discusses future directions and explores potential advancements in AI-assisted animation. For further exploration and resources, please visit our GitHub repository: https://github.com/yunlong10/Awesome-AI4Animation