セルアニメーション向けの生成AI：調査

Generative AI for Cel-Animation: A Survey

January 8, 2025

著者: Yunlong Tang, Junjia Guo, Pinxin Liu, Zhiyuan Wang, Hang Hua, Jia-Xing Zhong, Yunzhong Xiao, Chao Huang, Luchuan Song, Susan Liang, Yizhi Song, Liu He, Jing Bi, Mingqian Feng, Xinyang Li, Zeliang Zhang, Chenliang Xu

cs.AI

要旨

従来のセルアニメーション（Cel Animation）製作パイプラインには、ストーリーボード、レイアウトデザイン、キーフレームアニメーション、中割り、および着色など、多くの重要なステップが含まれており、これらは膨大な手作業、技術的専門知識、および膨大な時間投資を要求します。これらの課題は、セルアニメーション製作の効率性とスケーラビリティを歴史的に妨げてきました。生成的人工知能（GenAI）の台頭は、大規模言語モデル、マルチモーダルモデル、拡散モデルを含む革新的な解決策を提供し、中割りフレーム生成、着色、およびストーリーボード作成などのタスクを自動化することで、これらの課題に取り組んでいます。この調査は、GenAIの統合が従来のアニメーションワークフローを革新し、AniDoc、ToonCrafter、AniSoraなどのツールを通じて、より幅広いクリエイターにアクセスを広げ、アーティストがより多くの創造的表現と芸術的革新に焦点を当てることを可能にする方法を探ります。その潜在能力にもかかわらず、視覚的一貫性の維持、スタイルの一貫性の確保、倫理的考慮事項の対処などの問題が依然として課題となっています。さらに、本論文では、AI支援アニメーションの将来の方向性について議論し、潜在的な進展を探ります。詳細な調査やリソースについては、以下のGitHubリポジトリをご覧ください：https://github.com/yunlong10/Awesome-AI4Animation

English

Traditional Celluloid (Cel) Animation production pipeline encompasses multiple essential steps, including storyboarding, layout design, keyframe animation, inbetweening, and colorization, which demand substantial manual effort, technical expertise, and significant time investment. These challenges have historically impeded the efficiency and scalability of Cel-Animation production. The rise of generative artificial intelligence (GenAI), encompassing large language models, multimodal models, and diffusion models, offers innovative solutions by automating tasks such as inbetween frame generation, colorization, and storyboard creation. This survey explores how GenAI integration is revolutionizing traditional animation workflows by lowering technical barriers, broadening accessibility for a wider range of creators through tools like AniDoc, ToonCrafter, and AniSora, and enabling artists to focus more on creative expression and artistic innovation. Despite its potential, issues such as maintaining visual consistency, ensuring stylistic coherence, and addressing ethical considerations continue to pose challenges. Furthermore, this paper discusses future directions and explores potential advancements in AI-assisted animation. For further exploration and resources, please visit our GitHub repository: https://github.com/yunlong10/Awesome-AI4Animation