Generierung lebendiger 2D-Cartoon-Charaktere aus Textbeschreibungen

Textoon: Generating Vivid 2D Cartoon Characters from Text Descriptions

January 17, 2025

Autoren: Chao He, Jianqiang Ren, Liefeng Bo

cs.AI

Zusammenfassung

Der 2D-Cartoon-Stil ist eine prominente Kunstform bei der digitalen Charaktererstellung, die besonders bei jüngeren Zielgruppen beliebt ist. Während Fortschritte in der digitalen Menschentechnologie umfangreiche Forschungen zu fotorealistischen digitalen Menschen und 3D-Charakteren vorangetrieben haben, haben interaktive 2D-Cartoon-Charaktere vergleichsweise weniger Aufmerksamkeit erhalten. Im Gegensatz zu 3D-Pendants, die eine ausgefeilte Konstruktion und ressourcenintensive Rendering erfordern, bietet Live2D, ein weit verbreitetes Format für 2D-Cartoon-Charaktere, eine effizientere Alternative, die es ermöglicht, 2D-Charaktere auf eine Weise zu animieren, die 3D-Bewegungen simuliert, ohne die Notwendigkeit zum Aufbau eines vollständigen 3D-Modells. Darüber hinaus verwendet Live2D eine leichtgewichtige HTML5 (H5) Rendering-Technologie, die sowohl die Zugänglichkeit als auch die Effizienz verbessert. In diesem technischen Bericht stellen wir Textoon vor, eine innovative Methode zur Generierung verschiedener 2D-Cartoon-Charaktere im Live2D-Format basierend auf Textbeschreibungen. Der Textoon nutzt modernste Sprach- und Bildmodelle, um textuelle Absichten zu verstehen und ein 2D-Erscheinungsbild zu generieren, das in der Lage ist, innerhalb einer Minute eine Vielzahl von beeindruckenden und interaktiven 2D-Charakteren zu erstellen. Die Projekt-Homepage ist https://human3daigc.github.io/Textoon_webpage/.

English

The 2D cartoon style is a prominent art form in digital character creation, particularly popular among younger audiences. While advancements in digital human technology have spurred extensive research into photorealistic digital humans and 3D characters, interactive 2D cartoon characters have received comparatively less attention. Unlike 3D counterparts, which require sophisticated construction and resource-intensive rendering, Live2D, a widely-used format for 2D cartoon characters, offers a more efficient alternative, which allows to animate 2D characters in a manner that simulates 3D movement without the necessity of building a complete 3D model. Furthermore, Live2D employs lightweight HTML5 (H5) rendering, improving both accessibility and efficiency. In this technical report, we introduce Textoon, an innovative method for generating diverse 2D cartoon characters in the Live2D format based on text descriptions. The Textoon leverages cutting-edge language and vision models to comprehend textual intentions and generate 2D appearance, capable of creating a wide variety of stunning and interactive 2D characters within one minute. The project homepage is https://human3daigc.github.io/Textoon_webpage/.