Tekst: Het genereren van levendige 2D-cartoonpersonages vanuit tekstbeschrijvingen

Textoon: Generating Vivid 2D Cartoon Characters from Text Descriptions

January 17, 2025

Auteurs: Chao He, Jianqiang Ren, Liefeng Bo

cs.AI

Samenvatting

De 2D-cartoonstijl is een prominente kunstvorm in de digitale personagecreatie, vooral populair bij jongere doelgroepen. Terwijl vooruitgang in digitale mensentechnologie uitgebreid onderzoek heeft aangewakkerd naar fotorealistische digitale mensen en 3D-personages, hebben interactieve 2D-cartoonpersonages relatief minder aandacht gekregen. In tegenstelling tot 3D-tegenhangers, die geavanceerde constructie en resource-intensieve rendering vereisen, biedt Live2D, een veelgebruikt formaat voor 2D-cartoonpersonages, een efficiënter alternatief, waarmee 2D-personages geanimeerd kunnen worden op een manier die 3D-beweging simuleert zonder de noodzaak van het bouwen van een volledig 3D-model. Bovendien maakt Live2D gebruik van lichtgewicht HTML5 (H5) rendering, waardoor zowel de toegankelijkheid als de efficiëntie verbeterd worden. In dit technisch rapport introduceren we Textoon, een innovatieve methode voor het genereren van diverse 2D-cartoonpersonages in het Live2D-formaat op basis van tekstbeschrijvingen. De Textoon maakt gebruik van geavanceerde taal- en visiemodellen om tekstuele bedoelingen te begrijpen en 2D-uitingen te genereren, die in staat zijn om binnen één minuut een breed scala aan verbluffende en interactieve 2D-personages te creëren. De projecthomepage is https://human3daigc.github.io/Textoon_webpage/.

English

The 2D cartoon style is a prominent art form in digital character creation, particularly popular among younger audiences. While advancements in digital human technology have spurred extensive research into photorealistic digital humans and 3D characters, interactive 2D cartoon characters have received comparatively less attention. Unlike 3D counterparts, which require sophisticated construction and resource-intensive rendering, Live2D, a widely-used format for 2D cartoon characters, offers a more efficient alternative, which allows to animate 2D characters in a manner that simulates 3D movement without the necessity of building a complete 3D model. Furthermore, Live2D employs lightweight HTML5 (H5) rendering, improving both accessibility and efficiency. In this technical report, we introduce Textoon, an innovative method for generating diverse 2D cartoon characters in the Live2D format based on text descriptions. The Textoon leverages cutting-edge language and vision models to comprehend textual intentions and generate 2D appearance, capable of creating a wide variety of stunning and interactive 2D characters within one minute. The project homepage is https://human3daigc.github.io/Textoon_webpage/.