Étude des techniques de conception d'interface utilisateur et d'interaction dans les applications d'IA générative

Survey of User Interface Design and Interaction Techniques in Generative AI Applications

October 28, 2024

Auteurs: Reuben Luera, Ryan A. Rossi, Alexa Siu, Franck Dernoncourt, Tong Yu, Sungchul Kim, Ruiyi Zhang, Xiang Chen, Hanieh Salehy, Jian Zhao, Samyadeep Basu, Puneet Mathur, Nedim Lipka

cs.AI

Résumé

Les applications de l'IA générative sont devenues extrêmement impressionnantes, et l'interaction entre les utilisateurs et l'IA l'est encore plus. La littérature actuelle sur l'interaction humain-IA examine de manière générale comment les humains interagissent avec l'IA générative, mais elle manque de spécificité en ce qui concerne les conceptions et les modèles d'interface utilisateur utilisés pour créer ces applications. Par conséquent, nous présentons une enquête qui présente de manière exhaustive des taxonomies sur la manière dont un humain interagit avec l'IA et les modèles d'interaction utilisateur conçus pour répondre aux besoins de divers cas d'utilisation pertinents. Nous nous concentrons principalement sur les interactions guidées par l'utilisateur, en examinant les interactions initiées par l'utilisateur et n'incluant aucun signal implicite donné par l'utilisateur. Avec cette enquête, nous visons à créer un recueil de différents modèles d'interaction utilisateur pouvant servir de référence aux concepteurs et développeurs. Ce faisant, nous cherchons également à abaisser la barrière à l'entrée pour ceux qui cherchent à en savoir plus sur la conception d'applications d'IA générative.

English

The applications of generative AI have become extremely impressive, and the interplay between users and AI is even more so. Current human-AI interaction literature has taken a broad look at how humans interact with generative AI, but it lacks specificity regarding the user interface designs and patterns used to create these applications. Therefore, we present a survey that comprehensively presents taxonomies of how a human interacts with AI and the user interaction patterns designed to meet the needs of a variety of relevant use cases. We focus primarily on user-guided interactions, surveying interactions that are initiated by the user and do not include any implicit signals given by the user. With this survey, we aim to create a compendium of different user-interaction patterns that can be used as a reference for designers and developers alike. In doing so, we also strive to lower the entry barrier for those attempting to learn more about the design of generative AI applications.