Donnez vie à vos dessins grâce à un projet open source proposé par Meta AI
Le groupe de recherche fondamentale sur l'IA (FAIR) chez Meta AI est ravi de présenter Animated Drawings, un projet open source qui permet aux créateurs et développeurs de créer facilement leurs propres expériences ou produits de dessin vers animation. Le projet a débuté en 2021 lorsque des chercheurs de FAIR ont décidé d'appliquer les avancées récentes en vision par ordinateur pour créer un pipeline rapide et intuitif pour animer les personnages humains dessinés.
Donner vie aux dessins
Le dessin est un moyen d'expression familier et amusant. Les personnages que nous dessinons en tant que débutants sont souvent étranges, abstraits et imaginatifs. Qui n'a jamais souhaité que ces personnages prennent vie et se déplacent sur la page ? Malheureusement, réaliser cet effet est difficile. Créer de nombreux dessins pour donner l'illusion du mouvement (comme un flip book) est fastidieux et les outils d'animation existants peuvent être difficiles à utiliser pour les novices. En conséquence, de nombreux personnages incroyables restent statiques sur la page.
La vision derrière Animated Drawings
Les chercheurs ont imaginé utiliser des modèles de détection d'objets, des modèles d'estimation de pose et des méthodes de segmentation basées sur le traitement d'images pour créer rapidement une version numérique du dessin. Celle-ci pourrait ensuite être déformée et animée à l'aide de techniques traditionnelles de graphisme informatique. Chez Meta, cette vision représente une opportunité de connecter les gens et les communautés grâce au pouvoir de la créativité.
Problèmes et solutions
Un problème majeur est la difficulté de trouver des dessins de personnages en quantité suffisante pour entraîner un modèle de vision par ordinateur. De plus, ces dessins nécessitent des annotations, telles que des boîtes englobantes, des masques de segmentation et des emplacements de jointures. Aucun ensemble de données de ce type n'existe. Pour résoudre ce problème, les chercheurs ont créé Animated Drawings Demo, un outil en ligne accessible au public, permettant aux créateurs d'importer leurs dessins, de corriger les prédictions du modèle et de recevoir une animation mettant en scène leur personnage, le tout en moins d'une minute.
L'accueil de cette démonstration a été extrêmement positif. En quelques mois, les utilisateurs avaient importé et donné leur consentement pour l'utilisation de plus de 1,6 million d'images. De nombreuses personnes ont utilisé l'outil pour des objets autres que des dessins amateurs, comme des logos, des peluches, des personnages d'anime, des animaux de compagnie, des figurines, etc.
Vers un outil plus complet
Face à cet engouement pour des expériences basées sur le dessin vers l'animation, les chercheurs ont décidé de publier une version open source des modèles et du code utilisés par Animated Drawings Demo. En implémentant Animated Drawings dans leurs propres projets, Meta espère inspirer d'autres développeurs à créer des démos et des expériences qui utilisent des éléments d'animation issus de dessins d'utilisateurs.
L'importance du projet open source
Le projet Animated Drawings est un excellent exemple de la manière dont la technologie open source peut être utilisée pour faciliter l'accès aux personnes souhaitant expérimenter l'animation et créer leurs propres expériences de dessin vers animation. En publiant les modèles et le code en open source, le projet offre un point de départ pour que les développeurs puissent s'appuyer et étendre le projet, favorisant ainsi une culture d'innovation et de collaboration au sein de la communauté open source.
Comment explorer le projet FAIR Animated Drawings ?
Si vous êtes intéressé par le projet FAIR Animated Drawings, consultez les instructions d'installation et de démarrage rapide dans le fichier README du projet. Pour une exploration visuelle plus approfondie du projet open source Animated Drawings, une vidéo YouTube amusante avec des exemples a également été créée, que vous pouvez visionner ici. Nous avons hâte de voir ce que vous créerez !
Source : Meta AI