La génération de contenu avec la technologie de l’IA a parcouru un long chemin au cours de la dernière année. Avec uniquement des descriptions textuelles, de nombreuses personnes ont pu créer des milliards d'images réalistes et pratiquement époustouflantes à l'aide de certains outils populaires tels que DALL-E 2, Midjourney et Stable Diffusion.
Aujourd’hui, de nouvelles explorations et avancées ont conduit à l’émergence d’outils capables de transformer des images en vidéos et animations courtes.
Les générateurs d’IA d’image en animation sont en plein essor
Le groupe de recherche sur l'IA du géant chinois de la technologie Alibaba a récemment introduit un modèle d'IA capable de produire « des résultats d'animation de personnages cohérents et contrôlables » à partir d'images fixes. Appelé « Animate Everyone », le modèle serait capable de créer du contenu vidéo court à partir d'images, essentiellement un générateur d'images en animations.
L'équipe a décrit Animate Everyone comme « un cadre d'animation de personnages capable de transformer des photos en vidéos contrôlées par les séquences de pose souhaitées et d'obtenir une continuité temporelle ». Dans le document de recherche , les développeurs ont déclaré que le modèle est formé sur un ensemble de données interne de clips vidéo de 5 000 caractères.
Bien qu'Animate Everyone soit encore en développement, il a déjà été utilisé pour créer un certain nombre d'animations impressionnantes qui ont attiré beaucoup d'attention sur Internet. Dans une mise à jour officielle publiée sur Github, l'équipe a révélé qu'il y avait un énorme intérêt et des demandes concernant une démo ou un code source.
« Nous avons reçu de nombreuses demandes concernant une démo ou un code source. Nous voulons vous assurer que nous travaillons activement à la préparation de la démo et du code pour une sortie publique", a écrit l'équipe. "Bien que nous ne puissions pas nous engager sur une date de sortie spécifique pour le moment, veuillez vous assurer que l'intention de fournir l'accès est au démo que notre code source est arrêté."
Animate Everyone d'Alibaba améliore les résultats réalistes
Animate Everyone se distingue des autres outils d'animation comme AnimateDiff et Warpfusion par sa capacité à produire des résultats réalistes et impossibles à distinguer.
L'équipe souligne qu'Animate Everyone peut efficacement maintenir la cohérence spatiale et temporelle de l'apparence des personnages vidéo, animer n'importe quelle image de personnage dans une vidéo et produire une vidéo haute définition de manière transparente, fonctionnalités qui manquent à certains outils existants.
La date de sortie d'Animate Everyone n'a pas été précisée, mais l'équipe a précisé que l'objectif est de "assurer qu'il soit robuste et facile à utiliser, en le transformant d'un prototype académique à une version plus raffinée".