Une nouvelle IA permet de prendre les traits d’un visage et les adapter sur de nouvelles créations : voici un test et ce qu’il faut savoir.
Auteur / Autrice :
ConsistentID, une nouvelle IA spécialisée dans les visages
ConsistentID fait partie de ces très nombreux projets autour de l’intelligence artificielle qui pullulent depuis bientôt 24 mois dans la continuité de l’élan créé par Midjourney.
Et si les IA de génération d’images ne manquent pas, on peut apprécier quand elles proposent de nouvelles options.
C’est partiellement le cas de ConsistentID qui s’attache à reproduire les traits du visage de quelqu’un pour les reproduire ailleurs, sur des images entièrement générés via IA.
D’un point de vue technique, ConsistentID repose également sur un mécanisme d’attention, et les détails techniques sont accessibles dans la publication dédiée (disponible en bas de cet article).
Sur la page de présentation du projet, les développeurs proposent aussi quelques exemples, avec (comme d’habitude) Elon Musk et Taylor Swift (mais il manque le français Yann Le Cun, une autre mascotte des projets IA) :
Plot twist : non, bien sûr, Yann Le Cun est là aussi dans les exemples, entre Einstein, Sam Altman ou encore Joe Biden.
Test complet
Cela dit, une page de présentation, c’est une chose, mais un essai « dans le dur » de l’IA en est une autre. On a souvent de cruelles désillusions entre les promesses et la réalité.
Les concepteurs de ConsistentID ont eu la bonne idée de proposer une interface de démo simple et complète, d’où plusieurs essais ont été faits : voici les résultats !
Premier essai d’abord très simple avec le visage de cette femme tirée d’une banque en ligne de photo :
Les résultats sont vraiment bons :
On peut cependant avoir l’impression qu’il ne s’agit que d’un face swap améliorée, une techno qui pour le coup n’a rien de nouveau.
Deuxième essai avec ce portrait de Emmanuel Macron :
Et là encore, les résultats sont vraiment très bons :
Pour aller plus loin, j’ai aussi utilisé des « prompts » personnalisés, et pas seulement les templates :
- Prompt « a beautiful blond hair girl smiling and listening music » :
- Prompt « a beautiful blond hair girl enjoying with a cat » :
On voit donc que l’IA a vraiment intégré les traits de Emmanuel Macron, même si les restitutions faites le rajeunisse beaucoup.
Troisième essai avec un visage ultra-maquillé (encore issu d’une banque en ligne) pour ajouter encore en difficulté :
On voit que l’IA a pataugé dans la semoule pour restituer vraiment les motifs du maquillage, ce qui prouve qu’on n’est pas sur une fonction de face swapp basique mais bien sûr une restitution IA :
Je ne sais pas pourquoi l’IA tient absolument à mettre des seins partout.
Un test avec un prompt personnalisé « a beautiful blond hair girl with deep blue eyes » :
On voit que l’IA n’a pas compris vraiment le concept de « fille blonde » ni de « yeux bleus » mais la base ‘maquillage’ reste bonne.
Enfin, dernier essai avec ce visage généré par IA utilisé sur une de nos affiches Pinterest :
Et le résultat est cette fois vraiment impressionnant :
Et avec un prompt personnalisé « a beautiful red hair girl with deep green eyes », on voit que le résultat obtenu est bien plus fidèle que sur l’essai précédent : les cheveux rouges sont là, les yeux verts aussi.
Pour conclure, ConsistentID est vraiment prometteur comme technologie et propose déjà de très belles choses via son interface de démo. Encore une fois, on peut aussi craindre les usages qui seront faits dans un futur proche de ce type de technologies, entre Deepfakes et arnaques en série.
Pour en savoir plus sur ConsistentID :
- La page de présentation du projet
- La publication arXiv
- L’interface de démo (qui ne restera pas forcément accessible très longtemps)
