En vidéo : un robot s'entraîne à imiter le sourire de son interlocuteur, et le résultat est effrayant !

Avec son visage de siliconesilicone bleu, la tête robotisée humanoïde d'Emo est un brin inquiétante. Mais si on lui sourit, Emo réagit immédiatement en rendant lui aussi ce sourire. Mise au point par des chercheurs du Creative Machines Lab de ColumbiaColumbia Engineering de l'université de Columbia aux États-Unis, cette tête vient apporter sa pierre au développement de la communication non verbale des robots.

Aujourd'hui, les grands modèles de langage (LLM), comme ChatGPT, permettent aux robots d'être assez bons en communication verbale. Mais pour établir une confiance plus humaine, il leur manque toujours l'interprétation et la réponse appropriée des expressions faciales. C'est justement ce pour quoi Emo a été entrainé.

Emo est capable d’identifier une expression de visage avant qu’elle soit marquée et de la reproduire. © Université de Columbia

Pour y répondre, les chercheurs ont créé un visage expressif et polyvalent, avec toute une machinerie permettant d'animer la peau de silicone. En tout, 26 actionneurs lui confèrent toute une gamme de nuances d'expressions. Il a également fallu apprendre au robot quel type d'expression générer au bon moment pour paraître naturel, face à l'attitude de son interlocuteur. Pour cela, deux caméras se trouvent dans les yeuxyeux pour pouvoir cerner l'expression faciale d'une personne. C'est à partir de ce moment que l'IAIA entre en œuvre.

Parler avec un robot, comme avec un ami

Pour apprendre à Emo à générer des expressions faciales, les chercheurs l'ont laissé effectuer des mouvementsmouvements de visage aléatoires, face à des modèles et une caméra. Au bout de quelques heures, le robot avait pu cerner quelles commandes permettaient de reproduire les expressions qu'il voyait. D'autres entrainements à partir de vidéos ont également aidé Emo à prédire les expressions faciales des personnes à partir de petits détails sur le visage.

L’apprentissage du robot passe par une phase de « grimaces » pour qu’il puisse contrôler les bons actionneurs afin de marquer une expression. © Université de Columbia

De cette façon, le robot a pu prédire un sourire humain environ 840 millisecondes avant qu'il ne se produise. Il a alors pu simultanément répondre avec l'un des siens. En mixant cette communication non verbale avec un LLM, les chercheurs comptent maintenant créer un robot capable de plus d'empathieempathie et d'authenticité dans ses interactions. Avec les progrès actuels en matièrematière de robotique humanoïde, les LLM et ce type de procédé, la création d'un robot androïde - comme Data dans la saga Star Trek - se rapproche à grands pas.