https://frosthead.com

Une application qui capture les émotions en temps réel

Lorsque vous pensez à Intel, vous pensez probablement aux processeurs et aux ordinateurs portables, pas à Gumby ni aux messages instantanés. Une nouvelle application, la première offre directe d’Intel au consommateur, renversera cette hypothèse.

Pocket Avatars, que la société a fait ses débuts la semaine dernière, est un service de messagerie haut de gamme qui transfère les expressions faciales d'un utilisateur sur un avatar de bande dessinée, qui à son tour transmet des messages à ses amis et à sa famille.

L'application exploite la caméra frontale de votre téléphone iOS ou Android pour capturer une image en temps réel de votre visage. À partir de là, les algorithmes de suivi du visage contrôlent vos expressions et les superposent en temps réel sur l'avatar de votre choix. Pendant que vous parlez, l'application enregistre votre voix et la synchronise avec le dessin animé. Les messages, qui peuvent durer jusqu'à 15 secondes, sont envoyés à vos amis et à votre famille. de la même manière un Facebook ou un message WhatsApp serait. La société affirme que le système est sécurisé: il ne conserve aucune de vos données dans un fichier.

Intel s'est associé à plusieurs marques pour créer un catalogue de plus de 40 avatars, que les utilisateurs peuvent télécharger gratuitement ou acheter pour 0, 99 $ l'unité. Les personnages incluent Gumby, les figurines Lego et Grumpy Bear.

À une époque où le suivi des visages suscite beaucoup d'attention dans les secteurs de l'électronique grand public et de la sécurité, par exemple, Kinect pour Windows de Microsoft permet aux développeurs de jeux de créer des applications basées sur les repères du visage d'un utilisateur et des outils de cartographie du visage similaires. tels que le système biométrique du FBI peut être utilisé pour identifier des personnes - les avatars de poche pourraient être la démonstration la plus accessible de son potentiel pour le profane.

Les développeurs n’avaient pas initialement conçu une application de messagerie, explique Rich Hannah, directeur d’Intel Labs, qui a dirigé l’équipe derrière le projet. «Cela n'a jamais commencé avec« faisons un service de messagerie par-dessus le marché », se souvient-il. "L'équipe expérimentait le chat vidéo via un avatar, des webcams et une multitude de choses."

Alors que l’équipe de Hannah s’intéressait au suivi du visage sur diverses plates-formes informatiques, elle a fini par s'intéresser aux appareils mobiles. C'est à ce moment-là que les équipes développement et développement de produits d'Intel se sont intéressées. Et pour cause: la messagerie over-the-top est un marché très actif. En 2013, les utilisateurs ont envoyé plus de 10 300 milliards de messages de ce type, un nombre qui devrait doubler en 2014. Le nombre de SMS dans le monde en 2013 s'élevait à environ 6 500 milliards.

De là, Pocket Avatars était sur la voie rapide. «La technologie peut rester longtemps dans les laboratoires», dit-il, «mais elle a rapidement évolué dans le développement de produits».

Actuellement, l'algorithme mis au point par l'équipe d'Hannah peut enregistrer des mouvements faciaux subtils, par exemple une haussement de sourcil, pour suivre les mouvements de la tête dans les quatre directions et effectuer un zoom avant sur le personnage en fonction de votre distance par rapport à la caméra. L'avatar suivra chaque tick en temps réel, comme si vous cherchiez un miroir de dessin animé magique.

L’avatar peut actuellement imiter un grand nombre d’expressions (Intel ne publie pas un nombre spécifique) et d’autres viendront à la main lorsque les développeurs publieront les mises à jour des applications.

«Nous avons déjà intégré de nombreuses micro-expressions dans le fichier modèle», explique Hannah. «Nous pourrons les déverrouiller et faire évoluer rapidement les expressions.»

Intel ne révèle pas la sauce secrète de Pocket Avatars, mais la plupart des logiciels de suivi du visage, qu’il s’agisse d’une application pour webcam ou de la capture de mouvement haut de gamme pour un film, fonctionnent de la même manière. Le logiciel identifie les points clés du visage d'une personne (par exemple les coins de la bouche et les sourcils) pour déterminer l'expression que la personne exprime à ce moment-là. Le système mappe ensuite cette émotion sur un personnage.

Pour le moment, Hannah affirme que son équipe se concentre sur l'amélioration de l'expérience intégrée à Avatars (une prochaine mise à jour aidera à améliorer les performances de l'application dans des conditions d'éclairage peu optimales, par exemple) plutôt que de rechercher d'autres façons d'utiliser la technologie de suivi. Par exemple, à l'avenir, une webcam pourra peut-être lire votre expression faciale et ajouter une représentation précise de ce que vous ressentez à un statut Facebook.

Mais, comme nous continuons à compter de plus en plus sur les communications virtuelles, la capacité de partager des émotions en temps réel deviendra de plus en plus importante.

"Il existe de nombreuses applications potentielles pour la fonction de suivi du visage", admet-il, "mais nous ne révélons pas comment nous allons appliquer cette technologie [à l'avenir] maintenant."

Une application qui capture les émotions en temps réel