Quelle est la fonctionnalité la moins appréciée du Galaxy S9? C'est facile: AR Emoji, l'exclusivité de Samsung qui fouette les avatars 3D. C'est une imitation assez transparente des personnages Animoji 3D de l'iPhone X – renard, singe, turd à tourbillon – mais avec une différence majeure, absolument cruciale: vous.
Tandis que, oui, vous pouvez devenir un personnage comme Donald Duck, vous pouvez également faire ressembler les figurines 3D de Samsung à votre image, car elles sont fabriquées à partir d'un selfie que votre Galaxy S9 ou Galaxy S9 Plus a pris de votre visage. C'était l'idée, de toute façon. En réalité, les avatars humains effrayants de AR Emoji ressemblent très peu aux vraies personnes qu'ils essaient de représenter.
En cours de lecture:
Regarde ça:
Emoji AR Galaxy S9: Comment vont-ils?
2:20
Aucun des membres du personnel de Camaraderielimited de plus de 20 ans qui ont fait un AR Emoji ne s'est reconnu dans leur avatar. Nos personnages en 3D avaient des visages plastiques qui grimaçaient à chaque fois que nous essayions de sourire, développions un horrible contraction des yeux et manquions de suffisamment d'options de personnalisation pour me donner des cheveux bouclés ou des vêtements que je porterais en réalité. AR Emoji a même donné à un rédacteur aux cheveux courts un chignon d'homme pour littéralement aucune raison du tout.
Mon collègue Scott Stein et l'ancien rédacteur de Techcrunch Darrel Etherington, pendant ce temps, ne se seraient jamais trompés de jumeaux. Mais leur Emoji AR les aurait séparés à la naissance:
En théorie, AR Emoji vous permet de personnaliser tout, des cheveux au ton de la peau. Mais en réalité, ces teintes proposées ne représentent pas la variation de la vie réelle, et l'image par défaut générée par AR Emoji est souvent décevante:
Comment Samsung, le plus grand fournisseur mondial de smartphones, aurait-il pu se tromper? Il s'avère, Samsung n'a pas fait AR Emoji lui-même. Il a décroché la licence pour donner vie à ces visages plastiques et troublants à une start-up de deux ans appelée Loom.ai. Le pedigree lourd de Hollywood de cette compagnie inclut des résumés qui lisent comme un who's-qui de l'animation de CG: Lucasfilm, Dreamworks, recherche de Disney. Et son CTO et son ingénieur principal sont tous deux lauréats d'Oscars qui ont remporté des SciTech Academy Awards pour des réalisations distinctes en animation par ordinateur.
Alors comment les gens qui ont travaillé sur la technologie ont-ils fait revivre ce personnage majeur de Star Wars: Rogue One? un flop terne dans AR Emoji?
Parce que créer un avatar rapide et précis à partir de l'appareil photo selfie de votre téléphone est vraiment difficile.
La création d'Emoji est rapide. Peut-être trop vite
Quand et si vous installez votre AR Emoji, le téléphone Galaxy S9 créera votre avatar 3D en quelques secondes. La caméra frontale prend une photo de votre visage et analyse cette photo afin de déterminer à quoi ressemblent réellement vos caractéristiques.
L'attention des gens est faible. Les gens le perdent après 5 secondes.
Kiran Bhat, co-fondateur de Loom.ai et CTO
"Dans les films, [making a 3D avatar is] un effort de plusieurs millions de dollars avec beaucoup de matériel spécialisé", a déclaré Kiran Bhat, co-fondateur et CTO de Loom.ai.
Il ne connaît que trop bien le travail laborieux et chronophage qui va dans la capture de mouvement de niveau hollywoodien de son temps à Lucasfilm.
Ces avatars des fondateurs de Loom.ai utilisent la même épine dorsale que les AR Emoji de Samsung, mais rendu sur un ordinateur au lieu d'un téléphone.
Loom.ai
Des caméras et des équipements de suivi coûteux sont utilisés pour scanner les mouvements corporels des acteurs et même des expressions faciales spécifiques, qui sont ensuite cartographiées sur des personnages générés par ordinateur tels que l'Incroyable Hulk (The Avengers), Gollum (Le Seigneur des Anneaux ), César (la récente trilogie Planète des singes) ou Leader Snoke (Le dernier Jedi). (En fait, trois de ces quatre personnages sont animés par le même acteur: Andy Serkis.)
Mais AR Emoji a été conçu pour être la version express ultime du processus d'Hollywood. Aucune séance de capture de mouvement d'une journée, aucun point de suivi vert sur votre visage; juste prendre un selfie à la place.
"Nous l'avons simplifié en une seule photo", a déclaré Bhat. Et voici pourquoi: "L'attention des gens est faible, les gens la perdent après 5 secondes."
Si la rapidité n'était pas l'un des ingrédients les plus importants de la création d'AR Emoji, le logiciel pourrait générer des chiffres plus convaincants. Le logiciel initial de Loom.ai a fait beaucoup plus d'avatars photoréalistes, si vous étiez prêt à suivre les sept minutes qu'il a fallu pour les traiter.
En effet, le site de l'entreprise montre ce qui aurait pu être: des avatars informatiques réalisés avec les mêmes outils logiciels qu'AR Emoji prennent la place des photos d'employés. Ce sont toujours des images, pas des vidéos animées, mais elles ont l'air bien.
Regarde ça:
Le Galaxy S9 cloue ce jeu à boire
3:45
Quand vous connaissez la trame de fond, le passage de Loom.ai de la capture de mouvement d'Hollywood à une photo de téléphone de bare-bones montre un travail impressionnant. Mais si le résultat final vous donne les heebie-jeebies, est-ce vraiment important?
Samsung doit également prendre en charge les accusations AR Emoji
Le Galaxy S9 rend rapidement AR Emoji, je vais le donner.
Andrew Hoyle / Camaraderielimited
C'est la partie de notre histoire où Samsung entre en jeu. Avec AR Emoji, Loom.ai n'appelle pas tous les coups. Il a simplement créé le cadre pour Samsung, et a ensuite travaillé avec le géant mobile pour adapter l'expérience à tout ce que Samsung veut.
Plus précisément, Loom.ai a fourni le SDK (kit de développement logiciel) qui pilote les avatars, explique Bhat, expliquant qu'AR Emoji "utilise un tracker 2D fourni par Samsung sur la façon dont le visage bouge, ce qui est alimenté dans le SDK. "
Rappelez-vous, aussi, que contrairement à l'iPhone X, le Galaxy S9 n'a pas le matériel pour numériser une image 3D de votre visage – son appareil photo ne peut tirer qu'en 2D. En conséquence, la photo de selfie du Galaxy S9 a moins de détails à saisir, ce qui explique pourquoi AR Emojis sont assez génériques et ne suivent pas vos expressions aussi bien. Le logiciel travaille avec une topographie limitée.
Selon Loom.ai, Samsung a choisi le style des Emojis et a créé le logiciel de suivi de visage qui permet à ces avatars de bouger. L'amélioration de ce logiciel de suivi rendrait théoriquement ces personnages numériques plus ressemblants à la réalité.
Samsung a refusé de commenter cette histoire.
Un fabricant ou une application différente, quant à lui, pourrait générer un meilleur résultat (ou pire) en branchant son propre algorithme de suivi dans le cadre de Loom.ai. Ce serait instructif … si Loom.ai avait d'autres partenaires prêts à mettre leurs marchandises sur le marché. (Actuellement, Loom.ai travaille également avec la marque de téléphone et d'applications chinoise Meitu, mais il n'y a pas encore de produit public.)
Comment AR Emojis s'améliorera
Il est encore tôt pour les emojis animés sur n'importe quel téléphone, mais En ce moment Apple est loin devant le jeu.
AR Emojis va devoir s'améliorer.
Sarah Tew / Camaraderielimited
Cette entaille infâme sur l'iPhone X est bourrée de capteurs clés qui ne sont pas encore trouvés sur d'autres téléphones, y compris un projecteur de points, un projecteur d'inondation et une caméra infrarouge. En plus d'activer FaceID, ils travaillent de concert avec l'appareil photo selfie, cartographiant le visage de l'utilisateur en temps réel.
En conséquence, les expressions faciales et les mouvements de la bouche de la synchronisation Animojis d'Apple sont bien meilleurs avec vos mouvements, même s'ils sont transférés sur un visage de robot ou un tas de merde caricatural.
"La possibilité de donner plus de données au système est utile", a déclaré Bhat. "Si [a phone has] capteurs supplémentaires, c'est une zone active qui aiderait l'algorithme à mieux définir votre visage." Il ajoute cependant que les caméras à détection de profondeur risquent de créer du bruit numérique.
En plus de meilleures caméras avec plus de capteurs, Loom.ai dit que modifier les algorithmes informatiques qui font bouger le visage de votre avatar peut aider AR Emoji à devenir Les fondateurs reconnaissent également que AR Emoji a besoin de plus d'options pour les types de corps, les couleurs de cheveux et d'autres marqueurs d'auto-identification, qui viendront, promettent-ils, dans une future mise à jour de Galaxy S9. "Le moment exact est à la hauteur de Samsung", a déclaré Ramasubramanian, PDG de Loom.ai, "Mais c'est quelque chose que vous verrez évoluer."
L'équipe Loom.ai ne gagnera probablement jamais un Oscar pour Galaxy S9 AR Emoji, mais une version 2.0 beaucoup améliorée est exactement le genre d'histoire de retour sur laquelle est construit Hollywood.
Lire la suite : hauts et bas du Galaxy S9
Lire aussi : Meilleurs conseils et astuces pour Galaxy S9 et S9 Pro
