L’outil d’IA derrière Thanos a fait de l’animation faciale dans « The Quarry » un jeu d’enfant

Juin 28, 2022Le jeu d’acteur pour les jeux vidéo est souvent une expérience stérile.
Un acteur attache une caméra de casque et interprète ses répliques dans une cabine de son, puis ces données sont transférées vers un moteur de jeu où elles sont placées sur un squelette dans le jeu pour que les artistes les examinent et les nettoient.
Avec « The Quarry », le processus ressemblait davantage au tournage d’une pièce de théâtre, selon Aruna Inversin, directrice créative et superviseure des effets visuels pour Digital Domain, le studio d’effets visuels qui s’est associé au développeur Supermassive Games pour leur successeur spirituel à « Until Dawn ».
Le studio oscarisé a produit des effets visuels pour des films comme « Titanic », « L’étrange histoire de Benjamin Button » et plusieurs films Marvel.
Pour créer les personnages photoréalistes vus dans « The Quarry », il a utilisé le système de capture faciale Masquerade, qui a été développé pour reproduire la ressemblance de Josh Brolin avec son personnage Thanos dans « Avengers : Infinity War ».
À l’origine, Masquerade n’avait qu’un seul but à faire : prendre la performance d’une caméra montée sur la tête et la traduire en un maillage numérique qui pourrait ensuite être rendu dans un film.
Pour « The Quarry », l’équipe VFX avait besoin de quelque chose qui puisse suivre les mouvements et les expressions faciales des acteurs et créer des personnages numériques pouvant être édités en temps réel.
Ils ont donc créé Masquerade 2.0.
Cette nouvelle technologie a décuplé la production.
Les acteurs jouaient leurs scènes, Digital Domain téléchargeait toutes les performances sur un ordinateur avec leur performance corporelle, leur performance cérébrale et leur audio codés et synchronisés, puis les envoyait à Supermassive pour qu’il les examine dans le moteur de jeu.
Le développeur donnait son avis, et le lendemain, le réalisateur de « The Quarry », Will Byles, qui a également réalisé « Until Dawn », pouvait regarder les images pour déterminer si une performance particulière devait être refaite.
Au total, Digital Domain a déclaré avoir rendu 250 millions d’images pour « The Quarry » - bien plus que ce qu’il aurait fait pour un film typique.   Lisez l’article complet ici : https://www.washingtonpost.com/video-games/2022/06/28/quarry-avengers-thanos/