5Sep

Le mocap facial arrive sur Unreal Engine via une nouvelle application iPhone

Une nouvelle application iOS pour Unreal Engine utilise votre iPhone pour capturer vos expressions faciales et animer un personnage à l'écran en temps réel. Live Link Face est conçu pour fonctionner dans les environnements de production de jeux professionnels, comme une scène sonore avec des acteurs en combinaisons mocap complètes et des amætur, comme un seul artiste à un bureau, selon un article de blog du développeur Unreal Engine, Epic Games. L'application est disponible dès maintenant à partir de La boutique d'applications d'Apple.

L'application utilise la plateforme de réalité augmentée d'Apple, ARKit, et la caméra frontale TrueDepth de l'iPhone. (introduit sur l'iPhone X en 2017) pour capturer les traits du visage et transmettre les données à Unreal Engine. L'application capture également les mouvements de la tête et du cou.

Pour prendre en charge le travail collaboratif, Live Link Face utilise un réseau multicast pour se synchroniser avec plusieurs appareils à la fois. Les développeurs promettent « une prise en charge robuste du timecode et une précision d’image précise » pour prendre en charge davantage la synchronisation multi-appareils. La fonction « synchronisation des tentacules » permet à l'application de se connecter à une horloge maîtresse sur scène.

Le message ne précise pas si une application équivalente à Android est en préparation. Cela pourrait être dû au fait qu'il serait presque impossible de garantir que cette application mocap fonctionnerait avec les dizaines de configurations de caméra frontale différentes trouvées dans les nombreux téléphones Android disponibles. Le développer pour l'iPhone signifie qu'Epic pourrait cibler la caméra TrueDepth et ne pas avoir à se soucier des variations de celle-ci.

Unreal Engine est l'un des outils de production les plus utilisés pour les jeux et autres médias, inclus dans des titres aussi grands que Fortnite et Le Mandalorien. Epic prévoit de continuer à rendre Unreal largement disponible, affirmant que « la démocratisation continue des outils en temps réel pour la production virtuelle est l'un des principaux objectifs du développement d'Unreal Engine ».