Xsens, spécialiste des solutions de motion capture inertielle (costume avec plusieurs capteurs qui enregistrent les mouvements, sans caméra externe) a annoncé leur collaboration avec IKinema et Epic games lors de la Game Developers Conference 2016.

Cette alliance technologique intègre la technologie de capture de mouvement de Xsens (Xsens MVN) dans Unreal Engine 4 en utilisant le LiveAction de IKinema. Conjugué à Faceware, la prise en charge des mouvements du visage est aussi de la partie !

C’est une autre étape pour permettre aux utilisateurs de se concentrer sur le processus créatif plutôt que l’intégration technique, selon le directeur produit de xsens Hein Beute. Cette alliance permettra de nombreuses nouvelles applications en temps réel nécessitant des animations de personnages réalistes et de beaux graphiques.

Au stand Xsens de la GDC, il y a eu une démonstration d’une expérience de réalité virtuelle immersive « corps entier » en utilisant l’Oculus Rift, le moteur de jeu Unity, les gants Manus VR et le costume de capture de mouvement Xsens.

Le stand a présenté:

• La démo de capture de mouvement en live du pipeline de Unreal Engine utilisant le LiveAction de IKinema .
• Réalité Virtuelle immersive – Full-body avec Xsens MVN.
• Capture du visage – Faceware montre ses technologies de capture de mouvement du visage ajoutées au suivi du corps  Xsens MVN .
• Capture de mouvement mains et doigts – Le fabricant de périphériques Manus VR montre sa technologie de capture de mouvement pour les doigts et les mains.

Un exemple de collaboration entre Xsens MVN, Cubic Motion, 3Lateral Studio, Ninja Theory, IKinema et Unreal Engine: l’actrice Melina Juergens joue le rôle de Senua en temps réel. L’actrice est invisible pour le public et porte un costume de capture de mouvement Xsens MVN et une installation de capture du visage. En temps réel, on voit Senua dans le monde Hellblade. Elle parle également en temps réel, transformant sa voix en celle de Senua Chaque fois que l’actrice cligne des yeux, Senua cligne des yeux.

Pour vous entraîner sous votre moteur, vous pouvez télécharger les fichier de motion capture du clip  Gangnam Style libres de droit.

Le fichier zip contient:
PSY Gangnam Style.fbx
PSY Gangnam Style.mvnx

Le fichier .fbx peut être importé dans tous les principaux logiciels 3D,  y compris 3ds Max, Maya, Unity et Unreal.
Le fichier .mvnx peut être ouvert dans MVN studio logiciel de Xsens.

La tenue Awinda est composée des capteurs et de bandes retenant ces capteurs à positionner sur la tête, les bras et les jambes, chaque capteur étant équipé d’une batterie individuelle pouvant tenir jusque 6 heures.
La tenue Link est la tenue complète en Lycra intégrant ces capteurs, une seule batterie pour l’ensemble avec 10 heures d’autonomie.
Les prix sont de 12.000 euros à 35.000 euros logiciel inclus. A ce prix, ce n’est pas à la portée des petits budgets.

Une autre utilisation de la tenue Xsens MVN conjuguée à Unreal Engine a été lors du Cannes Lions avec la présentation d’une créature dirigée en direct par une danseuse portant la tenue. Cette utilisation a été effectuée par la société Zoic Studios. Des contrôles ont permis à la danseuse de déclencher des événements tels que des explosions de particules et les effets de flamme.