Realtime Avatars

Deux avatars avec rig facial ont été créés pour répondre à des besoins de production différents, chacun comprenant la modélisation complète, les textures et le rigging.

Le premier a été conçu pour une application développée sous Unity, à partir d’un ensemble personnalisé de blendshapes défini par le client plutôt que d’utiliser l’ensemble complet ARKit/visèmes. Seules les shapes nécessaires aux expressions ciblées et au lip-sync ont été créées, afin de conserver un rig léger et optimisé pour les performances de l’application. L’avatar a été entièrement intégré et testé dans Unity.

Le second est un avatar de type talking head doté d’un ensemble complet de 67 blendshapes faciaux — les 52 shapes ARKit ainsi que 15 visèmes pour assurer un lip-sync précis lors des dialogues. Il a été optimisé pour une lecture en temps réel dans le navigateur avec Three.js, en maintenant un bon équilibre entre les performances du mesh et des shape keys sans compromettre la qualité des déformations faciales.

Afin de faciliter ce type de production sur différents projets, nous avons également développé un outil personnalisé de transfert de shapes permettant de copier un ensemble complet de blendshapes depuis un avatar déjà riggé vers un nouveau personnage. Seules de légères corrections manuelles sont ensuite nécessaires pour adapter les shapes à la nouvelle topologie, ce qui réduit considérablement le temps de production du rig facial.

Compétences : Modélisation 3D, Texturing, Rigging facial, Sculpture de blendshapes, Shapes ARKit et visèmes, Intégration Unity, Optimisation Three.js.