Технология трекинга мимики и движений головы основана на геометрии лица. Она позволяет создавать точные трехмерные модели лица по отдельным кадрам видеозаписи, что становится возможным благодаря функции FaceBundle.
Полученные 3D модели открывают широкие возможности для работы с текстурами: можно добавлять макияж, виртуальные эффекты (VFX) и выполнять другие композиционные задачи.
Одной из наиболее интересных функций является возможность переноса лицевой анимации с видео на трехмерный персонаж. Для этого используются технологии ARKit и Rigify.
Благодаря этой функции анимация в Blender становится более доступной: мимика с видео может быть перенесена на 3D модель всего за один клик, что значительно упрощает процесс создания реалистичной анимации.