FaceTracker - это плагин Foundry Nuke для отслеживания лиц без устройства захвата движений и меток. Информация отслеживания может быть позже использована для модификации, добавления шрамов, повторного освещения, замены лица, старения и дегенерации. Для достижения наилучших результатов мы рекомендуем использовать его вместе с FaceBuilder. FaceTracker похож на GeoTracker, но в дополнение к расположению модели он отслеживает жесты лица. Наши алгоритмы отслеживания, в отличие от нейронных сетевых решений, стабильны, точны и позволяют полностью управлять вручную, не требуя какого - либо типа подготовки к сцене, такой как устройство захвата движений лица.

Точное и быстрое отслеживание

Мы хотим привнести последние достижения научного сообщества в производственные трубопроводы, а это означает, что у вас есть лучшие алгоритмы и методы, когда вы используете наши модули отслеживания. Говоря о скорости, мы не можем гарантировать, что вы отслеживаете ее в реальном времени, но мы действительно близки к ней, поэтому вам не нужно долго ждать.

Интегрированные рабочие процессы

Вам не нужно экспортировать и импортировать что - либо из Nuke, и весь процесс отслеживания выполняется внутри Nuke: вы создаете узел FaceTracker и начинаете отслеживать его с помощью 2D - просмотрщика, а затем проверяете результаты в 3D - просмотре, когда это необходимо.

То, что мы видим, мы получаем.

Вам не нужно вмешиваться в ползунки и ручки, просто создайте « штыки» на лицевой сетке в просмотрщике и перетащите их в соответствующее место. Когда вы перетаскиваете гвоздь, модель человеческого лица адаптируется.

Ручное управление и точность

В то время как мы пытаемся сделать все полностью автоматизированным, требуя как можно меньше человеческого рабочего времени, мы по - прежнему сосредоточены на точном отслеживании результатов, чтобы вы могли контролировать процесс и полностью корректировать результаты и ключевые кадры.

Независимая поддержка Nuke

Все наши узлы, включая FaceTracker, доступны в Nuke Indie. Вам необходимо установить версию 12.2v4 для Nuke и версию 2020.1 или более позднюю для пакета KeenTools. По сравнению со стандартным Nuke нет функциональных ограничений.

Экспорт гибридных форм FACS / ARKIT

После завершения отслеживания вы можете экспортировать анимацию в CSV - файл со смешанной формой FACS, совместимой с ARKit, как предлагает вам приложение Epic Games Live Link Face, чтобы вы могли использовать его позже в своих собственных инструментах или интегрировать его в трубопровод, основанный на Unreal Epid. Вы также можете загрузить этот файл в плагин FaceBuilder for Blender, например, для передачи анимации другим людям.

Автоматическое выравнивание поверхностей

Вам больше не нужно вручную фиксировать лицо! По крайней мере, не с самого начала. Наше выравнивание лица еще не на 100% точно, поэтому иногда требуется некоторая ручная настройка, но это принципиально сокращает время на формирование модели. Так много, что мы фактически перестали делать это вручную в команде во время тестирования, и мы не хотим возвращаться!

Отслеживание пользователей (программа помощи)

Обычно вы можете полагаться на наш собственный алгоритм отслеживания, но на всякий случай вы можете использовать данные отслеживания других трекеров для улучшения качества отслеживания. Например, вы можете импортировать траектории узлов встроенного трекера Nuke, и FaceTracker будет рассматривать их с наивысшим приоритетом.

Покрытие

Вы можете скрыть некоторые геометрические стороны, которые должны быть исключены из отслеживания. Например, некоторые отражающие части кожи или глаз. Хотя, как правило, вам не нужно это делать, потому что FaceTracker хорошо справляется с ними.

Повернуть маску

Еще один способ улучшить отслеживание (в редких случаях, когда это фактически не удается) - исключить блокировку из отслеживания. Для этого вы можете подключить узел roto к вводу маски FaceTracker и (перезапустить) отслеживание.

Чувствуется встроенный

Наши плагины написаны на C + + с использованием низкоуровневого API Nuke. Таким образом, вы можете быть уверены, что вы используете инструмент с аналогичным опытом работы на вашем компьютере.