FaceTracker는 Foundry Nuke의 플러그인으로 얼굴 추적에 사용되며 동작 캡처 장비 및 태그가 없습니다.추적 정보는 나중에 손질, 흉터 추가, 재조명, 얼굴 교체, 노화 및 노화 제거 등에 사용될 수 있습니다.최상의 결과를 얻으려면 FaceBuilder와 함께 사용하는 것이 좋습니다.FaceTracker는 GeoTracker와 유사하지만 모델의 위치 외에도 얼굴 제스처를 추적합니다.우리의 추적 알고리즘은 신경망 솔루션과 반대로 안정적이고 정확하며 완전히 수동으로 제어할 수 있으며 얼굴 동작 캡처 장비와 같은 어떤 종류의 무대 준비도 필요하지 않습니다.

정확하고 빠른 추적

우리는 과학계의 최신 성과를 생산 파이프라인에 가져오기를 희망합니다. 이것은 당신이 우리의 추적 플러그인을 사용할 때 가장 좋은 알고리즘과 방법을 가지고 있다는 것을 의미합니다.속도에 대해 말하자면, 우리는 당신이 실시간으로 추적한다는 것을 보장할 수 없지만, 우리는 정말 그것에 가깝기 때문에 당신은 오래 기다릴 필요가 없습니다.

통합 워크플로우

Nuke에서 아무것도 내보내거나 가져올 필요가 없으며 전체 추적 프로세스는 Nuke 내부에서 진행됩니다. FaceTracker 노드를 만들고 2D 뷰어를 사용하여 추적을 시작하고 필요할 때 3D 뷰어에서 결과를 확인합니다.

보이는 대로 얻다

슬라이더와 다이얼에 관여할 필요 없이 뷰어의 얼굴 격자에 압정을 만들어 해당 위치로 드래그하면 됩니다.압정을 드래그할 때 얼굴 모델이 적응하고 있습니다.

수동 제어 및 정밀도

우리는 모든 것을 완전히 자동화하고 가능한 한 적은 인간의 작업 시간을 필요로 하지만, 우리는 여전히 정확한 추적 결과에 집중하고 있기 때문에 프로세스를 제어하고 결과와 키프레임을 완전히 조정할 수 있습니다.

Nuke 독립 지원

FaceTracker를 포함한 모든 노드는 Nuke Indie에서 사용할 수 있습니다.Nuke의 12.2v4 버전과 KeenTools 패키지의 2020.1 버전 이상을 설치해야 합니다.표준 Nuke에 비해 기능 제한은 없습니다.

FACS/ARKit 블렌드 형태 내보내기

추적이 완료되면 Epic Games의 Live Link Face 응용 프로그램이 제공하는 것처럼 ARKit 호환 FACS 혼합 모양의 CSV 파일로 애니메이션을 내보낼 수 있습니다. 이렇게 하면 나중에 자신의 도구에서 사용하거나 언리얼 리프팅 기반 파이프라인에 통합할 수 있습니다.이 파일을 FaceBuilder for Blender 플러그인에 로드할 수도 있습니다. 예를 들어 애니메이션을 다른 사람에게 전송할 수도 있습니다.

자동 정렬

수동으로 얼굴을 고정할 필요가 없습니다!적어도 처음부터 시작하는 것은 아니다.얼굴 정렬이 100% 정확하지 않기 때문에 수동 조정이 필요할 때도 있지만 근본적으로 모델을 만드는 시간을 줄일 수 있습니다.이렇게 많은 경우, 우리는 실제로 테스트할 때 이미 팀에서 수동으로 이 작업을 수행하는 것을 중단했고, 우리는 돌아가고 싶지 않다!

사용자 추적 (도움말)

일반적으로 사용자는 자체 추적 알고리즘에 의존할 수 있지만 만약을 위해 다른 추적기의 추적 데이터를 사용하여 추적 품질을 향상시킬 수 있습니다.예를 들어, Nuke 내장 추적기 노드의 궤적을 가져올 수 있으며 FaceTracker는 가장 높은 우선 순위로 고려합니다.

표면 마스크

추적에서 제외할 형상의 일부 면을 숨길 수 있습니다.예를 들어 피부나 안구의 일부 반사 부위.FaceTracker가 잘 처리할 수 있기 때문에 일반적으로 그렇게 할 필요가 없습니다.

회전마스크

추적을 개선하는 또 다른 방법 (실제로 실패하는 경우) 은 추적에서 차단을 제거하는 것입니다.이렇게 하려면 roto 노드를 FaceTracker의 마스크 입력에 연결하고 추적을 다시 시작할 수 있습니다.

뭔가 내장형 같아.

우리의 플러그인은 낮은 수준의 Nuke API를 사용하여 C++를 작성합니다.따라서 기본 경험과 유사한 도구를 사용하고 있는지 확인할 수 있습니다.