페이스 트래킹과 모션 캡처 - VTuber 방송의 핵심 기술

VTuber란?

VTuber(Virtual YouTuber)는 2D 또는 3D 아바타를 사용하여 방송하는 스트리머입니다. 실제 얼굴을 공개하지 않으면서 캐릭터로 활동합니다. 페이스 트래킹 기술로 표정과 움직임을 아바타에 반영합니다. 일본에서 시작되어 전 세계적으로 인기를 얻고 있습니다.

페이스 트래킹 소프트웨어

VTube Studio는 2D Live2D 모델용 트래킹 앱으로 iOS/Android 스마트폰 또는 웹캠으로 얼굴을 추적합니다. 눈 깜빡임, 입 움직임, 고개 기울임이 아바타에 반영됩니다. VSeeFace는 3D VRM 모델용 무료 트래킹 소프트웨어입니다. 웹캠만으로 얼굴과 상반신 움직임을 캡처합니다.

장비 요구사항

기본적으로 웹캠(로지텍 C920 이상)이면 페이스 트래킹이 가능합니다. 더 정밀한 트래킹을 원하면 아이폰(Face ID 탑재 모델)이 TrueDepth 센서로 우수한 성능을 제공합니다. 전신 모션 캡처에는 VR 트래커(HTC Vive 트래커)나 Mocopi 같은 전용 장비가 필요합니다.