Vortex Gaming

· 실제 의자에서 회전하거나 장난감 자동차를 조종하는 등, VTuber들이 현실 공간과 가상 공간을 넘나드는 듯한 자연스러운 움직임을 보여줍니다.
· 홀로라이브 멤버들이 서로 줄다리기를 하거나 소품을 잡는 장면은 실제와 구분하기 어려울 정도로 정교한 트래킹 기술을 활용합니다.

· 가장 흔하게 사용되는 Vive 또는 Tundra 트래커는 광학 방식이지만, 헤드셋 없이 사용하기 어렵고 크기가 커서 라이브 퍼포먼스에 제약이 있습니다. 또한 최대 5개 트래커 제한으로 정확도에 한계가 있습니다.
· Slime VR, Rebocap과 같은 IMU 트래커는 작고 장애물에 강하며 헤드셋이 필요 없지만, 관성으로 인한 부정확성과 드리프트 현상이 발생하여 장시간 사용 시 문제가 될 수 있습니다.
· 이러한 트래커들은 솔로 VTubing에는 적합할 수 있으나, 홀로라이브처럼 여러 멤버가 상호작용하는 환경에서는 정확하고 안정적인 트래킹이 필수적입니다.

· VTuber 영역을 넘어 3D 트래킹 시장의 선두 주자인 영화 및 게임 산업의 기술을 살펴볼 필요가 있습니다.
· 과거의 단순한 애니메이션 방식과 달리, 현대의 AAA 게임과 블록버스터 영화는 모션 캡처(Mocap) 기술을 통해 사실적이고 생동감 있는 캐릭터 움직임을 구현합니다.

· 모션 캡처는 1985년부터 시작되었으며, 초기에는 '브루트 포스 애니메이션'이라 불렸습니다. 현재는 게임, 영화, 방송 등 다양한 분야에서 사실적인 움직임을 구현하는 데 사용됩니다.
· Vicon과 같은 전문 모션 캡처 시스템은 특수 카메라와 배우의 몸에 부착된 수많은 레트로반사 마커를 활용합니다. 이 카메라는 적외선 빛을 사용하여 마커의 3D 좌표를 측정하며, 이는 서브 밀리미터 수준의 정확도와 드리프트 없는 추적을 가능하게 합니다.

· 모션 캡처 시스템은 다수의 고속 카메라를 사용하여 배우의 움직임을 캡처합니다. 각 카메라는 적외선 빛을 발사하고, 배우의 슈트와 마커에 부착된 레트로반사 마커에서 반사된 빛을 감지하여 3D 공간에서의 위치를 정확하게 파악합니다.
· 마커가 가려지는 '오클루전' 문제를 해결하기 위해, 여러 대의 카메라를 다양한 높이와 각도로 배치하여 사각지대를 최소화합니다. 또한 외부 광원 간섭을 줄여 트래킹 성능을 최적화합니다.

· 홀로라이브가 사용하는 Vicon의 플래그십 VK26 모션 캡처 카메라는 개당 약 2만 달러에 달하며, 스튜디오 하나에만 수백만 달러가 소요될 수 있습니다. 이는 매우 높은 비용입니다.
· 손가락 트래킹을 위해 특수 제작된 모션 캡처 장갑이나, 얼굴 트래킹을 위한 고정밀 헤드캠(Faceware, Captive Devices 등)이 사용됩니다. 아이폰의 얼굴 인식 기술도 활용될 수 있습니다.

· Vicon은 16대의 카메라, 슈트, 마커, 소프트웨어를 포함한 시스템을 약 6만 달러부터 제공하며, 필요에 따라 4만 달러까지 낮출 수 있습니다. 이는 일반 VTuber에게도 고려할 만한 옵션입니다.
· 더 저렴한 대안으로는 Waro 소프트웨어, 아이폰 기반 얼굴 트래킹(iPhone X 이상 권장), 넥 마운트 또는 Rokoko 헬멧, UD Cap VR 글러브, Vive/Tundra 트래커, Flux Pose, Rebocap 트래커 등이 있습니다.