A$AP Rocky, Gaussian Splatting을 활용한 ‘Helicopter’ 뮤직비디오 공개

• A$AP Rocky의 신곡 ‘Helicopter’ 뮤직비디오는 거의 모든 인물 연기를 볼류메트릭 캡처와 Gaussian Splatting으로 구현한 작품
• 촬영은 Evercoast의 56대 RGB-D 카메라 배열을 사용해 실제 퍼포먼스를 3D로 기록하고, 후반에는 Houdini·OctaneRender로 렌더링
• CG Nomads GSOPs와 WildCapture의 내부 툴링을 통해 스플랫 데이터의 시퀀싱, 조명 재조정, 물리적 상호작용을 처리
• 영상의 초현실적 느낌에도 불구하고 모든 장면은 실제 배우의 물리적 연기를 기반으로 제작
• 이 프로젝트는 대중음악 영상에서의 동적 Gaussian Splatting 실사용 사례로, 향후 실시간 3D 영상 제작의 가능성을 보여줌

Helicopter 뮤직비디오의 제작 개요

• A$AP Rocky의 ‘Helicopter’는 Radiance Fields 기술을 활용한 뮤직비디오로, 거의 모든 인물 연기가 볼류메트릭 방식으로 캡처됨
  • 영상은 혼란스러운 움직임과 초기 MTV 스타일의 에너지를 특징으로 함
  • 인물들은 Dynamic Splat 형태로 렌더링되어 입체적 공간감 구현
• 프로젝트에는 Evercoast, Grin Machine, WildCapture, Fitsū.ai 등이 참여
  • Evercoast가 퍼포먼스 캡처를 담당하고, Grin Machine의 Chris Rutledge가 CG 슈퍼바이저로 참여
  • WildCapture의 Wilfred Driscoll이 시간적 일관성과 모션 전이를 위한 기술 지원

볼류메트릭 촬영과 기술적 구성

• 촬영은 2025년 8월 로스앤젤레스에서 진행, Evercoast의 56대 RGB-D 카메라와 두 대의 Dell 워크스테이션으로 동기화
  • 배우들은 와이어에 매달리거나 천장 바에 매달려 물리적 스턴트를 수행
  • 헬리콥터 날개나 소품은 실제 목재 구조물로 대체되어 현실적 세팅에서 촬영
• 총 10TB의 원시 데이터가 수집되어, 약 30분 분량의 스플랫 영상으로 렌더링
  • 최종 결과물은 PLY 시퀀스 약 1TB 규모로 출력

후반 제작 파이프라인

• 후반 작업은 Houdini에서 진행되었으며, CG Nomads GSOPs로 스플랫 데이터 조작 및 시퀀싱 수행
  • OTOY의 OctaneRender를 사용해 최종 렌더링 및 조명 재조정(relighting) 가능
  • Octane의 Houdini 통합이 성숙해져 그림자·입체감 표현이 가능해짐
• Blender는 레이아웃과 프리비주얼 단계에서 활용
  • 스플랫 시퀀스를 경량 프록시 캐시로 변환해 장면 계획에 사용
  • WildCapture의 내부 툴로 포즈 추정 스켈레톤을 생성, 충돌·물리 시뮬레이션 지원

실시간 미리보기와 제작 효율성

• Evercoast 시스템은 촬영 현장에서 실시간 공간 피드백 제공
  • 감독은 촬영 직후 메시 기반 프리뷰를 확인하고, 이후 웹 플레이어로 완전한 스플랫 렌더링을 검토 가능
  • 대용량 데이터를 다운로드하기 전, 필요한 장면만 선택적으로 후처리
• 이 워크플로우는 전통적 영상 제작보다 시뮬레이션에 가까운 방식으로, 빠르고 비용 효율적인 창작 가능

실제 퍼포먼스와 시각적 착시

• 일부 관객은 영상이 AI 생성물로 오해했으나, 모든 장면은 실제 배우의 물리적 연기를 기반으로 함
  • 스턴트, 점프, 낙하 등 모든 동작이 실제 공간에서 수행
  • 볼류메트릭 캡처 덕분에 카메라 구도 재배치와 공간 연속성 파괴가 자유로워, 인공적 느낌을 유발
• Radiance Field 기술은 현실을 대체하지 않고, 현실의 움직임과 공간을 보존하는 역할

A$AP Rocky와 Radiance Fields의 이전 협업

• A$AP Rocky는 2023년 ‘Shittin’ Me’ 뮤직비디오에서도 NeRF와 Instant-NGP GUI를 활용한 바 있음
  • 이번 ‘Helicopter’는 그 연장선에서 동적 Gaussian Splatting의 대규모 실사용 사례로 평가됨