영화 및 TV 산업은 빠른 속도로 변화하며 새로운 소비자 경험을 제공해 왔습니다. 업계의 최근 변화 중 하나는 하이 컨셉 영화와 TV 프로그램 개발에 가상 프로덕션을 사용하는 것입니다. The Mandalorian 및 The Lion King과 같은 쇼에 의해 대중화된 가상 프로덕션은 사실적인 시각 효과와 컴퓨터로 생성된 실사 프로덕션을 만드는 새로운 표준이 되어가고 있습니다.
가상 프로덕션은 실시간 렌더링, 가상 현실, LED 월 기술 등의 새로운 기술을 활용하여 실제 공간에서 가상 세트를 만드는 새로운 종류의 온 셋 프로덕션입니다. 이 방법을 사용하면 배우, 촬영 감독 및 기타 크리에이티브가 가상 세트와 상호 작용하여 프로덕션 및 포스트 프로덕션 과정을 단일 환경으로 결합할 수 있습니다.
가상 프로덕션은 3D 아티스트에게 새로운 과제와 기회를 제공하고 있습니다. 이제 3D 환경은 감독의 피드백을 기반으로 제작 중에 현장 변경 사항에 대해 유연하게 구축해야 합니다. 또한 실시간 렌더링이 온 셋 렌더링을 대체함에 따라 렌더링 워크플로우 및 렌더팜의 필요성이 부각되고 있습니다. 이 글에서는 가상 프로덕션의 혁신이 영화 및 TV 산업에 혁신을 가져오는 방식과 시각 효과 아티스트가 3D 환경을 구축하고 렌더하는 방식을 기술이 어떻게 변화시키는지 살펴보겠습니다.
가상 프로덕션은 여러 가지 형태를 취하지만, 그 핵심에는 디지털 씬과 실제 세트의 통합이 포함됩니다. 여기에는 동작 트래킹에서부터 가상 세계에 동기화된 카메라, LED 기술을 사용한 완전한 360 렌더링 환경에 이르기까지 모든 것이 포함될 수 있습니다.
대부분의 가상 프로덕션에는 일부 모션 트래킹이 포함됩니다. 가장 일반적으로 카메라는 HTC Vive 또는 특수 제작된 필름 트래커와 같은 가상 현실 트래커로 트래킹 됩니다. 이러한 트래커를 사용하면 영화 제작자는 카메라 위치, 회전 및 설정을 세트의 가상 부분에 대한 렌더팜으로 다시 스트리밍하는 동시에 실제 카메라를 실제 세트에서 사용할 수 있습니다. 기존의 배우 및 프롭 모션 트래킹 방법도 사용되고 있으며, 사전 시각화(previs) 렌더링을 위해 배우의 움직임을 게임 엔진으로 직접 스트리밍합니다.
가상 세트는 가상 프로덕션에서도 중요한 역할을 하고 있습니다. 고해상도 LED 월 및 투영 시스템에 표시되는 가상 세트 확장 기능은 실시간 CG 환경을 배경으로 표시하여 카메라의 온셋이 파란색 또는 녹색 화면 없이 완전한 이미지를 캡처할 수 있도록 합니다. 이러한 종류의 시스템의 주요 이점은 가상 세트가 작동하는 동안 배우가 연기할 때 가상 환경에 몰입 시켜 성능, 조명 및 전반적인 이미지 품질을 향상시킬 수 있다는 것입니다. 또한 이 방법을 사용하면 로토스코프 작업 및 기타 지루한 VFX 작업에 소요되는 시간을 크게 절감할 수 있습니다.
대부분의 주요 프로덕션과 마찬가지로 가상 프로덕션 프로세스도 사전 시각화에서 시작됩니다. 사전 시각화는 프로덕션 환경의 기대치와 요구 사항을 설정합니다. 기존의 제작물과 달리, Previs는 또한 촬영이 시작되기 전에 제작해야 할 것에 대한 가상 효과 팀의 작업을 설정합니다. 컨셉 아트, 사전 시각화 애니메이션 및 스토리보드를 통해 VFX 팀은 개발해야 할 세트를 파악할 수 있습니다.
사전 시각화 이후에는 가상 스카우트가 진행되며, 영화 제작 팀은 촬영 장소 및 기타 제작 요구 사항에 대해 구축된 가상 환경을 검토합니다. 디지털 어셋 관리는 프로덕션의 요구에 맞게 환경이 재구성되고 수정되기 때문에 이 단계에서 중요한 도구가 됩니다. 강력한 디지털 어셋 관리를 통해 가상 세트를 실용적인 프로덕션 솔루션으로 사용할 수 있습니다. 실시간으로 렌더링을 즉시 쉽게 변경할 수 있으므로 제작진의 창의성이 극대화되고 바쁜 제작 일정에 시간을 절약할 수 있습니다.
다음은 테크비스입니다. 이 단계는 시스템을 테스트하고 씬을 차단하며 최종 제작을 위해 모든 것을 조정하는 기술 리허설입니다. 이 단계는 가상 프로덕션이 유지 관리해야 하는 복잡한 시스템에 매우 중요합니다.
제작 과정에서 가상 세트, 게임 엔진, 트래커, LED 월, 카메라 및 렌더팜 서비스가 최종 카메라 이미지에 기여합니다. 가상 프로덕션은 대부분의 프로덕션보다 훨씬 복잡하지만 한 가지 주요 이점을 제공합니다. 프로덕션 직원의 상당 부분이 세트를 원격으로 구축, 관리 및 수정할 수 있습니다. 클라우드 렌더팜과 같은 도구와 Omniverse와 같은 실시간 협업 플랫폼은 프로덕션 중 현장에 있을 필요야 하는 기술 인력이 거의 필요 없으므로 프로덕션 비용이 크게 절감됩니다.
아시다시피 가상 프로덕션은 언리얼 엔진 5 및 유니티와 같은 게임 엔진을 사용하는 실시간 렌더링에 크게 의존합니다. 실시간 렌더링은 그린스크린 기술과 기타 기존 VFX 방식을 능가하는 대규모 가상 프로덕션을 가능하게 합니다. 그러나 실시간 렌더링의 증가로 렌더팜이 프로덕션에 사용되는 방식에 큰 변화가 있었습니다. 수십 개의 1k, 2k 또는 4k 패널로 구성된 거대한 3D 씬을 실시간으로 렌더링하는 것은 쉬운 일이 아닙니다. 렌더 엔진과 렌더팜 기술은 그 어느 때보다 최적화되어 더 빠른 처리 시간에 대한 증가하는 요구를 지원하고 있습니다.
스튜디오는 가상 프로덕션의 렌더링 문제를 해결하기 위해 두 가지 다른 방법을 사용했습니다. 첫 번째는 현장 렌더 노드를 사용하여 대기 시간이 짧은 렌더를 프로덕션 디스플레이 및 LED 월에 직접 제공하는 것입니다. 이 방법은 대기 시간이 중요한 대규모 프로덕션이나 액션이 많은 씬에서 선호되는 방법입니다. 그러나 추가적인 현장 요구로 인해 다른 방법보다 비용이 더 많이 들 수 있습니다.
다른 방법은 온라인 렌더팜과 같은 오프사이트 렌더링 서비스를 사용하여 기가비트 또는 10 기가비트 이더넷 연결을 통해 세트로 다시 스트리밍 되는 이미지를 생성하는 것입니다. 이와 같은 클라우드 솔루션은 인터넷 속도와 파일 인코딩 프로세스가 따라잡고 있기 때문에 여전히 최첨단에 있습니다. 그러나 요구사항이 적은 소규모 프로덕션에서는 가상 프로덕션을 가능케하는 비용 효율적인 방법으로 원격 렌더링을 사용하기 시작했습니다. 기술이 발전함에 따라 이 방법은 스튜디오에서 실행 가능한 방법으로 더 많은 관심을 끌 것입니다.
많은 스튜디오가 비용 효율적인 방법 때문에 가상 프로덕션 워크플로우로 전환했습니다. 기술 비용은 비싸지만, 실제 작업 세트를 구축하거나 스튜디오 밖에서 프로덕션을 원격 위치로 이동하는 것보다 여전히 저렴합니다. 따라서 렌더링 및 세트 개발 비용이 감소함에 따라 영화 및 TV 산업에서 가상 프로덕션이 어떻게 새로운 표준이 될 수 있는지 쉽게 알 수 있습니다.
가상 프로덕션 방식은 빠른 속도로 발전하고 있습니다. 앞으로 몇 년 동안 프로덕션 과정의 모든 부분에서 큰 개선이 있을 것으로 예상됩니다. 모션 트래킹과 결합된 AI 도구는 업계를 재편하고 창의적인 경계를 재정의할 수 있습니다.
클라우드 렌더팜 도구도 변경되도록 설정됩니다. 가상 프로덕션 요구가 증가함에 따라 렌더팜은 세트에서 사용할 수 있을 정도로 충분히 짧은 렌더 대기 시간을 가진 유연한 실시간 렌더링 노드에 맞게 제품을 조정해야 합니다. 렌더 대기 시간은 많은 가상 프로덕션 시나리오에 큰 장애물이며 모든 시나리오에서 해결하려면 충분한 작업이 필요할 것입니다.
비용은 또한 업계 전반에 걸쳐 가상 프로덕션이 구현되는 방법에 대한 주요 요인입니다. 그린스크린과 같은 기존의 VFX 기술은 가상 프로덕션 기술보다 소규모 스튜디오에서 훨씬 더 쉽게 접근할 수 있습니다. LED 월, 모션 트래커 및 렌더 서버는 비용 부담이 될 수 있습니다. 따라서 비용이 절감되지 않는 한 많은 스튜디오가 가상 세트를 개발할 리소스를 보유하지 못할 수 있습니다. 그러나 온라인 렌더팜 및 장비 대여회사는 일부 프로덕션에 이러한 문제에 대한 해결책을 제공할 수 있습니다.
이러한 어려움에도 불구하고 가상 프로덕션은 기존 방식에 비해 효율성과 비용 효율성을 높여 VFX 및 렌더링 산업을 변화시키고 있습니다. 가상 프로덕션의 증가는 또한 아티스트와 영화 제작자들이 창의적이고 새로운 기술을 개발할 수 있는 새로운 기회를 제공하고 있습니다. 영화 감독, 세트 디자이너 및 아티스트들이 가상 기술을 사용하여 비전을 실행하는 방법을 배우는 작업을 하고 있기 때문에 영화 세트는 더 폭넓게 변화하고 있습니다.
가상 프로덕션이 보편화됨에 따라 고품질 실시간 렌더링에 대한 수요도 증가하고 있으며, 이러한 워크플로우를 지원하기 위한 렌더팜 및 렌더 기술에 대한 필요성이 증가하고 있습니다. 기술 인력과 렌더 제공업체는 맞춤형 렌더팜 서비스와 맞춤형 렌더 노드 개발을 통해 도구를 그 어느 때보다 유연하게 만들어 이러한 요구를 충족시키기 위해 진화하고 있습니다.