VFX 파이프라인이란 무엇인가요?

VFX 파이프라인이란 무엇인가요?

VFX 파이프라인이란 영화, TV, 디지털 미디어 프로젝트를 위한 시각 효과 워크플로의 단계를 세분화한 것을 말합니다. 이는 전체 VFX 프로세스를 체계적으로 관리하여 모든 관련자들이 자신의 역할과 그것이 프로덕션 타임라인에 어떻게 들어맞는지 알 수 있게 합니다. 스토리보드와 레퍼런스 이미지부터 모델링, 로토스코핑, 구도, 조명에 이르기까지 다양한 작업을 포함합니다.

소규모 프로덕션에서는 한 명의 VFX 아티스트가 전체 워크플로를 처리할 수도 있지만, 대부분의 프로덕션에서는 전문 아티스트들로 구성된 팀을 구성합니다.

파이프라인은 일반적으로 완전히 선형적이지 않은 프로세스에 일정 수준의 안정성을 제공합니다. 프리 프로덕션, 프로덕션, 포스트 프로덕션 단계에 VFX 프로세스의 구성원이 참여하는 경우가 많습니다.

최고의 작업을 수행하려면(그리고 여러 단계를 다시 수행해야 하는 일이 없도록 하려면) 아티스트들은 VFX 워크플로 파이프라인의 각 단계를 잘 이해하고 숙지해야 합니다.

💡 더보기: Stimulated Inc.가 어떻게 무대용 6K 몰입형 VFX 영상을 이동한 방법

VFX 파이프라인 다이어그램

⬇️ 다운로드: PDF 버전 VFX 파이프라인 다이어그램

VFX 워크플로

"편집에서 VFX가 무엇을 의미하나요?"라는 질문을 할 때, 실제 VFX 파이프라인 워크플로가 모두 동일하지는 않다는 점을 이해하는 것이 중요합니다. 아래 VFX 로드맵에서 이러한 단계를 프리 프로덕션, 프로덕션, 포스트 프로덕션 단계로 나누었지만, 아래의 많은 단계가 프로젝트 전체에서 병렬적으로 발생하는 경우가 많습니다.

프리 프로덕션

프리 프로덕션에서 시각 효과의 워크플로는 대부분 계획과 관련되어 있어 기술 요구 사항이나 잠재적인 실행 문제에 대비하는 동시에 제작진이 정보를 얻는 단계입니다. 기획 단계에서 VFX 아티스트는 VFX 샷 목록 템플릿 을 다운로드하여 사용하면 시각 효과가 필요한 샷과 장면을 계획할 때 시간을 절약할 수 있습니다.

1. 연구 개발(R&D)

비디오 프로젝트의 R&D에는 주로 기술 감독(TD)이 참여하며, 이들은 VFX 감독과 협력하여 기술적인 접근 방식을 계획하고 어떤 샷과 효과가 기술적으로 실현 가능한지 결정합니다. VFX가 많이 사용되는 프로젝트에는 외부 과학자, 엔지니어 또는 수학자가 추가 지침을 위해 참여할 수도 있습니다.

TD는 VFX 파이프라인 전체에서 사용되는 모든 소프트웨어와 파일이 호환되는지 확인해야 하며, 때로는 커스텀 소프트웨어와 플러그인을 만들어 VFX 파이프라인의 효율성을 개선하기도 합니다.

대부분의 R&D 단계는 소재를 수정하고 컨셉을 발전시키면서 프로젝트 기간 동안 계속해서 진행됩니다.

2. 스토리보드 및 애니매틱스

스토리보드 는 VFX 아티스트 팀이 스크립트 내의 모든 액션을 시각적으로 표현하는 곳입니다. 캐릭터 모션과 스토리 설정을 분석하고 샷별로 원하는 프레임을 설명하기 위한 기본 드로잉을 만듭니다.

하지만 대부분의 기획 요소와 마찬가지로 스토리보드는 최종적인 것이 아닙니다. 스토리보딩은 편집팀이 원하는 바를 VFX 아티스트에게 확실하게 전달하기 위한 기초 작업입니다.

3. 사전 시각화

프리비즈라고도 하는 사전 시각화는 스토리보드를 사용하여 로우폴리 3D 모델, 와이어프레임 및 장면 표현을 만들어 향후 시각 효과를 위한 스탠드인 역할을 합니다. 프리비즈는 일반적으로 크리에이티브 팀의 다른 팀원과 함께 카메라 앵글을 결정하고, 촬영 위치를 결정하고, 복잡한 장면을 계획하기 위해 진행됩니다.

프리 프로덕션 단계의 다른 VFX 단계에는 콘셉트 및 아트 디자인이 포함될 수 있으며, 이 단계에서는 예술적 콘셉트를 더욱 구체화하고 캐릭터, 설정, 소품을 정의하는 전체 이미지를 제작합니다.

레이아웃(프로덕션 디자인이라고도 함)은 이름에서 알 수 있듯이 최종 세트의 모양을 정의하고 실제 또는 디지털 세트 제작자에게 지침을 제공하는 역할을 합니다.

프로덕션

이 시기는 대부분의 촬영이 이루어지는 시기이기 때문에 VFX 워크플로에 탄력이 붙기 시작합니다. 원시 비디오 파일 을 생성하고 VFX 데일리를 제출합니다. 하지만 프로덕션 프로세스와 함께 많은 VFX 작업을 수행할 수 있습니다.

4. 3D 모델링

3D 모델링은 세 가지 단계 모두에서 이루어지지만, 프로덕션 단계에서는 아티스트가 스토리보드 아트 또는 로우폴리 3D 모델을 실제와 같은 표현으로 변환합니다. 대부분의 3D 모델링 은 세트에 가져다 놓기에는 실용적이지 않거나 비용 효율적이지 않은 차량이나 건물과 같은 자산들을 제작하는데 주로 사용되지만, 3D 모델은 캐릭터(비인간을 묘사하거나 디지털 더블로 등장하기 위한) 및 기타 소품을 만드는 데도 사용됩니다.

우주선이나 배트모빌과 같은 비현실적인 사물의 3D 모델이 시각적으로 가장 흥미롭지만, 3D 모델러는 조명, 그림자, 질감 개선이 필요한 세트에서 촬영한 실제 물체를 대체하거나 보완하기도 합니다.

3D 모델링은 가장 시간이 많이 걸리고 노동 집약적입니다. 요소에 따라 달라지며, 제작 과정에서 촬영한 레퍼런스 사진에 의존하는 경우가 많습니다. 움직이는 3D 모델은 반드시 완전하고 움직일 수 있어야 하나, 이에 대해서는 나중에 자세히 설명합니다.

5. 매트 페인팅

매트 페인팅은 현존하는 가장 오래된 VFX 기법 중 하나로, 존재하지 않는 시각적 배경을 만드는 것입니다. 요즘에는 이러한 배경을 LED 패널과 게임 엔진을 사용하여 디지털 방식으로 제작하는 경우가 많으며, 가상 프로덕션을 전체 3D 세트로 제작하거나, 녹색 또는 파란색 화면을 사용하여 크로마키를 입력하는 경우도 많습니다.

몇 년 전만 해도 매트 페인팅은 사진과 유리 패널에 페인트를 칠하는 방식으로만 이루어졌습니다(빛을 반사하지 않기 때문에 매트 페인트를 사용했습니다).

하지만 무광택 페인팅은 여전히 해리 포터, 왕좌의 게임, 위쳐 등과 같은 많은 프로덕션에서 사용됩니다. 비용을 절약할 수 있는게 이유이기도 합니다. 그렇지만 작업의 범위는 매우 제한적입니다: 매트 페인팅은 조명, 카메라 각도 또는 기타 요소를 변경할 수 없기 때문입니다.

6. 레퍼런스 촬영

전체 프로덕션 단계에서 VFX 팀원들은 세트에 상주하며 배우, 장면, 소품 및 기타 중요한 요소의 참고 사진을 촬영합니다. 그런 다음 이 사진을 사용하여 3D 모델을 조립하고, 애니메이션을 적용하고, 텍스처를 추가합니다.

💡 더보기: 포스트 프로덕션 팀을 위한 대용량 파일 전송

포스트 프로덕션

포스트 프로덕션은 비디오 프로덕션의 모든 요소, 즉 VFX, 영상, 음악, 사운드를 완성품에 통합하는 작업입니다. 앞서 살펴본 바와 같이 VFX 팀은 프로덕션 주기 내내 바쁘지만, VFX 포스트 프로덕션 워크플로는 전체 프로세스 중 가장 바쁜 단계입니다.

7. 리깅 및 애니메이션

인형극가가 마리오네트의 줄을 당길 때 어떤 일이 일어나는지 상상해 보면 리깅과 애니메이션이 디지털 수준에서 어떤 것인지 이미 잘 알 수 있을 것입니다. 리깅과 애니메이션은 애니메이터가 이러한 오브젝트를 조작하는 데 사용할 수 있는 컨트롤 시스템을 구축하여 3D 모델에 생명을 불어넣습니다.

리깅 팀은 레퍼런스 사진에 의존하는 경우가 많지만, 모션 캡처 카메라나 슈트를 사용하여 움직임 데이터를 캡처하여 리깅 및 애니메이션 프로세스를 지원하는 경우도 많습니다.

리깅 팀은 종종 피부 가중치를 계산하고 3D 캐릭터 내에 디지털 골격과 근육을 추가하여 자연스러운 움직임을 재현하는 등 매우 세분화된 작업을 수행하기도 합니다.

8. FX 및 시뮬레이션

FX 아티스트는 물리 법칙에 따라 움직이고 반응하는 컨셉과 장면을 제작하는 일을 담당합니다. 예를 들면, 바다나 우주에서 격렬한 전투가 벌어지는 롱숏, 화염이 폭발하는 장면 등 실제로는 우주에 존재할 수 없는 장면들, 어쨌든 멋지게는 보입니다. FX 아티스트는 종종 불, 연기, 액체, 심지어 입자와 같은 요소들을 가지고 작업합니다.

FX 아티스트는 애니메이터와 협력하여 이러한 시뮬레이션 요소가 눈에 띄지 않으면서도 최대한 자연스러운 모양과 느낌을 살리기 위해 노력합니다.

9. 모션 트래킹/매치 무빙

모션 트래킹(매치 무빙이라고도 함)을 사용하면 VFX 아티스트(여기서는 매치 무브 아티스트라고 함)가 움직이는 장면과 실사 영상에 전체가 어색해 보이지 않도록 효과를 삽입할 수 있습니다.

VFX 요소들을 정적인 샷에 삽입하는 것은 비교적 쉽지만, 이들을 카메라 움직임에 맞춰 추가하는 것은 더 많은 변수를 고려해야 합니다. 그렇기 때문에 모션 트래킹은 모션 트래킹 소프트웨어의 가상 카메라를 사용하여 실제 카메라 움직임을 복제하는 것을 포함하여 샷 내에서 물체의 위치, 방향, 스케일, 이동 방식을 고려합니다.

10. 텍스처링

텍스처링 프로세스는 거의 단어가 뜻하는 그대로를 말합니다: 3D 모델의 표면에 텍스처를 추가하는 것입니다. 텍스처에는 표면 색상부터 파충류의 비늘 피부, 물에 비친 반사, 금속 광택, 자동차 도어의 스크래치 등과 같은 모든 것들이 포함될 수 있습니다. 이를 통해 모델이 최대한 사실적으로 보이도록 할 수 있습니다.

11. 로토스코핑과 마스킹

로토스코핑은 아티스트가 원본 영상의 프레임에서 오브젝트나 캐릭터를 드로잉하고 잘라내어 다른 배경이나 맥락에다가 잘라낸 이미지를 사용하는 것입니다.

로토스코핑은 일반적으로 비교적 힘들고 수작업이 많은 과정이었으며, 특히 컴퓨터화된 VFX가 등장하기 전에는 더욱 그랬습니다.

"수동 로토스코핑의 전설적인 사례 중 하나는 알프레드 히치콕의 영화 '더 버즈'에서 제작진이 자연에서 새를 촬영하고 각 장면에 로토스코핑을 적용하는 과정으로 만들어졌습니다. 수백 마리의 새를 한 마리씩 로토스코핑하여 한 장면에 넣는 데에만 3개월이 걸렸습니다."

오늘날에도 VFX 아티스트들은 여전히 수동 로토스코핑을 수행하지만, Runway와 같은 새로운 도구를 사용하는 머신 러닝은 프로세스를 획기적으로 가속화하는 데 도움이 되고 있습니다.

앞서 언급했듯이 크로마 키잉을 통해 전체 로토스코핑 및 마스킹 프로세스를 피할 수 있는데, 크로마 키잉은 그린 스크린과 같이 쉽게 제거할 수 있는 배경에 전경 피사체를 촬영하는 프로세스입니다. 하지만 완벽한 컷아웃을 만들기 위해 로토스코핑이 필요한 경우도 많습니다.

12. 조명과 렌더링

조명은 일반적으로 텍스처 아티스트가 작업을 완료한 후에 처리합니다. 이는 이펙트 또는 컴퓨터 생성 이미지(CGI)가 완성되기 전에 마지막으로 적용되는 요소입니다. 텍스처링과 같이 정적 또는 실사 컴퓨터 생성 장면이나 캐릭터에 맞게 가상 조명과 그림자를 추가하고 조정하면 색상 및 강도와 같은 원본 샷의 측면을 향상시키면서 더욱 사실적으로 보이도록 합니다.

하지만 실제 조명과 마찬가지로 가상 조명도 장면 내에 전략적으로 배치해야 합니다. 조명 아티스트들은 셰이더 설정 및 라이팅 맵 등의 툴들을 사용하여 원본 영상의 각도와 그림자에 맞게 스폿, 영역 및 방향 조명을 배치하여 이를 달성할 수 있습니다.

조명이 적용되면 전체 씬이 합성으로 넘어갑니다.

13. 합성

스티칭이라고도 하는 합성 작업은 포스트 프로덕션 VFX 워크플로의 마지막 단계입니다. 이는 VFX 로드맵의 마지막 단계이면서 가장 중요하기도 한데, 왜냐하면 모든 다양한 VFX 요소를 실제 영상과 통합하여 최종 샷 또는 장면을 만들기 때문입니다.

잘못된 합성 작업은 지금까지의 훌륭한 VFX 작업을 모두 망칠 수 있으므로 제대로 하는 것이 중요합니다.

이 프로세스에는 합성자가 실사 영상, 렌더링, VFX 플레이트, 매트 페인팅 등 모든 콘텐츠를 수집하고 포스트 프로덕션 파이프라인의 다음 단계(일반적으로 컬러링)를 준비하기 위해 함께 레이어링하는 작업이 포함됩니다. 몇 가지 요소만 결합하면 되는 샷도 있지만, 조명, 반사, 그림자, 애트머스피어 등을 마무리하면서 수십 가지 요소를 레이어링하여 매끄러운 룩앤필을 만들어야 하는 샷도 있습니다.

💡 더보기: MASV를 사용하여 VFX용 4K 360°를 Driving Plates에 제공한 사례

VFX 툴 및 소프트웨어

현대 비디오 프로덕션 업계에서 VFX의 중요성은 점점 커지고 있으며, 실제로 아마존의 반지의 힘 첫 번째 시즌에서 20개의 스튜디오에서 1,500명이상의 VFX 아티스트들이 동원되었습니다.

그렇다면 업계를 선도하는 VFX 아티스트들은 어떤 소프트웨어와 VFX 시스템을 사용해 마법을 만들어낼까요?

다음은 몇 가지 예입니다.

After Effects

After Effects 는 최고는 아니더라도 최고의 VFX 소프트웨어 중 하나로 꼽힙니다. 일부 이유로는 동영상 편집 소프트웨어 Adobe Premiere Pro 및 협업 도구 Frame.io과 같은 도구들과 원활하게 연동되기 때문입니다. 하지만, 바로 기능 자체가 정말 훌륭하기 때문이기도 합니다.

또한 After Effects에는 프로젝트 확장을 위해 다운로드할 수 있는 타사의 맞춤형 VFX 템플릿들이 많습니다.

Fusion

Blackmagic Design의 Fusion 은 상당히 좋은 툴인데 몰입형 360도 또는 VR 비디오의 제작; 스테레오스코픽 3D 효과, 3D 모델과 실제 실사 영상을 합성할 수 있습니다. 이는 비디오 편집 소프트웨어인 DaVinci Resolve의 일부로 제공되며, 영화 가디언즈 오브 갤럭시 그리고 헝거 게임 에서 VFX 장면을 제작하는 데 사용되었음은 물론, 헤일로 5와 같은 비디오 게임의 시네마틱까지 사용되었습니다.

Nuke

Foundry의 Nuke 는 월트 디즈니 애니메이션 스튜디오, 블리자드 엔터테인먼트, 소니 픽처스 애니메이션, 드림웍스 애니메이션과 같은 업계의 주요 업체들이 사용하는 VFX 및 영화 편집 소프트웨어로, 더 크라운 부터 보드워크 엠파이어등과 같은 프로덕션에 사용되었습니다. 원활한 리뷰를 가능하게 하고 동적 편집 타임라인에 VFX 요소를 추가할 수 있는 기능을 제공합니다.

후디니

SideFX의 후디니 는 R&D 프로세스 및 기타 단계에서 맞춤형 효과를 구현하는 데 사용됩니다. 애니메이션 디자인, 이펙트 렌더링, 캐릭터 모델링을 통합하고 유체, 군중, 곡물, 파괴 및 파이로 FX를 포함한 기타 요소에 대한 다양한 VFX 시뮬레이션 모듈을 제공합니다. Houdini는 Maya와 같은 다른 소프트웨어와도 통합됩니다.

Maya

Autodesk의 Maya 는 3D 애니메이션과 모델링, 시뮬레이션, 초현실적인 렌더링을 제공합니다. 조명 아티스트는 가상 조명을 생성하고 배치하는 데, 3D 모델러는 애니메이션 캐릭터나 기타 오브젝트를 생성하고 리깅하는 데 주로 사용합니다. 리뷰어들이 사용하기에 어렵다고 알려져 있지만, 소프트웨어 자체는 다이내믹 시뮬레이션, 텍스처링, 애니메이션 등 다양한 VFX 파이프라인 요소들을 다룰 수 있습니다.

HitFilm Pro

HitFilm Pro (와 무료 소비자 시장 버전인 HitFilm Express)는 올인원 VFX 및 동영상 편집 도구로, VFX 아티스트가 효과를 레이어링하는 대신 NLE 타임라인에 적용할 수 있습니다. 이 앱에는 마스킹, 2D 및 3D 모션 트래킹, 그린 스크린 키잉, 파티클 시뮬레이터와 같은 기능을 갖춘 약 1,000개의 VFX 템플릿과 프리셋이 포함되어 있습니다.

Blender

Blender Foundation의 Blender 는 수천 달러에 달하는 다른 대안(위에서 언급한 여러 가지)을 사용하지 않고도 VFX를 배우고자 하는 초보자에게 적합한 강력한 오픈 소스 프리웨어입니다. 3D 애니메이션 툴에는 수동 또는 자동 트래킹, 카메라 재구성, 실시간 미리보기를 제공하는 카메라 및 오브젝트 트래커가 포함되어 있습니다.

고품질 비주얼을 위한 팁과 모범 사례

• 다른 VFX 아티스트뿐만 아니라 비디오 편집자, 컬러리스트, 현장 프로덕션 팀, 감독 등 다양한 크리에이티브 팀과 지속적이고 지속적인 커뮤니케이션을 진행합니다.
• 수개월에 걸친 프로젝트에 착수하기 전에 전체 VFX 워크플로우의 다양한 시스템(툴, 프로세스, 소프트웨어 등)을 안팎으로 파악하세요.
• 버추얼 프로덕션에서 VFX 아티스트는 워크스테이션에서는 잘 보이는 것이 거대한 LED 벽면에서는 그렇지 않을 수 있다는 점을 인지해야 합니다. 언리얼 엔진 에서는 가상 스테이지에 권장되는 구성을 확인할 수 있는 인카메라 VFX 프로덕션 테스트를 권장합니다.
• 실제 오브젝트(화재, 움푹 패인 곳, 타이어 자국 등)를 VFX 렌더링으로 대체하면 실제 세계에서 동일한 것을 복제하거나 특정 장면을 완벽하게 구현하기 위해 다시 촬영하는 데 드는 비용을 크게 절약할 수 있습니다.
• 넷플릭스는 재택근무하는 VFX 아티스트에게 1920×1200의 기본 해상도를 지원하는 단일 모니터, 전용 대역폭과 저지연 연결을 갖춘 HP RGS 또는 Teradici와 같은 가상 데스크톱 솔루션을 사용할 것을 권장합니다.
• 항상 적절한 파일 이름 지정 규칙 준수.

추가 학습 및 개발을 위한 리소스

VFX 파이프라인과 모범 사례에 대한 더 많은 인사이트를 발견하는 데 도움이 되는 몇 가지 VFX 가이드가 더 있습니다:

• 넷플릭스 VFX 모범 사례
• 언리얼 엔진 인카메라 VFX 베스트 프랙티스
• 스토리텔링에 영감을 주는 무료 또는 저렴한 VFX 툴을 활용하는 방법
• 합성이란 무엇인가요? VFX 합성 기법 설명
• VFX: 그린 스크린을 전문가처럼 사용하는 4가지 간단한 단계
• 프로덕션 디자인에 시각 효과를 어떻게 통합하나요?