영상 제작은, 실사 영상과 배경을 합성하는 「매트」 라는 기술을 이용한 매트 페인팅부터 3DCG 배경의 합성으로 진화해 왔습니다만, AI가 업계를 바꾸는 새로운 스텝이 될 가능성이 높아지고 있습니다. 영화 배경 기술에 대한 진화의 역사와 AI가 어떻게 변화시킬 것인지에 대해, 온라인 미디어 Vox가 설명하고 있습니다.
The evolution of the movie backdrop - YouTube
매트 페인팅은 손으로 그린 그림을 광학 합성하여 실사와 배경을 결합하는 기술입니다. 영상에서는 1939년에 공개된 「오즈의 마법사」 를 예로 들어 실제의 세트가 아닌, 배경 일러스트와 조합하고 있는 모습을 나타내고 있습니다.
영상에서는 영화와 게임의 매트 페인터를 10년 이상 맡아, 3D 애셋 관리 툴 「Cargo」 등으로 알려진 KitBash3D의 공동 설립자인 맥스 버먼 씨가 영화의 배경 미술에 관한 변천사를 해설하고 있습니다.
버먼 씨에 의하면, 초기의 손으로 그린 스타일에서 디지털로의 이행은 몇 단계의 스텝을 밟고 있어, 최초로 큰 영향을 준 것이, 「Adobe Photoshop」의 존재라고 합니다.
Photoshop은 레이어를 관리할 수 있다는 점이 획기적이며 배경을 1장 그릴 경우에도 합성하는 실사의 앞이 되는 부분과 안쪽에 배치되는 부분을 입체적으로 구성할 수 있게 되었습니다. 자유로운 컬러, 편리한 브러시를 활용한 후, 배경과 전경을 따로 편집할 수 있기 때문에, 손으로 그린 배경에 혁신적인 변화를 가져왔습니다.
다음에 유행한 것이, 복수의 사진을 조합 가공해, 1장의 일러스트를 작성하는 「포토 배싱」 이라는 기법입니다. 배경을 수작업으로 그리는 대신 실제 사진을 결합하여 만들면 더 쉽게 사실적인 배경을 만들 수 있습니다.
배경을 그리지 않고 사진을 조합하여 가공하는 '포토 배싱'을 매트 페인터들은 어떻게 받아들였는지, Vox 씨가 버먼 씨에게 묻자, 버먼은 "일부 매트 페인터는 포토 배싱을 의문시했습니다. 기술이 변화하는 시대에는 그것이 일반적으로 받아들여지게 될 때까지 부정행위로 간주되곤 했습니다."라고 대답했습니다.
그다음 배경 기술에 관한 단계는 2D 레이어를 3D 공간에 배치하는 기법으로, 영화에서는 이것을 "2.5D"라고 부릅니다.
버먼 씨도 참여한 '아이언맨 3'에서는 3D 공간에 구름과 하늘, 해안선을 그려 입체적인 배경을 만들어 냈습니다.
3D 공간에 배경을 그리는 것으로, 거기에 실사를 합성하여 입체적인 움직임을 연출할 수 있었습니다.
「아이언맨 3」의 공개는 2013년으로, 이 무렵에는 고품질의 3D가 침투하고 있었습니다만, 일부의 배경에는 2.5D가 이용되고 있습니다. 버먼에 따르면, 3D 배경 모델을 사용하여 움직임을 시뮬레이션하는 것보다 3D 공간에 손으로 그리는 것이 훨씬 저렴하고 간단하기 때문에, 단순한 장면, 짧은 컷, 또는 3D로 만드는 것이 너무 어려운 원경 등은 매트 페인터의 수작업 배경을 입체적으로 배치하여 2.5D 합성을 이용하는 것이 더 뛰어났다고 합니다.
그러나 3D 기술이 발전하고 3D 공간에 손으로 그리는 것만큼이나 쉽고 짧은 시간에 같은 배경을 만들어 낼 수 있게 되었습니다. KitBash3D가 제공하는 3D 애셋은 드래그 앤 드롭만으로 기본 배경이나 아이템을 준비할 수 있기 때문에, 이전에는 작성이 귀찮았던 대량의 빌딩군 등도 사진을 잘라 붙이는 포토 배싱보다 간단 마무리할 수 있습니다.
버먼은 배경 기술의 변화에 대해 "2D에서 3D로의 전환에 따라 렌더링과 컴퓨팅도 그 어느 때보다 저렴하고 사용하기 쉬워졌습니다. 그래서 매트 페인터를 비롯한 2D 아티스트의 필요성은 점점 사라지고 있습니다."라고 코멘트. 여기서 다음 스텝이 될 가능성이 있는 것이 「생성 AI」 입니다.
생성 AI는 생각한 것을 그대로 그리는 것은 어렵고, 대부분의 경우는 대량의 프롬프트나 수천 장에 이르는 시행착오와 세세한 재검토를 통한 반복적인 프로세스가 필요합니다.
그래도 손으로 그리는 것보다 압도적으로 빠르고 간편하게 고품질의 이미지를 출력할 수 있습니다만, 작품으로서 생성 AI를 이용하는 것은 어디까지나 개인의 크리에이터에 그치고 있어, 할리우드에서는 생성 AI를 제작에 이용하고 있는 예는 없습니다. 그 이유로 버먼 씨는 "아직 퀄리티가 완전하지 않다는 것", "트레이닝 데이터의 소유자가 불투명하고 제작한 이미지의 소유자가 불분명하다는 합법성 문제"를 꼽았습니다. 그러나 기존 기술의 혁신과 마찬가지로 생성 AI도 궁극적으로 새로운 기술로 확립되어 다음 영화 기술의 단계가 될 것이라고 코멘트하고 있습니다.
'AI · 인공지능 > AI 뉴스' 카테고리의 다른 글
무료로 상용 이용도 가능한 SQL, 코딩 생성 등에 최적화된 LLM 「Snowflake Arctic」 (93) | 2024.04.29 |
---|---|
Apple이 iPhone 및 iPad에서 로컬로 작동하는 오픈소스 언어모델 「OpenELM」 출시 (93) | 2024.04.26 |
영상의 디테일을 살리면서 업스케일하는 AI 「VideoGigaGAN」 을 Adobe의 연구팀이 개발 (86) | 2024.04.26 |
AI는 실제 인간의 얼굴보다 리얼해 보이는 얼굴을 만든다는 '하이퍼 리얼리즘' 의 문제점이란? (81) | 2024.04.25 |
Microsoft가 비용 효율적인 작은 언어 모델 「Phi-3」 을 출시, 오픈 모델에서 상용 이용 가능 (82) | 2024.04.25 |
Google이 개발한 이미지 분류 태스크가 가능한 기계 학습 모델 「Vision Transformers」 의 구조란? (81) | 2024.04.24 |
상금 총액이 2억 7천만 원 이상인 AI 미인 콘테스트 「Miss AI」 를 개최 (79) | 2024.04.24 |
세계 2위 고용자인 아마존이 75만대 로봇으로 10만명의 인간을 대체, 'AI에 의한 노동 변화의 축약도'라는 지적 (88) | 2024.04.24 |