영상 제작에서 AI의 역할, 저희의 관점
하이브리드가 미래일까
모든 영상 제작자에게는 숏에 담고 싶었지만 담지 못한 것들의 목록이 있습니다. 로케이션, 세트, 의상, 날씨, 빛, 도와줄 사람 한 명. 영상 분야의 AI 이야기는 대부분 한 가지 질문에 쏠려 있습니다. AI가 촬영을 대체할 것인가. 저희는 질문이 잘못되었다고 생각합니다. 더 나은 질문은 그 목록이 어떻게 되느냐입니다.
영상 제작자는 AI 없이도 충분히 볼 만한 좋은 영상을 만들 수 있습니다. 하지만 머릿속에는 늘 화면에 담긴 것보다 더 많은 것이 있습니다. 시간, 예산, 체력이 더 있었다면 더 나아갔을 것입니다. 더 좋은 로케이션, 더 좋은 빛, 더 많은 출연자, 더 과감한 카메라 무빙. 작업 과정 어딘가에서 구상은 현실에 맞춰 줄어들었습니다.
저희가 말하는 하이브리드 워크플로는 이런 것입니다. 잘 알고 좋아하는 작업은 계속 직접 합니다. 프레임에 담지 못한 구상은 나중에 AI로 완성합니다. 실제 영상을 촬영하고, 최종 영상은 그 촬영본을 바탕으로 생성합니다. 저희는 이것이 영상에서 AI를 활용하는 가장 좋은 방법이라고 믿으며, 이 페이지의 모든 예시도 이렇게 만들었습니다.
계속 읽기 전에 위 예시를 먼저 보세요. 한쪽은 저희가 촬영한 영상이고, 다른 한쪽은 공개한 결과물입니다. 저희가 직접 정한 것은 양쪽에 모두 있습니다. 현장에서 갖출 수 없었던 것은 한쪽에만 있습니다. 이 글의 나머지 부분에서는 이 방식이 통하는 이유를 설명합니다.
작동 원리
모델은 비워 둔 부분을 채운다
저희 대부분은 AI 영상을 잘못된 방식으로 처음 접했습니다. AI 영상은 전부 아니면 전무인 기술로 소개되었습니다. 프롬프트 하나를 입력하면 영상 전체가 나온다는 식이었습니다. 솔직히 저희 같은 사람에게는 받아들이기 어려웠습니다. 이미 잘하고 즐겨 하는 일을 다른 무언가에 넘길 이유가 없었습니다.
그때는 몰랐지만, 저희가 본 것은 아주 넓은 범위의 한쪽 끝이었습니다. 그 끝에서는 프롬프트를 입력하면 영상 전체가 생성되고, 카메라가 전혀 없는 사람에게는 그것이 실제로 열린 문이 됩니다. 하지만 영상에서 AI는 켜고 끄는 스위치가 아닙니다. 하나의 범위이며, 원하는 만큼 적게도 많게도 쓸 수 있습니다. 그렇게 소개되지 않았기 때문에 대부분은 그 중간을 찾아보지 않았습니다.
바탕에 있는 원리는 간단합니다. 모델은 비워 둔 부분을 채웁니다. 문장 하나만 주면 카메라, 배우, 타이밍, 공간까지 모든 것을 채웁니다. 완성된 영상을 주면 채울 것이 남지 않습니다. 그 양 끝 사이는 모두 하이브리드이며, 어디에 설지는 숏마다 직접 정합니다.
촬영 현장에 가져오는 것 하나하나가 모델이 지어내야 할 것을 하나씩 줄입니다.
하이브리드 워크플로
이미 가진 영상에서 시작하기
장면은 실제로 촬영합니다. 실제 카메라, 실제 렌즈, 실제 움직임, 실제 타이밍이며, 렌즈 앞에 있는 것도 실제로 그 자리에 있습니다. 그다음 그 영상을 AI에 넘겨 숏을 완성하도록 요청합니다. 촬영한 움직임과 타이밍은 유지한 채 배경, 의상, 소품, 조명, 시대, 심지어 인물까지 바꿀 수 있습니다. 마지막 부분에 대해 한 가지 분명히 해 둡니다. 화면에 나오는 사람을 바꾸는 일은 출연자와 먼저 합의할 일이지, 출연자의 뜻과 상관없이 해도 되는 일이 아닙니다.
필름으로 작업해 본 적이 있다면 비유가 바로 와닿을 것입니다. 촬영은 네거티브 필름입니다. AI 작업은 암실입니다. 네거티브에는 그 순간의 진실이 모두 담겨 있습니다. 암실은 세상이 그것을 어떻게 보게 될지 정합니다. 암실을 사진의 작가라고 부르는 사람은 없습니다. 사진에서 중요한 부분은 이미 만들어져 있었기 때문입니다.
이 페이지의 예시는 당시 저희가 가진 여건으로 촬영했습니다. 스튜디오 하나, 저희 장비, 소규모 팀입니다. 촬영본은 저희가 구상한 영상과 달라 보였고, 원래 그럴 필요도 없었습니다. 저희는 카메라 무빙과 렌즈 앞에서 일어나는 일에 힘을 쏟았습니다. 완성본이 촬영본과 얼마나 깔끔하게 이어지는지 확인해 보세요.
한쪽에서 다른 쪽으로 그대로 이어지는 것은 모두 저희가 촬영 현장에서 내린 결정입니다.
효과가 있는 이유
원하는 것을 가장 정확하게 전하는 방법
창작의 주도권은 결국 한 가지로 정해집니다. 원하는 것을 모델에 얼마나 정확하게 전달할 수 있는가입니다. 그리고 가장 정확한 언어는 말이 아니라 영상입니다.
모델은 영상을 구조로 읽습니다. 움직임, 타이밍, 프레이밍, 장면의 공간 구성이 그것입니다. 이 요소는 모두 그대로 유지됩니다. 모델이 만드는 것은 겉모습입니다. 질감, 빛, 얼굴, 배경, 분위기입니다. 그래서 영상을 주면 숏을 설명하는 것이 아니라 보여 주는 셈이 됩니다. 카메라가 어디에 있는지, 그 앞에서 무슨 일이 언제 일어나는지 잘못 이해할 여지가 남지 않습니다.
카메라 없이 AI 영상을 시작한 사람에게도 중요한 이야기입니다. 글만으로 작업하는 쪽이 더 쉬워 보입니다. 하지만 원하는 것을 전부 글로 적어야 하고, 모델은 그 문장에서 추측해야 합니다. 생성하고, 확인하고, 고치고, 다시 생성합니다. AI 영상은 무료가 아니므로 시도할 때마다 비용이 듭니다.
카메라가 있으면, 어떤 카메라든 상황이 달라집니다. 레퍼런스를 촬영하는 일은 추가 작업이 아닙니다. 의도를 가장 직접적으로 표현하는 방법입니다. 현실에서 담아 올 수 있는 것이 많을수록 모델이 추측할 부분은 줄어듭니다. 대부분의 영상에서는 모든 것을 텍스트로 만드는 것보다 결과도 좋고 비용도 적게 듭니다. 카메라를 들 생각이 없었더라도 한번 고민해 볼 만합니다.
촬영 영상과 결과물이 일관된 것은 따로 공을 들인 덕분이 아닙니다. 같은 프레임을 그대로 넣었기 때문입니다.
사람이 만든 핵심
현실이 남는다는 선물
이 워크플로가 주는 것이 하나 더 있습니다. 예산표에는 아무도 적지 않는 것입니다.
아무것도 촬영하지 않은 영상을 볼 때 많은 사람이 느끼는 불편함에 대해 솔직하게 이야기해 보겠습니다. 시각적 오류 때문이 아닙니다. 그런 오류는 빠르게 사라지고 있습니다. 영상 뒤에 실제 순간이 없기 때문입니다. 누구도 어딘가에 서 있지 않았고, 누구도 누군가를 바라보지 않았고, 실제로 움직인 것은 아무것도 없습니다. 관객은 이름 붙이지 못하더라도 이것을 느낍니다. 걱정은 AI가 영상을 만든다는 것이 아닙니다. 영상이 실제로 일어난 어떤 일과도 연결되지 않게 된다는 것입니다.
촬영할 방법이 없다면 그 연결은 가질 수 없고, 작업은 다른 방식으로 사람들을 설득해야 합니다. 실제로 그렇게 해내는 작업도 많습니다. 하지만 카메라가 있다면 그 연결을 지킬 수 있고, 그 비용은 거의 들지 않습니다. 이 페이지의 모든 예시에서 보이는 움직임은 실제로 일어난 움직임이고, 타이밍도 실제 타이밍입니다.
현실을 얼마나 남길지는 스위치가 아니라 다이얼처럼 조절합니다. 한쪽 끝에서는 보이지 않는 합성 도구로 쓸 수 있습니다. 숏은 촬영한 그대로 거의 유지하고, VFX 스튜디오가 바꿨을 법한 것만 바꿉니다. 배경, 소품, 하늘 같은 것입니다. 다른 쪽 끝에서는 눈에 보이는 모든 것을 바꾸고 사람이 만든 핵심만 남길 수 있습니다. 움직임, 연기, 그리고 시간입니다. 숏마다 이 범위의 어디에 설지는 직접 결정합니다.
카메라 무빙
카메라가 가는 길도 이야기의 일부
카메라의 위치와 움직임은 장식이 아닙니다. 영상이 관객에게 말을 거는 주요 방법 중 하나입니다. 카메라 무빙은 배우처럼 사람들에게 작용합니다. 어디를, 어떤 순서로 봐야 하는지 알려 줍니다. 무엇이 중요하고 무엇이 배경일 뿐인지 알려 줍니다. 분위기를 만들고, 관객이 누구의 눈으로 보고 있는지 정합니다. 관객이 알아차리든 그렇지 않든 효과는 같습니다.
영상 제작의 대부분도 결국 여기에 있습니다. 로케이션, 세트, 의상, 조명을 걷어 내면 남는 것은 프레임을 다루는 기술입니다. 블로킹, 프레이밍, 카메라 무빙입니다. 각 프레임에 무엇을 담을지, 언제 움직일지, 다음에 어디로 갈지 정하는 일입니다. 이것이 영상을 연극이 아닌 영화로 만들며, 영상 제작자가 오랜 시간 배워 온 부분입니다.
그래서 제작의 일부를 AI에 맡기더라도 이 부분만큼은 직접 쥐고 있을 가치가 있습니다. 카메라 무빙도 생성할 수 있고, 꽤 그럴듯해 보이는 경우도 많습니다. 하지만 촬영 영상에 적용되는 논리가 여기에도 그대로 적용됩니다. 원하는 무빙을 가장 정확하게 구현하는 방법은 직접 해내는 것입니다. 직접 정한 타이밍, 멈춤, 회전으로 들어가는 속도. 실제 카메라로 만든 무빙에는 장비의 무게, 움직임을 시작한 손, 카메라가 지나간 공간이 담겨 있고, 그중 어느 것도 글로 설명할 필요가 없습니다. 그냥 거기에 있습니다.
저희의 입장도 솔직히 밝혀 두겠습니다. edelkrone은 하나의 믿음에서 시작했습니다. 프레임은 이야기의 일부이고, 카메라가 어디로 가는지가 관객이 느끼는 것을 결정한다는 믿음입니다. 저희가 만드는 모든 제품은 여기에서 나왔습니다. 그러니 저희가 이 주장에 이해관계가 있다는 것은 분명합니다. 그래도 이 주장을 하는 이유는 저희가 가장 깊이 믿는 것이기 때문이며, 이를 지키는 일은 저희의 일이자 즐거움입니다.
실전에 적용하기
영상을 만드는 사람에게 이것이 의미하는 것
이 페이지에서 하나만 기억한다면 이것입니다. 문제는 AI를 쓸지 말지가 아닙니다. AI에 무엇을 맡길지입니다. 촬영할 수 있고 촬영하고 싶은 것은 모두 촬영하세요. 연기, 프레임, 카메라 무빙, 그 밖에 여건이 되는 모든 것입니다. 그다음 손이 닿지 않았던 부분을 모델이 완성하게 하세요. 촬영 현장에 더 많이 가져올수록 모델이 추측할 부분은 줄고, 완성된 영상에서 직접 만든 부분은 늘어납니다.
이 이야기에는 더 큰 그림이 있고, 저희가 가장 기대하는 부분도 바로 이것입니다. 영화가 존재해 온 내내 화면에 닿은 것은 누군가의 머릿속에 있던 것을 줄인 버전이었고, 대부분은 무언가를 만들기 위한 대가로 이를 받아들였습니다. 그 한계가 사라지고 있으며, 가장 먼저 혜택을 보는 것은 지금까지 기회가 없던 사람들입니다. 저희는 곧 아주 다양한 생각을 들여다보게 될 것이고, 이는 이 페이지에 나온 어떤 도구보다 큰 변화입니다.
카메라는 여전히 중요합니다. 연기도 여전히 중요합니다. 감독도 여전히 중요합니다. 카메라로 무언가를 만드는 일을 사랑하는 사람에게는 더없이 반가운 소식입니다.
좋아하는 것은 지키고, 하지 못했던 것은 완성하세요.
