AI 비디오 생성, Runway Gen-4 마법사 이야기로 파헤쳐보기
저는 AI 비디오 생성 도구를 가지고 노는 것을 좋아합니다. 엉망일 때도 재미있고, 제대로 작동할 때는 놀랍습니다. 그래서 Runway의 새로운 Gen-4 모델을 사용해보고 싶었습니다.
Gen-4, 품질과 일관성을 약속하다
Runway는 Gen-4 (그리고 더 작고 빠른 형제 모델인 Gen-4 Turbo)가 이전 Gen-3 모델보다 품질과 일관성 면에서 뛰어날 것이라고 자랑했습니다. Gen-4는 캐릭터가 장면 사이에서 동일하게 보일 수 있어야 한다는 아이디어를 실현하고, 더욱 유연한 움직임과 향상된 환경 물리학을 제공한다고 합니다. 또한 지시를 따르는 데 매우 능숙하다고 합니다.
OpenAI Sora와 닮은 듯 다른 매력
시각적 참조 자료와 설명 텍스트를 제공하면 상상했던 것과 비슷한 비디오를 생성합니다. 사실, OpenAI가 자체 AI 비디오 제작 도구인 Sora를 홍보하는 방식과 매우 비슷하게 들렸습니다. Sora가 만드는 비디오는 보통 훌륭하지만, 때로는 품질이 불안정합니다. 한 장면은 완벽할 수 있지만, 다음 장면에서는 캐릭터가 유령처럼 떠다니거나 어디로도 이어지지 않는 문이 나타날 수 있습니다.
마법 영화, Runway Gen-4의 도전
Runway Gen-4는 비디오 마법을 표방했기 때문에, 마법사 이야기를 담은 비디오를 만들 수 있는지 확인해보기로 했습니다. 떠돌이 마법사가 등장하는 작은 판타지 3부작에 대한 몇 가지 아이디어를 구상했습니다. 마법사가 엘프 공주를 만나고, 마법 포털을 통해 그녀를 쫓아갑니다. 그러다가 다시 만났을 때, 그녀는 마법 동물로 변장해 있고, 마법사가 그녀를 다시 공주로 되돌립니다.
최소한의 입력으로 얼마나 가능할까?
목표는 블록버스터를 만드는 것이 아니었습니다. 그저 Gen-4가 최소한의 입력으로 얼마나 멀리 뻗어 나갈 수 있는지 확인하고 싶었습니다. 실제 마법사 사진이 없어서, 새로 업그레이드된 ChatGPT 이미지 생성기를 활용하여 설득력 있는 스틸 이미지를 만들었습니다. Sora가 할리우드를 폭파시키지는 못하겠지만, ChatGPT가 생성한 사진의 품질을 부인할 수는 없습니다.
일관성을 위한 노력과 결과
첫 번째 비디오를 만든 다음, 캐릭터가 비디오에서 일관성을 유지하도록 Runway의 "시드 고정" 옵션을 사용했습니다. 그런 다음 세 개의 비디오를 하나의 영화로 편집했습니다. 완벽하지는 않습니다. 이상한 물체 움직임이 있고, 일관된 모습도 완벽하지 않습니다. 일부 배경 요소가 이상하게 반짝거렸고, 아직 이러한 클립을 극장 스크린에 올리지는 않을 것입니다.
놀라운 캐릭터 표현, 아쉬운 배경
그러나 캐릭터의 실제 움직임, 표정, 감정은 놀라울 정도로 현실적으로 느껴졌습니다. 그리고 반복 옵션이 마음에 들었습니다. 너무 많은 수동 옵션으로 압도하지 않으면서도, 내가 적극적으로 창작에 참여하고 있다는 느낌을 줄 만큼 충분한 제어 기능을 제공했습니다. 단순히 버튼을 누르고 일관성을 기도하는 것이 아니었습니다.
Sora와 비교, 현재 그리고 미래
지금 당장은 Sora와 OpenAI의 많은 전문 영화 제작 파트너를 따라잡을 수 있을까요? 아니요, 지금은 절대 아닙니다. 하지만 만약 제가 아마추어 영화 제작자라면, 제 아이디어가 어떻게 보일지 비교적 저렴하게 확인하기 위해 적어도 실험해 볼 것입니다. 실제로 영화를 만들고 비전을 강력하게 전달하는 데 필요한 사람들에게 막대한 돈을 쓰기 전에 말이죠.
Runway의 잠재력, 그리고 희망
그리고 AI 사용에 익숙해지고 능숙해져서 매번 원하는 결과를 얻을 수 있다면, Sora를 사용할 생각조차 하지 않을 수도 있습니다. Runway가 잠재적 사용자 기반에 걸고 싶어하는 마법은 바로 그것이라는 것을 알기 위해 마법사가 될 필요는 없습니다.
결론
Runway Gen-4는 아직 완벽하지 않지만, AI 비디오 생성의 가능성을 엿볼 수 있게 해줍니다. 아마추어 영화 제작자에게는 저렴한 실험 도구가 될 수 있으며, 숙련된 사용자에게는 강력한 창작 도구가 될 가능성이 있습니다. 앞으로 Runway가 어떤 발전을 이룰지 기대됩니다.
