[AI정보] AI 영상 제작에 '이미지 콘티(스케치)' 적용하기

 

* 주의 : 본 블로그글의 내용은 저의 경험을 알려드리는 것이지 '이게 맞다' 라는게 절대 아닙니다. '아~이런 것도 있구나' 라고 생각해주시면 감사하겠습니다^^

 

안녕하세요. 오늘 소개해 드릴 내용은 'AI 영상 제작' 에 사용하면 좋을 것 같은 '이미지 콘티 방식(Sketch-to-Video)' 방식에 대해 여러분들께 공유해 드리고자 합니다.

 

사실 몇 달 전까지만 해도 이 방식에 큰 확신이 없었습니다. 왜냐하면 몇달전, '나노바나나 개발자 페르소나'를 장착한 제미나이에게 '이미지 콘티 방식이 효과가 있을까요?' 라고 물었을 때, '별 효과가 없을 것' 이라는 냉정한 답변을 받았기 때문입니다. 하지만 '나노바나나2' 가 나오고 AI의 성능이 계속 업그레이드 되면서 다시한번 질문을 해 봤는데, 이번에는 긍정적인 답변을 받았습니다. 그래서 저 나름대로 실험해본 결과를 이렇게 공유해 드리고자 블로그 글을 쓰게 됐습니다.

 

1. 왜 '이미지 콘티(스케치)' 인가요?

프롬프트(글)만으로 AI를 제어하다 보면, 내가 원하는 구도와 포즈가 나오지 않아 답답할 때가 많습니다. 이때 '이미지콘티(스케치)' 는 의외의 돌파구가 되어주었습니다.

 

● 글보다는 선(Line) : '하늘로 날아오르는 포즈' 라고 백 번 쓰는 것보다, 투박하더라도 직접 선으로 구도를 잡은 이미지(스케치)가 AI에게는 훨씬 명확한 지침이 됩니다.

● 통제의 시작 : AI가 주는 우연한 결과에 만족하기보다, 창작자가 의도한 연출을 AI에게 '부탁'하는 가장 직관적인 방법이 바로 '이미지(스케치)'입니다.

 

2. [실제 사례] '골든라이언' 변신 장면 만들기

제가 직접 작업 중인 '골든라이언' 프로젝트의 데이터(캐릭터시트)를 바탕으로, '이미지콘티(스케치)' 방식을 한번 실험해 봤습니다. 제작방식은 '나노바나나2를 통한 영상용 이미지 생성 - 생성된 이미지를 클링AI 3.0 을 통해 영상으로 제작' 의 순서로 진행됩니다.

'골든라이언' 은 '변신히로인' 이므로, 변신전이미지(스타트 이미지) 와 변신후이미지(엔드 이미지)로 작업하였고 이를 최종적으로 영상화하는 작업을 실시했습니다. 이때, 캐릭터시트와 더불어 제가 펜타블렛으로 그린 '이미지콘티(스케치)' 가 사용되었습니다.

* 캐릭터시트는 이미지생성(혹은 영상제작시) 캐릭터의 일관성 유지를 위해 사용됩니다.

 

STEP 1. 베이스 이미지 생성 (나노바나나2 활용)

● 변신 전 이미지 (공중 비상)

   - 사용된 이미지 : 캐릭터 시트(변신 전, 파일명 c3.jpg) + 이미지 콘티(하늘로 날아오르는 포즈, 파일명 무제-1 복사.jpg)

 

   - 사용된 프롬프트(영문) : Identity: Refer to the face and long brown hair from c3.jpg. Pose: Strictly follow the diagonal upward flying pose from 무제-1 복사.jpg. Subject: A beautiful heroine with long brown hair, wearing a sleek black business suit, flying upward into the sky.

   - 한글 번역 : 외형: c3.jpg의 얼굴과 긴 갈색 머리를 참조하세요. 포즈: 무제-1 복사.jpg의 대각선 위로 날아오르는 포즈를 엄격히 따르세요. 주제: 세련된 검은색 여성 정장을 입고 하늘로 날아오르는 긴 갈색 머리의 아름다운 여주인공.

 

   - 결과물

 

● 변신 후 이미지 (정면 포즈)

   - 사용된 이미지 : 캐릭터시트(변신 후, 파일명 c4.jpg) + 이미지 콘티(정면을 바라보며 취한 포즈, 파일명 무제-2 복사.jpg)

 

   - 사용된 프롬프트(영문) : Identity: Perfectly replicate the 'Golden Lion' suit from c4.jpg. Pose: Strictly follow the front-facing dynamic pose from 무제-2 복사.jpg. Subject: The heroine fully transformed into 'Golden Lion' in the high sky, radiating golden energy.

   - 한글 번역 : 외형: c4.jpg에 나오는 '골든라이언' 슈트를 완벽하게 재현하세요. 포즈: 무제-2 복사.jpg의 정면을 향한 역동적인 포즈를 엄격히 따르세요. 주제: 높은 하늘에서 골든 에너지를 내뿜으며 '골든라이언'으로 완전히 변신한 여주인공.

 

   - 결과물

 

STEP 2. 영상화 작업 (클링AI 3.0 활용)

이제 두 이미지를 '스타트 이미지' 와 '엔드 이미지' 로 연결해 하나의 영상을 생성합니다. 저는 제가 주로 사용하는 '클링AI 3.0(Kling AI 3.0) 모델을 사용했습니다. (현재까지 제가 쓴 AI모델중에 가장 안정적인 영상 생성 능력을 보여줬습니다.)

 

   - 첨부 방식 : Start Image(변신 전 결과물) + End Image(변신 후 결과물) 업로드

   - 사용된 프롬프트(영문) : [Kling AI 3.0] Action: Accelerate into the sky, then perform a powerful mid-air rotation to face the camera. Transformation: Intense golden energy erupts, and her suit transforms seamlessly from the business suit into the 'Golden Lion' suit. Camera: Dynamic handheld camera with a fast following shot and motion blur.

   - 한글 번역 : [클링AI 3.0] 액션: 하늘로 급가속한 다음, 카메라를 향해 강력한 공중 회전을 수행합니다. 변신: 강렬한 골든 에너지가 분출되며, 정장이 골든라이언 슈트로 매끄럽게 변신합니다. 카메라: 빠른 추적 샷과 모션 블러가 포함된 역동적인 핸드헬드 카메라 연출.

 

   - 결과물

 

3. 드로잉 능력자(일러레) 분들의 또 다른 AI 활용법

드로잉에 소질이 있으시거나, 탁월한 능력을 가지신 분들이시라면 제가 소개해드린 '이미지콘티(스케치)' 방식으로 AI영상을 제작해 보시는 것도 AI시대에 '또 하나의 방법' 이 되지 않을까 하는 생각을 해봅니다.(영화제작에 사용되는 '콘티-스토리보드' 를 제작하신다 생각하시면 이해가 쉬우실 겁니다. 굳이 '실사영화' 가 아니더라도 '애니메이션' 도 가능하지 않을까 하는 생각도 해봅니다.)

 

물론, 제가 말씀드린 방법보다 압도적으로 쉬운 방법도 많이 있습니다.(예를 들어, 아예 쳇지피티나 제미나이에게 스토리콘티를 만들어달라고 한 다음 그걸 '구글 Flow' 나 '기타 AI플랫폼' 등을 통해 여러장의 이미지를 생성하는 방법도 있습니다.) 하지만, 그러한 방법들은 내가 원하는 이미지가 나올 때 까지 반복생성해야한다는 단점이 있습니다. 하지만 제가 말씀드린 '이미지콘티(스케치)' 방식은 앞에서 말씀드린 '통제권' 을 내가 가져온다는 점에서 의미가 있지 않을까 하는 생각을 해봅니다.(생성된 이미지중에 맘에드는 것을 고르는 것 과 내가 원하는 이미지를 생성하는 것)

 

물론, 아직은 부족한 점 이 많습니다. 하지만 AI는 계속 발전할 것이고, 언젠가 이 방식도 확실하게 자리잡을 날이 오지 않을까 하는 생각을 조심스럽게 해봅니다.(이미 나노바나나2는 '인포그래픽' 을 만들때 내가 원하는 인포그래픽에 대한 대략적인 스케치를 올리면 그대로 인포그래픽을 만들어줍니다.)

 

AI관련으로 이렇게 긴 글을 쓰는건 이번이 처음입니다. 많이 부족한 글을 읽어주셔서 정말 감사합니다.