헨젤과 그레텔 실사판 영화 제작 (13기 영상스터디 멤버들의 작업기..) - 영상 full 버전 보실 수 있습니다.

소개

13기 영상프로토타입 스터디원들 - 스터디는 끝났고 런웨이 클링 유료 구독 기한은 남았고.. 사례게시글 제출 안하니 영상을 안만들고...

그래서 모였습니다!!!

지난 일요일 (12/15) 작정하고 모여 영화를 한 편 만들어보자--는 제안 아래에 10명의 스터디원들이 모였습니다.

노트북을 들고 테이블 주위에 앉아 있는 한 무리의 사람들

지난 번 AI국제 영화제 대상작 마테오 영화를 보면서, 이미지 레퍼런스 쓰면 각자 장면 나눠서 영상을 만들어도 어느정도 일관성 있게 영화를 만들어볼 수 있지 않을까? 싶은 생각이 들었어요.

그래서 '헨젤과 그레텔'과 같은 이미 잘 알려진 동화를 실사 스타일로 영화만들기를 해보기로 했어요!

빠른 결과물을 먼저 보고 싶다면.. ('결과물' 파트에 영상 원본 나옵니다)

https://youtu.be/BDteewNWipE?feature=shared

사용한 툴

  • 시나리오 구성, 인물 묘사 구체화, 대사 생성 등 -> 클로드, GPT

  • 이미지 생성 -> 아마 전원 미드저니 사용했던 것 같아요

  • 장면별 영상 생성 -> 클링 6-7명, 런웨이 2명 이었던 것 같아요

  • bgm 생성 -> suno

  • 효과음 생성, 최종 편집 -> 필모라

진행 방법

먼저 제가 아이디어를 냈고,

한국어로 된 문자 메시지의 스크린샷

음악팀을 배정하고,

한국어 채팅 메신저 - 스크린샷

하뚱님이 먼저 10명에 맞게 시나리오 10개를 뚝딱 생성해오셨고,

한국어로 된 두 사람의 대화 스크린샷

하뚱님이 스타일 레퍼런스로 쓸 이미지까지 투척해주셨습니다 >< 하뚱하뚱

한국 영화 제작자 - 스크린샷 미리보기 이미지

일찍 온 사람들이 각자 등장인물 1개씩 맡아서 만들기로 했고,

한국어 한국어 한국어 한국어 한국어 한국어 한국어 한국어

하뚱님이 주신 시나리오를 클로드에게 주고, 각 등장인물을 자세히 묘사해달라고 했습니다

한국어로 된 문자 메시지의 스크린샷

미드저니 프롬프트 제너레이터 GPT를 활용해 각 인물 묘사를 넣고 등장인물 생성

한국어로 된 문자 메시지의 스크린샷
A full-body portrait of a 10-year-old girl, chubby cheeks, plump lips, and curious bright eyes, standing with a playful pose. She has golden blonde hair tied into two neat braids, wearing a faded red dress with a clean white apron. Her skin has a healthy pink glow, and her face is lit up with a mischievous smile and a curious gaze. The background is a sunlit grassy field with soft focus, hinting at a carefree, joyful day. Natural sunlight highlights her features with gentle warmth. Created Using: cinematic framing, hyper-realistic detailing, portrait photography style, subtle bokeh background, warm natural lighting, dynamic pose capture, 85mm camera lens, detailed skin texture

각자 맡은 등장인물 이미지를 차례로 뽑았어요

한국어 채팅 앱 스크린샷
두 사람의 대화 스크린샷
스타워즈 포스 어웨이크 스타워즈 포스 어웨이크 스타워즈 포스 어웨이크 스타워즈 포스 어웨이크
견과류 한 접시를 들고 있는 노부인
앞치마를 입은 여자가 벽난로 앞에 서 있다
헛간에 서 있는 땋은 머리를 가진 어린 소녀

그 다음 각 시나리오 번호를 하나씩 맡아서

한국어로 된 두 사람의 대화 스크린샷

클로드에게 각 장면 구체화해달라고 요청한 뒤,

한국어로 된 문자 메시지의 스크린샷

필요 시, 각 장면에 해당하는 대사도 클로드에게 요청합니다.

노란색 바탕에 한국어로 된 문자 메시지

각자 엄청난.. 씨름과, 서로 런웨이 클링 가리지 않고 장면 하나 만들기 위해 함께 도와주며, 누구 하나 영상 뽑으면 또 우르르 일어나서 웅성웅성 모이고..

그렇게 결과물들을 하나씩 올렸습니다. (자세한 과정은 뒤에)

한국어 비디오 플레이어 - 스크린샷
한국 영상 채팅 앱의 스크린샷
한국 영상 채팅 앱의 스크린샷
한국어 영상 채팅 - 스크린샷
한국어 비디오 플레이어 - 스크린샷
한국어 영상 채팅 - 스크린샷

동시에 음향팀은 suno로 으산한 분위기의 bgm을 만들었어요

한국어 문자 메시지 스크린샷

무사언니는 각 장면 대사를 뽑고 영문으로 번역해서 올려주고, mp3로 더빙해서 올려주고

한국 영화 자막 - 스크린샷
한국 영화 대본 대화 한국 영화 대본 대화 한국 영화 대본 대화 한국 영화 대본
한국어 mp3 다운로더 - 스크린샷

원하는 이미지가 잘 안뽑히자 각자 직접 프롬프트 뽑아서 서로 도와주며

한국어 문자 메시지 앱의 스크린샷

최종 영상 이어붙이고 캡션 및 bgm 넣는 것은 물결2 님이 담당해주셨습니다.

한 무리의 사람들이 테이블 주위에 앉아 영화를 보고 있다

어느덧 밤 11시가 훌쩍 넘은 시간... 드디어 최종 내보내기가 완성되어..

한국어 채팅 앱 스크린샷

두구두구두구두구.......

최종 결과물

배운 점과 시행착오

1) 똑같은 프롬프트를 넣고, 하뚱님이 주신 스타일 레퍼런스를 주고 안주고 차이가 극명합니다.

아래가 스타일레퍼런스 없는 것, 위가 스타일 레퍼런스 적용한 것

그녀의 다른 사진이 있는 소녀의 사진

2) 여자아이가 마녀를 항아리로 밀치는 장면을 만들고 싶었는데 너무 어려웠습니다..

  • 마녀의 뒷모습을 여자아이가 바라보는 장면 이미지 뽑기

  • 이걸 클링에서 '밀치는' 장면 영상 만들기

  • 심지어 마녀와 여자아이(그레텔)의 뒷모습 조차 캐릭터 일관성 유지시키기..

어떻게 했냐면요,

  1. 마녀 뒷모습 생성

    1. GPT 프롬프트 제너레이터 -> 마녀 앞모습 주면서, '뒷모습을 묘사해달라' -> 미드저니에서 생성

      후드 망토를 입은 여성의 사진 네 장

  2. 여자아이 뒷모습 생성

    1. 똑같이 여자아이 뒷모습 프롬프트 뽑아서 미드저니로 생성

    2. 근데 뒷 머리가 한 갈래일 때도 두 갈래 일 때도 있었음..

      난로 앞에 머리를 땋은 소녀의 사진 네 장
  3. 마녀 뒷모습 이미지에서 배경 지우고 불타는 항아리를 추가

    불 앞에 두건을 쓴 남자의 사진 4장
  1. 계속 이미지 edit 기능 활용해서 이미지를 줄이고(여백을 더 만들기 위함), 프롬프트를 추가하면서 원하는 이미지를 계속 생성

    1. 왼쪽 - 불타는 항아리 사이즈를 키움

    2. 오른쪽 - 이미지를 더 줄여서 오른쪽 여백을 만듦 (여기에 여자아이 뒷모습 넣을 예정)

      검은 망토를 입은 여자가 불 앞에 서 있다
      검은 망토를 입은 남자가 불 앞에 서 있다

  2. 이제 우측을 다 지우고, 여자아이 뒷모습을 이미지 레퍼런스로 주면서 생성

    그렇게 완성한.. ㅜㅜㅜ 불타는 항아리를 쳐다보는 마녀의 뒷모습을 쳐다보는 그레텔의 뒷모습 ㅜㅜ

    어린 소녀가 어두운 방에서 불 앞에 서 있다

  3. 이제 클링으로 가서 밀치는 장면을 만들어 봅시다

    1. 그러나.. 마녀가 갑자기 뒤를 돌지 않나.. 여자아이가 갑자기 애니메이션이 되지 않나..
      정말 많은 시행착오 끝에..

      검은 망토를 입은 여자가 불 앞에 서 있다
      한 소녀가 부엌의 불 앞에 서 있다


      5초 중 앞 2초 정도만 건질 수 있는 영상을 만들었어요.. (감격)

하고 싶은 말

  • 정말 다양한 툴들의 시너지 끝판왕을 경험한 것 같아요

    • 시나리오 작성, 대사, 효과음 기획 등 모든 것은 클로드와 함께

    • 미드저니 프롬프트 생성은 GPT와 함께

    • 이미지 생성과, 원하는 편집은 미드저니로

    • 이미지를 특정 장면 영상으로 만드는 건 클링, 런웨이로

    • 배경음악은 suno로

    • 효과음 생성은 필모라로

    • 최종 영상편집도 필모라로

  • 우선 시간 장소만 정하고, 헨젤과 그레텔 실사영화를 만들자-는 제안 한 마디에, 각자가 자발적으로 필요한 부분을 채워주며 전체 과정을 완성한 게 너무 좋았어요

    • 하뚱님이 먼저 시나리오랑 참고할 스타일 레퍼런스 이미지를 뽑아주시고

    • 무사언니는 대사를 다 번역해서 올려주고

    • 초기 시나리오에 자발적으로 살을 붙여서 공유하고, 등장인물 묘사를 올리고 등등

  • 집단지성의 힘을 온전히 느꼈습니다. 서로 어려운 점을 말하면 옆에서 같이 프롬프트 만들어주고, 영상도 대신 만들어봐주고, 영상 만든 거 피드백도 실시간으로 주고받으면서 (ex. 이거 좀 더 이 느낌이면 좋을 거 같아요! 좀 더 실사로 만들면 좋을 거 같아요!) 하나씩 쌓아올린 게 너무 행복했어요

  • 맨 마지막에 최종 편집해주신 물결님 물결2 도 필모라 처음 쓰시는데 기꺼이 가장 막바지 고된 작업을 뚝딱뚝딱 해내주셔서 감사했어요

  • SUNSHINE 무사언니 @김도윤 쌍떼 @레오 아이리스 하뚱하뚱 @이지영 물결2 이렇게 10명!

  • 뭉구JayKim 스터디장님께도 감사의 말씀을 ><

또 추진 중인데 궁금하시면... 댓글 달아주세요! 함께 할 사람! (ㅋㅋㅋ)

노란색 바탕에 한국어 문자 메시지
19
10개의 답글

👉 이 게시글도 읽어보세요