소개
시도하고자 했던 것과 그 이유를 알려주세요.
스터디 시작하면서 청춘 웹드라마를 만들려고 했는데, 다중 캐릭터 움직임, 생성, 음성(대사) 등 총체적인 문제를 겪으면서 Vlog 스타일의 영상으로 선회했습니다. 웹드라마 제작에 시도했던 것과 실패한 점 그리고 Vlog 로 전환하는 부분을 공유합니다
진행 방법
어떤 도구를 사용했고, 어떻게 활용하셨나요?
Tip: 사용한 프롬프트 전문을 꼭 포함하고, 내용을 짧게 소개해 주세요.
Tip: 활용 이미지나 캡처 화면을 꼭 남겨주세요.
Tip: 코드 전문은 코드블록에 감싸서 작성해주세요. ( / 을 눌러 '코드 블록'을 선택)
사진 생성 : 미드저니
영상 생성 : runwayml(gen3 alpha turbo), kling
사진 편집 : 포토샵 7.0, 미리캔버스
영상 편집 : 필모라14
시나리오 및 프롬프트 제작 : 챗G.P.T, Claude.ai
웹 드라마 제작 실패기
1) 서로 만나는 장면을 자연스럽게 하려고 서로를 스쳐지나가게 했더니 걸어가다가 텔레포트를 해버리네요
2) 자연스럽게 만나게 서로 움직였는데, 이번에는 사람이 외국인으로 바뀌어 버립니다. runwayml이 사람 얼굴을 이렇게 바꾸는 부분들이 발견되었습니다
3) 이게 처음 제작한 건데, 여 캐릭터만 움직이는 것인데, 이것도 발 생성이 제대로 안되어서 부자연스러운데다가 서로 바라보는 것에서 매우 어색함이 느껴지고 퀄리티까 떨어짐느꼈습니다.
그래서 급 남주인공 폐기 및 여주인공 수진이의 여행 브이로그로 급 선회
기존 시나리오 : 여주인공이 수험생할인으로 머리를 하고, 데이트를 나가서 남주인공과 함께 공원데이트를 하면서 사진을 찍고, 사진관에 가서 사진인화를 하는 이야기
수정 시나리오 : 여주인공이 수험생할인으로 머리를 하고, 대학 입학전 자유를 찾아서 세계 여행을 하면서 인생샷을 찍고, 사진관에서 폴라로이드 사진을 인 화하는 이야기최종 시나리오 : https://lively-cantaloupe-ce2.notion.site/Vlog-14c152557bf380b7b7dbccbf61f84896?pvs=4
제작 방법(요약)
1) 캐릭터 생성
2) 스토리 작성(대본 포함)
3) 여행 인생샷 생성(폴라로이드 스타일로 3:4)
4) 인생샷 미리캔버스에서 16:9 영상 사이즈로 확대 생성
5) 총 4장면, 컷을 장면별로 쪼개서 런웨이로 영상 생성
6) 필모라에서 영상 편집제작 방법 상세
1) 여주인공 캐릭터 설정(남주인공은 폐기로 삭제)
-> 수능을 보고 여행을 가는 컨셉이어서 17세라고 연령을 선택했지만, 캐릭터 생성 이후에는 20세 여성으로 변경해서 작업했습니다. 미성년자의 경우 간혹 미드저니 블럭 시스템에 걸려서 이미지가 생성되지 않은 문제가 생깁니다.
2) 스토리 작성
작업 순서는 사실 스토리를 먼저 쓰고, 거기에 맞는 캐릭터를 생성했습니다. 스토리는 지피티가 쓴거를 바탕으로 사진을 만들지만, 상세 내용은 영상이 생성되면서 조금씩 변형
최종 스토리는 위 노션에 있고, 영상 제작시에는 조금 더 자세한 시나리오를 작성해서 만들었습니다. 예시로 마지막 장면에 대한 시나리오인데, 이 상세한 시나리오를 바탕으로 아래 미드저니 프롬프트가 나오고, 이 프롬프트로 제작된 이미지를 가지고 다시 영상 제작 시나리오를 만듭니다
당연하게도 미드 저니가 위 시나리오를 100% 반영해서 나오는 것이 아니기 때문에 수정된 것을 반영하기 위해 생성한 이미지를 첨부하여서 수정된 부분을 알려주고, 다시 다음 동작을 5가지 제안 받았습니다. 5가지 동작을 보고 맘에 드는 것을 선택해서 영상을 만들어보는 방법을 계속 반복했습니다.
3) 여행 인생샷(3:4비율)
이런식으로 인물이 고퀄리티로 나오도록 했습니다. 이미지 제작 방법은 2가지 방법으로 나뉘는데, 우선 처음 시도한 것은 우리의 캐릭터 얼굴을 가지고 이미지를 만들어 달라고 하는 것입니다. 이 때 --cw 파라미터를 사용해야하는데, --iw 파라미터만 사용하다보니 맘에 안들어서 다른 방법을 시도했습니다.
먼저, 프롬프트를 단순화해서 원하는 고퀄 이미지가 나오 는데 집중합니다
그리고나서 기본 캐릭터를 참조해서 얼굴 부분만 edit 기능으로 편집합니다.
4) 여행 인생샷을 확장하기
미리캔버스 유료 사용자는 AI기능을 사용할 수 있는데, 사이즈별로 확장 기능이 있습니다. 3:4 비율의 이미지를 확장하면 위와같이 자연스럽게 배경이 생성됩니다.
이렇게 생성된 것은 조금 배경이 흐릿하거나 하는 부분이 있는데, 이를 runwayml에서 영상을 제작할 때 다시 화질 UP을 해주기 때문에 사용하는데 문제가 없었습니다
5) 영상생성
시나리오+생성된 이미지 + 의도 하는 부분 -> runwayml 가이드에 맞는 영상 생성 프롬프트를 챗 G.P.T 에게 요청해서 만들었습니다.
예시)
Gentle camera pan, moonlit shadows, soft pastel tones. The camera follows the woman strolling along the pond under the moonlight, with the soft glow of lanterns casting a romantic ambiance over the serene waters.
시나리오와 의도를 통해서 카메라의 무빙, 구도, 제가 생각하는 의도가 섞여서 나옵니다.
6) 필모라에서 영상편집
suno를 사용하기에는 시간이 부족하고, 필모라 14 1년 구독 및 프리미엄에셋 7일 체험판을 통해서 AI 기능을 사용해서 시간을 단축했습니다
영상 중간에 들어가는 효과음 등을 AI로 만들어서 원하는 느낌을 최대한 살렸고, 장면전환을 통해서 자연스럽게 이어지도록 했습니다.
결과와 배운 점
배운 점과 나만의 꿀팁을 알려주세요.
실패담도 괜찮아요. 시행착오나 도움이 필요한 부분이 있나요?
앞으로의 계획이 있다면 들려주세요.
유튜브 영상 업로드!
https://www.youtube.com/watch?v=wWhrV-IYxHM
최대한 압축한다고 압축했는데, 조금은 길게 느껴져서 다음에는 더더더 몰입감 있는 영상을 만들어보고 싶습니다. 그리고 캐릭터 일관성에서 미드저니와 많이 싸우고 타협하고 하는 부분 때문에 디퓨전 쪽에 자꾸 눈이가는데 이 부분은 다른 툴 또는 스킬을 업그레이드해서 더 강화해보려고 합니다.
도움 받은 글 (옵션)
참고한 지피터스 글이나 외부 사례를 알려주세요.
(내용 입력)
