소개
시도하고자 했던 것과 그 이유를 알려주세요.
첫수업에서 VEO3 툴로 이미지에 프롬프트를 더해 영상화 하는 과정을 배웠는데요!
VEO3는 최대 8초짜리 영상만 제작 가능하기때문에
여러 클립을 따로 만든 뒤 이를 이어붙였을 때도
일관성 있는 긴 영상을 구현할 수 있을지 궁금했어요!
다만 처음 AI를 다뤄보는지라 스토리까지 생각하려면 머리가 아플듯 하여
이미 스토리가 있는 것 중에 짧으면서 임팩트 있는 소재를 생각하다 보니
전래동화를 영상으로 만들어 보게 되었습니다.
진행 방법
어떤 도구를 사용했고, 어떻게 활용하셨나요?
Tip: 사용한 프롬프트 전문을 꼭 포함하고, 내용을 짧게 소개해 주세요.
Tip: 활용 이미지나 캡처 화면을 꼭 남겨주세 요.
Tip: 코드 전문은 코드블록에 감싸서 작성해주세요. ( / 을 눌러 '코드 블록'을 선택)
전래동화 선정 - GPT
씬 분할 및 스토리 요약 - GPT
병든용왕 / 자라의 임무 / 토끼의 방문 / 토끼의재치 / 빠져나오는 토끼
이미지 프롬프트 제작요청 - GPT
나노바나나 이미지 생성을 위한 영어 프롬프트 작성 요청
일관성 유지를 위해 각 씬에 공통된 캐릭터묘사 프롬프트를 넣어달라고 요청함 (캐릭터스타일은 직접 지정)
1. Pinkfong-style Korean folktale illustration. Inside the colorful underwater palace, the cute Dragon King (same character prompt) lies in bed with a sick expression. Beside him, the turtle (same character prompt) and fish servants watch with worried faces. The palace is decorated with coral and seashells, bright and child-friendly atmosphere.
이미지 제작 - 구글 AI스튜디오(나노바나나)
3번에서 만든 1~5 씬 스크립트를 넣어 이미지 생성
영상 프롬프트 제작요청 - GPT
VEO3 영상 생성을 위한 영어 프롬프트 작성 요청
이미지 씬 프롬프트를 기반으로 만들고자 하는 영상의 스타일을 요청함
(각 씬은 8초 / 등장인물의 대사 필요 / 능청스럽고 귀여운 목소리 /장면에 어울리는 아기자기한 효과음 등등등 )
In a bright, Pinkfong-style animated underwater palace filled with coral and seashells, the cute Dragon King lies in bed with a sick expression, while the turtle and fish servants look on with worried faces. The turtle says in a sly tone, "토끼의 간만 있으면, 우리 임금님이 나을 수 있을 텐데..." in Korean, as soft underwater bubbling sounds and whimsical harp music create a magical yet concerned atmosphere.
영상 제작 - VEO3
3에서 만든 이미지와 5에서 만든 프롬프트를 넣고 영상제작
맘에 안드는 경우 5의 프롬프트를 수정해서 계속 다시 생성함
결과와 배운 점
배운 점과 나만의 꿀팁을 알려주세요.
영상 제작의 핵심은 결국 프롬프트 작성이었다는 사실!
첫번째 생성> 자라가 퇴장을 안함 / 말도 안함 / 입모양도 없음
두번째 요청> 자라를 줌해서 퇴장시켜줘 / 대사해줘 / 대사와 싱크되도록 입모양움직여줘
추가 요청 > 토끼의 간을 상상하는 모습을 그려줘 / 오른쪽으로 퇴장해줘 기타 등등
만들어진 결과물을 보고 프롬프트를 조금씩 수정해서 영상을 제작했더니
영상이 뭔가 더 풍부해지더라구요!
과정 중에 어떤 시행착오를 겪었나요?
이미지생성까지는 너무너무 손쉽게 한시간도 채 걸리지 않았는데 영상으로 변환하는 순간 문제가 발생하더라구요,
한글로 대사를 요청했는데 자막은 깨지고, 자막을 삭제했더니 영어로 말이나오고,, 목소리도 바뀌고 프롬프트를 계속 확인해가면서 정말 20번 넘께 수정을 했는데도 원하는 답을 얻지 못했어요!
그리고 프롬프트를 조금씩 수정할때마다 혹은 같은 프롬프트를 넣어도 매번 다른 결과물이 나오다보니 수정하고 싶은 부분만 수정할 수 없다는게 가장 큰 고비였달까요?
그러다보니 지금 공유한 영상은 [맘에드는영상 + 맘에안드는 영상의 음성만 추출] 해서 합친 결과물 이고 VEO3 의 OVERLOAD 에러로 이후 영상은 만들지 못했습니다. .ㅎㅎ (하루가 지나도 안되요!)
도움이 필요한 부분이 있나요?
VEO3로 영상의 대사와 이모양 싱크까지 맞출수 있는 방법이 있는지??
스터디장님이 만드는 영상은 씽크도 잘맞고 말만 잘하던데 저는 왜그런지 이해가 안가요 ㅋ
만약 이 부분을 보완할만한 방법이나 툴이 있다면 알려주세요!
앞으로의 계획이 있다면 들려주세요.
처음엔 제품 숏폼 제작을 목표로 강의를 수강하게 되었는데요!
영상을 통해 표현할 수 있는 세계가 무궁무진하다는 걸 알게 된 만큼,,
어느 방향으로 빠지게 될지 저도 잘 모르겠어요! ㅎㅎ
단 정말 다양한 방향으로 최대한 많이 많이 만들어 볼 계획입니다.
도움 받은 글 (옵션)
참고한 지피터스 글이나 외부 사례를 알려주세요.