소개
AI툴(캐릭터 생성기, Chat GPT, Claude, 미드저니, ComfyUi, 수노, 클링, Perplexity)과 영상편집툴(프리미어프로)을 활용하여, 한국의 소식을 전달해주는 한국통 한국인 대만 가상 인플루언서 숏폼 컨텐츠를 만들어보았습니다.
진행 방법
캐릭터생성기
ChatGPT
미드저니, ComfyUi
Claude
Perplexity
클링
수노
프리미어프로
◼기획하기
https://character.calcwave.com/
스터디장님께서 제작하여 공유해주신 캐릭터 생성기를 이용하여 컨셉과 세계관 구축, 캐릭터 설정 및 쇼츠 기획을 전부 작성해보았습니다.
캐릭터 생성기에서 만들어준 내용을 ChatGPT를 이용하여 다시 수정해줍니다.
◼인플루언서 이미지 만들기
https://midjourney.calcwave.com/
스터디장님께서 공유해주신 프롬프트 생성기를 활용하여 미드저니에서 생성할 이미지의 프롬프트를 만들어줍니다.
줌을 통하여 스터디장님의 노하우를 전수 받았지만 한번에 많은 정보를 공유 받다보니, 며칠 지나서 혼자 실행해 보려니 다 기억나지가 않더군요.^^; 마음만 급해서 빨리 다음 프로세스로 넘어가고 싶더라고요.ㅎㅎ 이 부분은 복습을 통하여 다시 정리해야겠습니다.
프롬프트 생성기에서 생성한 프롬프트를 가지고 미드저니에서 처음 뽑은 사진입니다. 저는 분명 한국인이라고 하였지만 뭔가 중화풍의 인물이 생성되었습니다. 원인을 파악하고자 프롬프트를 검토하였는데... 이런! 프롬프트 내용에 외모가 한국과 대만의 혼혈이었고, 대만풍 스카프와 타이베이에 있는 카페가 배경으 로 적혀있었습니다.
저는 이 부분을 수정하였고, 한국인을 만들기 위해 노력하였습니다.
또한, 데스크탑으로는 ComfyUI로 미드저 니에 사용했던 프롬프트에 파라미터만 제거하여 입력 후, 하루종일 이미지를 생성하도록 하였습니다.
욕심을 부리다보니 미드저니와 ComfyUi를 통하여 만든 이미지가 도합 1,000장 정도 되었던 거 같습니다. 이러다가는 이번 스터디에서 이미지만 만들다 끝날 거 같아서, 욕심을 버리고 쇼츠 영상물까지 프로세스 한바퀴를 돌려보자는 전략으로 수정하였습니다.
생성된 이미지들 중 해당 이미지로 최종 결정하였습니다.
◼동영상 기획하기
-습관적으로 스토리보드를 만들어야겠다 싶어서, ChatGPT에 스토리보드 작성을 요청하였습니다.
또한, 스크립트 작성도 요청하였습니다.
해당 내용을 까먹지 않게 Notion에 정리해가면서 작업하였습니다. 여러 툴을 사용하다보니 너무 정신이 없더라고요.
◼영상에 필요한 이미지 추가적으로 만들기
최종영상 제작 필요한 이미지를 추가적으로 제작하거나 수집하였습니다.
◼영상 관련 용어 이해하기
본격적으로 영상을 만들기 전 영상 생성을 위해 카메라 무빙과 장면전환에 대해서 Perplexity에 검색을 하여 공부하였습니다.
스크립트에 적혀있는 한국어를 대만 중국어로 자연스럽게 바꾸기 위해 클로드에 구체적으로 '20대 중반 여성의 말투로 자연스러운 대만 중국어'로 번역해달라고 요청하 였습니다.
저는 주로 중국어 대본을 작성할 때 ChatGPT보다 Claude를 이용하는 편입니다. 중국어를 공부하는 입장에서 ChatGPT가 문법적인 설명은 잘 해주는데 중국어의 성조 표기를 틀리게 알려줄 때가 많습니다. 해당 사건 이후 저는 ChatGPT의 중국어 실력의 신뢰성을 믿지 못하고, Claude를 활용하고 있습니다. ChatGPT도 틀리는 중국어를 배우느라 고생중입니다. 중국어 너무 어려워요. ㅜㅜ
◼Ai를 활용하여 영상 생성하기
본격적으로 클링으로 영상을 만들어봅니다. 생성한 이미지와 프롬프트를 넣고, 실행해보았습니다.
무료로 생성하다보니 1시간 이상 소요된다길래~ 설마 진짜겠어?라는 마음으로 15~20분 정도 기다렸는데 진짜였습니다. 시간이 줄지 않았습니다. 그래서 전 바로 신용카드를 찾아 결제를 해버렸습니다.
영상들을 뽑고, Text to speech 기능을 활용하여, 영상 속 인물이 말을 하게 만들었습니다.
아쉬웠던 점은 한국어가 아직 지원이 되지 않는 거 같습니다. 중국어와 한국어를 입력하였는데 실행되지가 않았습니다.
또한, 한가지 더 아쉬웠던 점은 영상 생성 말고, 보이스만 생성하여 추출하고 싶은데 보이스를 얻기위해서는 보이스가 포함된 영상을 생성하고, 추출하여 오디오를 분리해야만 하는 거 같더라고요.
굳이 불필요한 영상을 제작하면 크레딧도 아깝고, 불필요한 시간을 소비하지 않아도 될텐데...
클링에 있는 목소리가 AI스럽지 않고, 너무 자연스럽고 좋아서 사용하고 싶은데, 해당 목소리를 따로 학습시켜서 목소리를 만들어야 하는 건지? 아니면 목소리만 생성해서 추출하는 방법이 있는지 아시는 분이 있으시다면 꼭 공유 부탁드립니다. ㅜㅜ
그래서 제가 생각했던 방법은 영상을 생성하기 전 보이스를 테스트할 수 있어서, 여기서 필요한 보이스를 따로 녹음하여 사용하는 것인데 이렇게 사용하는 건 법적으로 문제가 있겠죠?
◼SUNO를 활용하여 BGM 만들기
영상에 BGM이 없으면 심심하니 SUNO에 가서 급하게 하나 만들어 줍니다.
◼프리미어프로를 활용하여 동영상 편집하기
프리미어프로에 모든 소스를 넣고, 영상을 편집하여 출력해줍니다.
◼출력 결과물
<첫 번째 출력물>
어색한 입모양도 있고, 손을 흔드는 장면에서는 모션블러가 너무 심하네요.
보이스를 얻기위해 영상을 전부 생성했습니다.
<최종 출력물>
최종 출력물입니다.
영상의도에 맞게 자료화면을 삽입 하였습니다.
결과와 배운 점
단순히 인플루언서 캐릭터만 만드는 것이 아니라 먼저 개념과 세계관 구축 기획의 중요성을 깨달았습니다.
이러한 접근 방식은 캐릭터의 이미지 및 영상 제작 시 수정 방향이 산으로 가지 않고, 더 빠르게 수정할 수 있었던 것 같습니다.
AI가 아직은 완벽하지 않아서 예상보다 수정에 더 많은 시간을 쏟아부어야 했지만 앞으로의 업데이트가 기대됩니다. 영상 생성 시 카메라 무빙과 캐릭터의 움직임에 더 신경을 써야 더 재미있고 퀄리티 높은 결과물이 나온다는 것을 몸소 느꼈습니다.
앞으로 이 가상 인플루언서를 더욱 다듬어서 핫하고 트렌디한 정보를 제공하는 인플루언서로 발전시킬 계획입니다. 또한, 남성 인플루언서도 추가적으로 만들어볼 예정입니다!
도움 받은 글 (옵션)
https://www.gpters.org/marketing/post/easy-plan-virtual-fluanic-xe6ymF2AOHirDbX
https://www.gpters.org/marketing/post/influencer-shortz-making-example-4WRybeqQfXP2H36