AI영상 TTS생성 제작, 가능은 했지만 쉽지는 않았다.
2026.06.06








AI 영상 제작 실습 후기
배운 것
코덱스를 활용하여 영상 다운로드 받는 방법
슈퍼톤(Supertone)을 활용한 TTS(음성 합성) 제작 방법
캡컷(CapCut) 단축키 설정 및 효율적인 편집 방법
영상을 컷 단위로 분리하여 이미지 추출하는 방법
자동 자막 생성 및 편집 방법
챗GPT를 활용한 이미지 프롬프트 작성 및 이미지 생성 방법
그록(Grok)을 활용한 입모양(립싱크) 영상 제작 방법
실습한 것
이번 실습에서는 웹소설 원작 콘텐츠인 「취사병 전설이 되다」를 활용하여 AI 영상 제작 전 과정을 경험해 보았습니다.
1. 영상 소스 준비
「취사병 전설이 되다」 영상 다운로드
영상 내용을 분석하여 주요 장면 선정
2. 컷 편집 및 이미지 제작
장면별로 컷을 분리하여 이미지 추출
챗GPT를 활용하여 각 장면에 맞는 이미지 프롬프트 작성
AI 이미지 생성으로 부족한 장면 보완
3. 음성 및 캐릭터 제작
슈퍼톤을 활용한 TTS 음성 제작
그록을 활용하여 캐릭터 입모양(립싱크) 영상 생성
대사와 입모양을 자연스럽게 연결
4. 최종 편집
캡컷으로 영상 편집
장면 전환 효과 적용
자동 자막 생성 및 수정
배경음악(BGM) 및 효과음 삽입
최종 쇼츠 영상 완성
느낀 점
이번 실습을 통해 AI 도구를 활용하면 혼자서도 영상 제작이 가능하다는 점을 체감할 수 있었습니다.
특히 챗GPT, 슈퍼톤, 그록, 캡컷을 연계하면 기획부터 이미지 제작, 음성 생성, 편집까지 대부분의 과정을 직접 수행할 수 있다는 것이 인상적이었습니다.
다만 TTS 제작과 립싱크 작업은 생각보다 많은 수정 작업이 필요했습니다. AI가 기본 작업은 빠르게 수행해 주지만, 자연스러운 결과물을 만들기 위해서는 반복적인 검수와 수정이 필수적이라는 점을 느꼈습니다.
또한 앞으로 유튜브 쇼츠 제작 시 이러한 AI 도구들을 적절히 활용하면 제작 시간을 크게 단축할 수 있을 것으로 기대됩니다.
어려웠던 점
1. 여러 캐릭터를 한 화면에 배치하는 작업
캐릭터들의 크기와 위치를 자연스럽게 맞추는 것이 쉽지 않았음
동일한 스타일과 비율을 유지하는 데 어려움이 있었음
2. 장면의 디테일 표현
순간적으로 지나가는 장면이라도 디테일을 살려야 영상의 완성도가 높아짐
AI 이미지 생성 시 원하는 구도와 표정을 정확하게 구현하기 위해 여러 번 수정이 필요했음
3. 립싱크 작업
입모양 생성은 가능했지만 대사 길이와 타이밍을 맞추는 과정이 상당히 번거로웠음
여러 번 재생성과 수정 작업이 필요했음
4. 전체 흐름 연결
개별 장면은 잘 만들어졌지만 장면과 장면 사이의 자연스러운 연결을 만드는 것이 생각보다 어려웠음
시청자가 몰입할 수 있도록 편집 리듬을 맞추는 과정이 중요하다는 것을 배움
앞으로의 활용 계획
역사 유튜브 쇼츠 제작
AI 캐릭터를 활용한 스토리 영상 제작
청소업체 홍보 영상 제작
AI 음성과 립싱크를 활용한 교육 콘텐츠 제작
반복 작업을 줄여 영상 제작 시간을 단축하고 더 많은 콘텐츠 제작에 도전할 예정
로그인하고 댓글을 남겨 주세요
일취월장하시는군요~ 저 많은 대사가 립싱크 거의 맞아보이는데요~ 대단하시네요.
수고하셨습니다.
항상 제가 보여드린대로 제작을 빠르게 해보시면서 노하우를 잘 흡수하시는 것 같습니다. 열심히 하신 만큼 천안한마당님께 그대로 남겠지요 ㅎㅎ
제가 수퍼톤 플레이를 이야기 한 기간이 더 길었고, 예제도 수퍼톤 플레이를 기반으로 보여드렸다 보니 다들 수퍼톤으로 작업을 하신 것 같습니다.
많은 사람들이 TTS 기반으로 대사생성을 합니다. 타입캐스트, 수퍼톤플레이, Vrew, 일레븐랩스를 통해서요. 저도 그렇게 해왔고요.
하지만 저는 리서치를 계속 미뤄오다 지난 모임 직전에 일레븐랩스 보이스 디자인과 보이스 체인지를 사용해본 것인데, 덜 수고롭고 더 자연스러운 작업을 위해서는 보이스 디자인/체인지를 사용했다는 결론을 얻었습니다. 주중에 예제 준비해볼게요.




천안한마당 캐릭터들이 출연한 취사병 전설이 되다 ㅋㅋㅋ 재밌게봤어요!! 역시 저희스터디 우등생! 너무 잘하셨네요. 수퍼톤 사운드가 조금 구연동화같은 느낌이어서 실사나 반실사에는 조금 어색한 느낌이 들더라고요. 일레븐랩스랑 같이 쓰신것같은데 차이가 어떠셨나요?
감사합니다~ 일레븐랩스는 아직 안 사용했구요. 말씀하신데로 수퍼톤이 음성이 그렇게 많지는 않다는 느낌은 받았어요. 진저님이 일레븐랩스 한번 써보시고 피드백 좀 알려주세요~ㅋ