[9기_시니어방] 나래이션 따라 입모양 바뀌는 영상 만들기

이번에는 나래이션을 읽어주는 아바타를 만들어 볼까 합니다.

-. DALL.E, midjourney 등의 이미지 앱에서 이미지 만들기

-. stuio d-id (https://studio.d-id.com) 가입하기

2.1 우선 DALL.E로 미소지은 아나운서 이미지를 만들어 봤어요. 저는 두번째 이미지를 다운 받아 사용하기로 했습니다.

2.2 나래이션을 GPT로 제작하고, 적절한 음성을 입힙니다.

-. 한국어 음성을 제공하는 사이트가 몇개 있는데, 그중 대표적인게 아래 두개이고, Naver 음성이 좋긴 합니다.

-. 보통 음성과 영상을 합성하는 사이트들 대부분이 외국 것이고, 한글을 지원하지 않아 한글음성을 미리 제작해야 하는 경우가 대다수입니다.

-. 여기에서는 KT AI voice 를 이용해 봤어요 ^^;;

메뉴가 꽤 많아서 아래쪽으로 스크롤해서 한번씩 둘러보시면 좋을 것 같습니다.

일단, 아래 메뉴중에서 “스튜디오”를 누르고 들어갈까요.

오디오 컨텐츠에 들어오면 아래 같은 화면이 나타나는데요. 여기에서 새로 만들기 누르시면 됩니다. 처음 이용하시면 아무 것도 없겠죠~ ^^ 만약 “개똥철학”이란 것을 만들겠다고 하면 그렇게 제목을 치고 들어가면 됩니다.

아래와 같은 화면이 나타나면 절반은 끝났습니다.
오른쪽에 나타난 | 1 ….. 라고 되어 있는 곳을 클릭하고 GPT에서 만든 나래이션을 넣어주시면 됩니다. shorts용 이미지를 여러개 만들었고 5초 이내로 했기 때문에 아마 나래이션도 5초 이내로 되어 있을 거예요. 제작화면서 아시겠지만, GPT에서 5초 이내의 한국어 나래이션은 생각보다 시간이 조금 짧아요.

제가 미리 만들어 뒀던 것은 조주선사 1이란 것이라 이제부터 그걸로 해볼게요.
우선, 왼쪽에 보면 선택된 AI 보이스가 없다고 나오는데, 그 아래부분에 “AI 보이스 선택”을 누르시면 아래와 같이 여러 샘플이 나오고, 나이대나 음성 성향 등을 설정해서 검색하시면 됩니다.
선택한 후 “선택완료”를 누르면 본래 화면으로 돌아갑니다.

이렇게 하고 나서 좌측 하단에 보면 “제작하기”가 있습니다. 클릭하면 나래이션 대본에 대한 음성이 합성되기 시작합니다. 이미지에는 보이지 않지만, 좌측에 여러 옵션이 있으니 그것도 참고해보시면 좋을 것 같습니다.

제작이 완료되면 문장별 파일로 다운로드 하시면 나래이션마다 하나의 음성 파일이 나오는데, 이것을 영상 편집툴에서 영상마다 하나씩 붙여 넣으면 됩니다. 하나의 파일로 다운로드하면 다중 영상일 때 영상과 싱크가 맞지 않습니다. 다만, 여기에서는 나래이션 전체를 한번에 읽기 때문에 하나의 파일로 다운로드해 봤습니다.
다운로드 받을 때, wav파일과 mp3중 선택하게 되어 있는데, 활용성은 mp3가 나은 것 같습니다.

3. studio did로

여기까지 왔으면 90%는 완료 되었습니다.

studio.d-id.com을 접속하고, “START FREE TRIAL”을 클릭합니다.

그럼 이렇게 나타납니다. 여기에서 당연히 “+ Create video”를 누릅니다. 처음 하게 되면 랜덤 이미지와 그 아래에 여러 사람이 나타나는데요. 빨간색 화살표가 가르키는 ADD 버튼을 누르고, DALLE에서 생선한 이미지를 선택합니다. 사실 본인의 사진을 넣으셔도 되요 ㅎㅎㅎ

참고로 원래 capcut을 이용해 편집한 영상도 올려드리니 영상마다 싱크가 다른 것을 비교해보시기 바랍니다. capcut은 게시판에 많은 자료가 올라와 있어서 별도로 올리지 않았습니다.

#9기_시니어