🎬 끌림영상 숏폼 제작 회고록: '생각 끄는 리모컨'

1. 소개

시도하고자 했던 것과 그 이유

• 시도한 것: 머릿속 복잡한 잡생각을 강제로 종료시켜주는 가상의 아이템 '생각 끄는 리모컨'을 주제로 1분 분량의 유튜브 쇼츠/인스타 릴스를 기획하고 제작했습니다.

• 이유: 평소 생각이 많아 잠을 못 이루는 현대인들의 고충에 공감하여, 재미있고 귀여운 웹툰 스타일의 영상을 통해 소소한 웃음과 대리 만족을 전달하고 싶었습니다. 또한, 복잡한 영상 편집 툴을 직접 다루는 대신, AI 에이전트와 Remotion 기반의 자동화 하네스(Harness) 시스템을 활용해 이미지와 음성 파일만으로 완성도 높은 영상을 쉽게 뽑아내는 파이프라인을 검증해보고 싶었습니다.

2. 진행 방법

어떤 도구를 사용했고, 어떻게 활용하셨나요?

• ChatGPT (텍스트 및 이미지): '나나 점장'과 '모모 알바'라는 캐릭터 설정, 1~6번 씬으로 구성된 대본(01_script.md) 기획, 그리고 이미지 생성용 영문 프롬프트 추출 및 실제 이미지(.webp) 생성.

• 무료 TTS 툴 (클로바더빙): 작성된 대본을 복사해 넣어 각 씬에 맞는 음성 파일(.mp3) 생성.

• Hedra (립싱크 AI 툴): ChatGPT가 만들어준 정지 이미지와 TTS 음성 파일을 결합해, 캐릭터가 직접 입을 움직이며 말하는 동영상(.mp4)으로 변환.

• Node.js & Remotion (로컬 하네스): 생성된 이미지, 음성, 비디오 파일들을 outputs/ep01/ 폴더에 모아둔 뒤, npm run render 명령어를 통해 자막과 함께 하나의 완벽한 영상으로 자동 합성.

💡 활용한 주요 프롬프트 (Hedra 영상 생성용)

이미지 속 캐릭터가 대사에 맞춰 자연스럽게 표정을 짓도록 지시했습니다.

씬 1 (나나 점장)

text

Speaking naturally directly to the camera, friendly and slightly playful expression, blinking, realistic subtle head movements, making eye contact.

씬 2 (모모 알바)

text

Speaking with an exhausted and slightly frustrated expression, frowning slightly, tired eyes, complaining naturally, realistic subtle head movements.

🖼️ 활용 이미지 및 캡처

ALT

가게에 나란히 서있는 애니메이션 캐릭터 두 명

ALT

녹색 앞치마를 입은 소녀가 칼을 들고 있다

ALT

녹색 앞치마를 입은 소녀가 물약을 만들고 있다

ALT

앞치마를 두른 소년이 불빛 앞에 서 있다

💻 활용한 코드 (자막 끄기 설정)

시스템에서 자동으로 띄워주는 자막이 필요 없을 때, project.json의 설정을 조작하여 자막을 껐습니다.

json

"elements": {

"subtitles": {

"enabled": false,

"note": "가독성 좋고 귀여운 폰트를 활용한 자막 패키지"

}

}

3. 결과와 배운 점

배운 점과 나만의 꿀팁

• 파일 확장자 주의: 다운로드 받은 파일의 이름을 변경할 때 s01-voice.mp3.mp3 나 s01-video.mp4.mp4 처럼 확장자가 중복해서 붙지 않도록 윈도우 폴더 설정(확장자 표시)을 확인하는 것이 중요합니다!

• Hedra 꿀팁: 립싱크 영상을 만들 때 이미지와 음성만 넣어도 되지만, 짧은 프롬프트(예: friendly expression, blinking)를 추가하면 표정이 훨씬 자연스럽고 생동감 있게 나옵니다.

• Remotion 자동화의 편리함: 영상 소스들을 폴더에 이름만 맞춰 넣어두면, 수작업 편집(프리미어 프로 등) 없이 명령어 한 줄(npm run render)로 순서 배치와 렌더링이 자동으로 끝나는 것이 매우 신기하고 편리했습니다.

과정 중에 어떤 시행착오를 겪었나요?

1. 윈도우 CMD 렌더링 충돌: npm run preview를 통해 웹 브라우저로 미리보기를 시도했으나, 윈도우 네트워크 설정(IPv6)과 Node.js 간의 충돌로 인해 EFAULT 에러가 발생했습니다. 이를 우회하기 위해 미리보기를 건너뛰고 바로 npm run render로 최종 .mp4 파일을 뽑아내는 방식을 택했습니다.

2. 렌더링 버그 수정: 윈도우 CMD에서 spawn EINVAL 에러가 나서 렌더링이 안 되는 문제가 있었는데, 스크립트 코드(render_episode.mjs)에 shell: true 옵션을 부여하여 해결했습니다.

3. 자막 끄기 버그: 분명 설정에서 자막을 껐음에도 강제로 자막이 그려지는 문제가 있었습니다. 원인을 찾아보니 템플릿 코드(SceneClip.tsx)에 하드코딩된 부분이 있어서, 설정값(subtitles.enabled)을 정상적으로 읽고 렌더링을 건너뛰도록 코드를 직접 수정해 해결했습니다.

도움이 필요한 부분이 있나요?

• 현재로서는 AI 에이전트의 도움을 받아 에러들을 모두 해결했기 때문에 막히는 부분은 없습니다!

앞으로의 계획

• 현재 1번, 2번 씬만 Hedra를 이용해 말하는 영상으로 만들었는데, 시간이 날 때 나머지 3~6번 씬도 모두 말하는 동영상으로 변환하여 100% 동적 영상으로 이루어진 퀄리티 높은 쇼츠를 완성할 예정입니다.

도움 받은 글 (옵션)