❤️ 소개 — 시도하고자 했던 것과 그 이유
전자책 제작 스터디의 사례 발표 모임(2026-05-26) 영상을 복구하는 작업이었습니다.
문제는 이거였어요. 줌 녹화가 제대로 안 돼서 영상 화면은 사라지고, 남은 건 두 가지뿐이었습니다.
입을 벌리고 있는 심슨의 이미지
119분짜리 오디오 파일 (회의 음성 전체)
발표자 6명이 공유했던 화면 캡처 PNG (각자 사례 글을 길게 스크롤한 세로 이미지)
녹취록(클로바노트)도 있었지만 화면이 없으니 "까만 화면에 소리만 나오는 영상"이 될 판이었죠.
그래서 떠올린 아이디어가 "발표자가 화면을 천천히 스크롤하면서 설명하던 그 느낌을, 캡처 이미지를 오디오 타이밍에 맞춰 자동으로 스크롤시켜 재현하자" 였습니다.
화면 녹화를 다시 할 수도 없고, 영상 편집 프로그램으로 119분을 일일이 맞추는 건 엄두가 안 났어요. 그래서 코드로 영상을 만드는 Remotion을, 클로드 코드에게 통째로 맡겨보기로 했습니다.
핵심 컨셉: 오디오(원본) + 슬라이드 PNG(자동 스크롤) + 자막 + 챕터 카드 → 코드로 합성
❤️ 진행 방법 — 어떤 도구를 어떻게 활용했나
사용한 도구
| Claude Code | 전 체 작업 지휘 — 녹취록 분석, 챕터 분할, 자막 생성 스크립트, Remotion 코드 작성, 렌더링까지 직접 실행 |
| Remotion | React 코드로 영상을 만드는 프레임워크. 슬라이드 스크롤·자막·인트로/아웃트로를 컴포넌트로 구현 |
| PowerShell / Node | 녹취록 파싱 → 자막(SRT) 자동 생성 |
작업 흐름 (클로드 코드가 단계별로 수행)
1. 프로젝트 폴더 구조 + CLAUDE.md 셋업
2. 원본(오디오/녹취록/슬라이드) 분석 → 발표자·타임스탬프 매핑
3. 챕터 맵 작성 (CHAPTERS.md) — 11챕터, 발표자별 구간·슬라이드 매칭
4. 녹취록 → 자막(SRT + JSON) 자동 생성 + STT 오인식 보정
5. Remotion 프로젝트 구현 (슬라이드 스크롤 / 자막 / 챕터카드 / 인트로 / 아웃트로)
6. 30초 데모 렌더 → 검수 → 자막 4줄 제한 수정
7. 전체 119분 본 렌더 → study-video.mp4
실제로 사용한 프롬프트 (전문)
① 자료를 던지고 컨셉을 설명한 첫 지시
""C:\Users\송아영\Documents\카카오톡 받은 파일\05-26_주간_회의_AI_글쓰기_전자책_제작_저작권.mp3"
E:\송아영\05-26_주간_회의_AI_글쓰기_전자책_제작_저작권.txt"
그리고 "E:\송아영\사례발표 화면" 이 경로에 발표자 화면 있어.
설명할 때 오디오에 해당하는 화면을 천천히 스크롤하면서 보여주고 싶어
→ 클로드 코드가 알아서 녹취록에서 화자(`참석자 1~8`)와 타임스탬프를 파악하고,
PNG 6장의 해상도를 분석(세로로 매우 긴 캡처임을 확인)한 뒤,
"슬라이드 자동 스크롤" 방식이 적합하다고 판단해 설계를 시작했습니다.
② 발표자 닉네임 매핑을 바로잡은 지시
참석자 3은 배꽃이야. 참석자 4는 이응이응, 참석자7은 백구우야.
참석자 6은 AJ (에이제이)
그리고 스크롤 할 이미지에 발표내용이 다들어 있지 않거나 짧을 수 있어.
이럴 땐 리모션 영상 넣어서 내용 전달 잘 할 수 있도록 구성해줘.
필요하다면 화면 이미지 해당부분 재차 보여줘도 되고
→ STT가 닉네임을 "소영강/소현장/백구호/에이제이…" 등으로 제멋대로 적어둔 걸,
정식 닉네임 표를 만들어 일괄 치환 규칙으로 정리했습니다.
③ 자막이 화면을 너무 가린다 → 4줄 제한