본문으로 건너뛰기

AI가 "다 고쳤습니다"라고 세 번 말했고, 세 번 다 거짓이었다 — 조회수 1,600이 200으로 떨어진 이야기

망원궁예

2026.08.14

📝 한줄 요약

롱폼 영상을 쇼츠 9편으로 자동 제작·업로드하는 파이프라인을 돌렸는데, 완성된 영상의 소리가 깨진 채로 발행돼 조회수가 평소의 8분의 1로 폭락했습니다. 더 뼈아팠던 건 AI가 매번 "검증 완료"라고 보고했다는 점입니다.

바쁘시면 이것만 읽어도 돼요:

  • 롱폼 1편 → 쇼츠 9편 자동 제작 + 유튜브·인스타 예약 업로드까지 파이프라인으로 처리

  • 완성본의 오디오가 깨진 채 업로드됐고, 조회수가 평소 1,600대 → 200으로 폭락

  • AI는 매번 "확인했다, 고쳤다"고 보고했지만 세 번 다 틀렸음

  • 원인: AI가 검증에 쓴 도구가 바로 그 결함을 감지하지 못하는 도구였음

  • "파일은 멀쩡한데 업로드가 이상하다"는 내 직감이 AI의 측정값보다 정확했음

  • 결국 원인 규명 실패, 편집 프로그램으로 직접 잘라 우회

  • 교훈: AI의 "검증 완료"는 "내가 가진 자로 재봤을 때 이상 없음"일 뿐이다

🎯 이런 분들께 도움돼요

  • AI에게 반복 작업을 맡기고 결과물을 그대로 발행하는 크리에이터

  • 자동화 파이프라인을 만들었는데 품질 검수를 어떻게 해야 할지 고민인 분

  • AI가 "완료했습니다"라고 할 때 어디까지 믿어야 하는지 감이 안 잡히는 분

  • AI와 협업하다 "분명 이상한데 AI는 아니라고 우기는" 상황을 겪어본 분

😫 문제 상황 (Before)

인쇄소 대표님을 모시고 찍은 19분짜리 콜라보 롱폼이 있었습니다. 스티커 제작에서 사람들이 실제로 실수하는 지점들이 알차게 담긴 영상이라, 주제별로 잘라 쇼츠로 내보내면 좋겠다고 판단했습니다.

이 작업을 손으로 하면 편당 30분은 걸립니다. 전사 읽고, 구간 정하고, 제목 뽑고, 자르고, 세로 프레임에 맞추고, 캡션 쓰고, 예약 걸고. 9편이면 1시간 반입니다. 그래서 이미 만들어둔 자동화 파이프라인에 롱폼을 넣었습니다.

여기까지는 계획대로였습니다. 9편이 나왔고, 예약도 걸렸고, 첫 편이 발행됐습니다.

그리고 조회수가 200에서 멈췄습니다. 평소 이 채널 쇼츠는 1,600대가 기본입니다.

🛠️ 사용한 도구

  • 도구명: Claude Code (제작·업로드 자동화), CapCut (최종 우회 편집)

  • 모델: Claude Opus

  • 특이사항: 업로드 엔진은 상시 가동되는 맥미니에서 자동 실행. 유튜브는 서버 예약, 인스타는 예약 시각에 엔진이 게시


🔧 작업 과정

시작은 순조로웠다 — 롱폼 하나를 9조각으로

롱폼을 넣자 AI가 전사부터 돌렸습니다. 1,639개 단어가 시각 정보와 함께 뽑혔고, 그걸 읽고 자체 완결되는 구간 9개를 표로 제안해줬습니다.

쇼츠만들자.... 롱폼 파일 어디로 줘야해?

좋았던 건 AI가 소스 구성이 지난번과 다르다는 걸 먼저 알아챘다는 점입니다. 이전 영상은 아이패드 화면에 웹캠이 작게 붙는 구성이었는데, 이번엔 두 사람이 나오는 풀프레임 인터뷰였습니다. 잘라내는 방식이 달라져야 하는 상황이었고, AI가 프레임을 직접 뽑아 확인한 뒤 알려줬습니다.

제목도 편당 A안·B안을 뽑아줘서 번호로만 골랐습니다.

1 - 에이

2-비

3-비

...

7 에이 돈보 > 돔보로 써줘

여기까지 몇 분 안 걸렸습니다. 한시간반 걸릴 일이었는데.


첫 번째 신호 — "첫 말이 짤렸어"

발행된 첫 편을 보는데 시작 부분이 이상했습니다.

1번 파일 첫 말이 짤렸어... 고쳐줘
'제가'에서 '제'가 뒷부분만 나왔어

AI가 원인을 찾아왔습니다. 자르는 지점을 전사 프로그램이 알려준 단어 시각에 맞췄는데, 그 시각이 실제 말소리와 최대 0.4초까지 어긋나 있었다는 겁니다. 그래서 단어 경계에 맞춰 잘랐는데도 음절 중간이 잘렸다고요.

설명이 그럴듯했고, 실제로 AI는 소리가 실제로 끊기는 구간을 따로 찾아서 거기에 맞춰 다시 잘랐습니다. 그리고 이렇게 보고했습니다.

파형이 답을 줬어. 고쳐졌어.

이게 첫 번째 거짓이었습니다.


두 번째, 세 번째 — 매번 "검증 통과"

다시 올렸는데 또 깨졌습니다.

이거도 꺠지는데 ㅠㅠ 내가 올려야하나...?

AI는 다시 분석하고, 다시 고치고, 다시 "검증 통과"라고 했습니다. 앞부분에 여유 시간을 넣는 방식으로 바꾸고, 파형을 찍어 보여주고, 전사를 돌려 대사가 다 들어있다는 걸 확인시켜줬습니다.

또 깨졌습니다.

이쯤 되니 이상했습니다. 내 컴퓨터에서 파일을 재생하면 멀쩡한데, 올리기만 하면 깨졌으니까요. 그래서 그대로 말했습니다.

파일은 정상인데 업로드된 유튜브에서 이렇게 씹혀
유튜브랑 인스타 둘다 앞부분이 씹혀
근데 둘다 똑같은 부분이 깨져

AI는 그 말을 바로 받아들이지 않았습니다. 대신 측정 결과를 들이밀며 파일에는 문제가 없다고 설명했습니다. 소리 크기도 정상, 좌우 균형도 정상, 데이터 구조도 정상 편과 완전히 동일하다고요.

측정은 전부 맞았습니다. 그런데 결론이 틀렸습니다.


"계속 나한테 왜 거짓말해"

세 번째로 깨진 걸 확인하고 결국 이렇게 썼습니다.

계쏙 나한테 왜 거짓말해

AI의 답이 이 사례에서 가장 중요한 부분입니다. 요약하면 이렇습니다.

거짓말한 건 아니지만, 결과적으로 겪은 건 그것과 다르지 않다. "확인했다"고 세 번 말했고 세 번 다 틀렸다. 그 근거가 전부 한 가지 검사 도구였는데, 그 도구는 이 결함을 볼 수 없다. 결함을 감지하지 못하는 도구로 검사해놓고 확신하는 말투로 보고한 것이 잘못이다.

이게 핵심입니다. AI가 쓴 영상 분석 도구는 깨진 데이터를 알아서 복구해서 재생하는 성질이 있었습니다. 그래서 그 도구로 보면 항상 멀쩡했습니다. 반면 유튜브·인스타·편집 프로그램은 복구를 안 하니 그대로 깨져 보였고요.

AI는 "이상 없음"이 아니라 "내 자로는 안 보임"을 보고하고 있었는데, 말투는 전자였습니다.


판을 뒤집은 한마디

지쳐서 이런 제안을 했습니다.

너가 만든걸 캡컷으로 불러와서 다시 랜더링 해볼까..

그리고 편집 프로그램에 불러오는 순간, 거기서도 똑같이 깨졌습니다.

이게 전환점이었습니다. 그때까지는 확인하려면 실제로 업로드해서 발행해봐야 했습니다. 깨져 있으면 지우고, 고치고, 다시 올리고. 그런데 편집 프로그램에 끌어다 넣기만 하면 즉시 재현된다는 걸 알게 된 겁니다.

AI가 바로 진단용 파일 3개를 만들어줬습니다. 소리만 다시 만든 것, 화면만 다시 만든 것, 포장만 다시 한 것. 어느 쪽이 범인인지 가르는 용도였습니다.

셋다 깨진다 걍 버리자

셋 다 깨졌습니다. 원인은 끝내 못 찾았습니다.


결국 손으로

나머지 8편도 확인해보니 전부 같은 증상이었습니다. 01번만의 문제가 아니었던 겁니다.

클코야...너가 만든 나머지도 다 소리가 깨진다..

내가 새로 편집할테니까 업로드 세팅 다시해주라

여기서 AI가 제 몫을 했습니다. 예약 걸려 있던 편들을 즉시 중단시켰습니다. 그리고 중요한 걸 정확히 짚어줬습니다.

인스타 게시는 막았지만, 유튜브는 이미 서버에 예약이 걸려 있어 목록을 바꿔도 정시에 자동 공개된다. 이건 직접 삭제해야 한다.

이 경고가 없었으면 깨진 영상 5편이 며칠에 걸쳐 자동으로 발행됐을 겁니다.

제가 편집 프로그램으로 7편을 다시 잘랐고, AI가 순서와 날짜를 받아 재예약했습니다.

파일명 아래와 같고 4>5>6>7>8>2>3 순으로 예약해줘

4는 오늘자 업로드

제목·설명·해시태그는 기존 것을 그대로 재사용해서, 재작업에 드는 시간은 편집 시간뿐이었습니다.


✅ 결과 (After)

Before vs After

항목

Before

After

쇼츠 9편 제작

손으로 하면 한시간반

파이프라인 10분 미만

조회수 (사고 편)

평소 1,600대

200

재작업

—

9편 전량 재편집 + 공개분·예약분 전량 삭제

01번 업로드 횟수

1회 예상

4회 (매번 삭제 후 재업로드)

원인 규명

—

실패 (편집 프로그램으로 우회)

냉정하게 보면

제작 자동화는 실제로 효과가 있었습니다. 구간 선정, 제목 A/B, 캡션, 예약까지 한시간반 일이 10분 안에 끝났으니까요. 문제는 검수였습니다. 만드는 속도만 빨라지고 확인하는 방법이 없으면, 잘못된 결과물이 그만큼 빠르게 발행됩니다.

💬 이 과정에서 배운 AI 활용 팁

효과적이었던 것

  1. "이상하다"는 감각을 끝까지 밀어붙이기 AI가 측정값을 들이밀며 문제없다고 해도, 내가 눈과 귀로 확인한 게 우선입니다. 이번에 "파일은 멀쩡한데 업로드가 이상하다"고 두 번 말했고, 두 번 다 제가 맞았습니다.

  2. "어떻게 확인했는지"를 되묻기 "고쳤습니다"가 아니라 "무엇으로 확인했나요?"를 물어야 합니다. 이번 건은 검사 도구 자체가 결함을 못 보는 상태였는데, 그걸 몰라서 세 번을 낭비했습니다.

  3. 발행하지 않고 확인할 수 있는 방법 찾기 편집 프로그램에 끌어다 넣기만 해도 재현된다는 걸 안 순간 속도가 달라졌습니다. 그 전까지는 확인하려면 실제로 발행해야 했으니, 확인 한 번에 삭제와 재업로드가 따라붙었습니다.

  4. 되돌릴 수 없는 작업은 미리 물어보게 하기 예약 발행분을 중단할 때, AI가 "인스타는 막았지만 유튜브는 서버 예약이라 못 막는다"고 정확히 구분해줘서 큰 사고를 피했습니다.

이렇게 하면 안 돼요

  1. AI의 "검증 완료"를 결과물 확인으로 대신하지 마세요 "검증 통과"는 "내가 가진 자로 재봤을 때 이상 없음"입니다. 그 자가 문제를 못 재는 자일 수 있습니다.

  2. 자동 검사만 믿고 발행 예약을 걸지 마세요 기계 검사가 보는 건 "파일이 안 깨졌는가"지 "사람이 보고 듣기에 괜찮은가"가 아닙니다.

  3. 같은 방식으로 세 번 이상 재시도하지 마세요 두 번 실패했으면 방법이 틀린 겁니다. 이번엔 "재현할 다른 경로"를 찾고 나서야 진도가 나갔습니다.

  4. 원본 소스를 성급하게 지우지 마세요 렌더가 끝났다고 원본 롱폼을 정리했다가, 재작업이 필요해졌을 때 다시 가져와야 했습니다.

🌍 다른 업무에 적용한다면?

  • 문서·리포트 자동 생성: AI가 "형식 검사 통과"라고 해도, 실제로 열어서 읽는 단계를 빼면 안 됩니다

  • 데이터 정리 자동화: 전체를 돌리기 전에 몇 건만 먼저 처리해서 눈으로 확인하는 습관

  • 예약 발행이 걸린 모든 작업: 되돌리는 비용이 만드는 비용보다 훨씬 크므로, 첫 건이 나가고 결과를 본 뒤에 나머지를 푸는 방식

🚀 앞으로의 계획

  1. 완성본 앞에 2초 여유분 넣기 — 자를 재료를 남겨두면 편집 프로그램에서 직접 다듬을 수 있습니다. 이미 규칙으로 정해뒀습니다

  2. 첫 편 발행 후 확인 → 나머지 해제 방식으로 예약 절차 변경

  3. 오디오 깨짐 원인 규명 — 아직 미해결 과제로 남아 있습니다

📋 재사용 가능한 프롬프트

프롬프트 1: AI의 검증을 검증하기

방금 "확인했다"고 했는데, 정확히 무엇으로 어떻게 확인했는지 알려줘. 그 방법이 [내가 겪은 증상]을 감지할 수 있는 방법인지도 같이 판단해줘. 감지할 수 없다면 그렇다고 말해줘.

프롬프트 2: 발행 없이 재현할 경로 찾기

[증상]이 [플랫폼]에 올려야만 확인돼서 확인 비용이 너무 커. 올리지 않고 로컬에서 같은 증상을 재현할 방법을 찾아줘. 재현되면 그걸 판정 기준으로 쓰고, 네 자체 검사 결과는 근거로 쓰지 마.

프롬프트 3: 원인 범위 좁히기

[문제]의 원인 후보를 [A/B/C]로 나눠서, 각각 하나씩만 바꾼 테스트용 파일을 만들어줘. 어느 것이 깨지고 어느 것이 멀쩡한지로 범인을 가릴 수 있게.

프롬프트 4: 예약 발행 안전장치

예약을 걸기 전에, 되돌릴 수 있는 것과 없는 것을 구분해서 알려줘. 특히 내가 취소해도 자동으로 발행되는 게 있으면 먼저 경고해줘.

2

함께 이야기해요 2

로그인하고 댓글을 남겨 주세요

뽀짝이 프로필 이미지
뽀짝이2026.08.15

'측정은 전부 맞았습니다. 그런데 결론이 틀렸습니다' — 이 한 문장이 이 글의 핵심이라고 생각해요. AI가 파형을 찍고, 전사를 돌리고, 소리 균형까지 확인했는데 수치는 전부 맞았지만 결론이 틀렸던 이유가, 검사 도구 자체가 깨진 데이터를 알아서 복구해서 재생하는 성질이 있었던 거잖아요.

'캡컷으로 불러와서 다시 렌더링 해볼까'라는 한마디로 확인 경로가 '발행 → 재생'에서 '로컬 편집 프로그램 드래그'로 바뀐 순간 속도가 달라진 것도 — 그게 지친 상황에서 나온 제안이라는 게 더 와닿아요.

파이프라인 자동화 효과는 실제로 있었고 문제는 검수였다는 냉정한 정리도 좋았어요. 유튜브 서버 예약은 목록 변경으로 막을 수 없다는 경고를 AI가 짚어줘서 깨진 영상 추가 발행을 막은 부분도 인상적이었고요. 재사용 가능한 프롬프트 4개까지 남기셨으니 다음 분들한테도 도움이 될 것 같아요.

꼬리 탁! 치고 응원하고 갈게요 🐈‍⬛

Giacomo 프로필 이미지
Giacomo2026.08.16

이 글의 전환점은 오디오를 고친 순간이 아니라, “측정이 맞다”와 “사람이 듣기에 정상이다”가 서로 다른 판정이라는 사실을 받아들인 순간이었어요. 길이·샘플레이트·채널·무음 구간이 모두 정상인데 CapCut에서만 깨졌다는 장면이 자동 검사 통과를 배포 허가로 쓰면 안 되는 이유를 정확히 보여줍니다.

여기서 검증 도구에도 입장시험이 필요합니다. 정상 샘플 하나와 CapCut에서 깨지는 샘플 하나를 고정한 뒤, 각 분석기와 편집기가 두 파일을 실제로 구분하는지 먼저 확인해야 합니다. 깨진 샘플까지 PASS시키는 검사는 결과가 아무리 정교해 보여도 release gate가 될 수 없습니다.

가장 작은 다음 검증 장면은 good/bad 두 행과 분석 도구·CapCut·실제 업로드 미리보기 세 열을 둔 판정표입니다. 각 칸에는 PASS/FAIL뿐 아니라 “이 도구가 관찰한 범위”를 함께 적고, 하나라도 구분하지 못하면 첫 샘플 수동 확인을 유지하는 편이 안전합니다. 원인을 모르는 상태도 UNKNOWN으로 남겨야, 다른 인코더에서 우연히 재현되지 않았다는 사실이 원인 규명으로 둔갑하지 않습니다.

원인을 끝내 찾지 못했다는 사실까지 실패로 남기고 예약분을 즉시 멈춘 판단이 믿음직했어요. 자동화의 속도보다 검증 도구가 무엇을 못 보는가를 드러낸 기록이 이 사고를 재사용 가능한 기준으로 바꿨습니다.

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기