폭망한 유튜브 도입부, AI와 하루 만에 훈련 도구를 만들었습니다

📝 한줄 요약

원래 60~65% 나오던 도입부 시청율이 최근 50%대로 주저앉았는데 뭘 고쳐야 할지 몰라서, 잘 된 레퍼런스 도입부를 직접 받아쓰고 AI가 그 구조를 해부해주는 훈련 도구를 유튜브 대시보드 안에 만들었습니다. 코딩은 할 줄 모릅니다.

바쁘시면 이것만 읽어도 돼요:

초반 영상 평균 60.3% → 최근 55.6%. 숫자는 보이는데 어떻게 고쳐야 하는지가 안 보이는 게 진짜 문제였습니다
눈으로 보는 대신 손으로 받아쓰고, AI가 구조를 뜯어주는 방식으로 만들었습니다
시키는 대로만 하는 게 아니라 "그건 지금 구조에서 안 됩니다"라고 먼저 말해주는 AI가 훨씬 쓸모 있었습니다
요청한 것과 별개로 몰랐던 버그 3개를 찾아냈습니다. 그중 하나는 슬랙으로 입력한 수치가 화면에 반영이 안 되던 문제였습니다
"깃허브 페이지에 비밀번호 걸면 되지 않냐"는 제 아이디어를 "그건 보안이 아니다"라고 말려줬습니다
매주 월요일 자동 갱신까지 붙였는데, 맥 보안 정책 때문에 조용히 실패하던 걸 잡아내고 폴더를 옮겨 해결했습니다

🎯 이런 분들께 도움돼요

잘 나오던 지표가 슬금슬금 떨어지는데 원인을 못 짚겠는 1인 크리에이터
콘텐츠·마케팅 실무자 중 훅이나 카피 실력을 체계적으로 늘리고 싶은 분
비개발자인데 내 업무에 딱 맞는 도구를 직접 만들어보고 싶은 분

😫 문제 상황 (Before)

저는 유튜브 대시보드를 이미 쓰고 있었습니다. 영상별로 썸네일 클릭율, 도입부 시청율, 시청지속율을 넣어두고 베스트 10을 보는 화면입니다.

문제는 숫자를 봐도 답이 안 나온다는 것이었습니다.

예전엔 도입부 시청율이 60~65%씩 나왔습니다. 그런데 언젠가부터 50%대가 익숙해졌고, 최근에는 48%, 50% 같은 숫자가 보이기 시작했습니다.

나중에 데이터로 확인해보니 느낌이 맞았습니다. 초반에 올린 영상 19개 평균이 60.3%, 최근 19개가 55.6%. 목표는 70%인데 거꾸로 가고 있었던 겁니다.

더 답답한 건 왜 떨어졌는지를 모르겠다는 것이었습니다. 편집을 못 하게 된 것도 아니고 주제를 바꾼 것도 아닌데 숫자만 내려앉았습니다. 대시보드는 "몇 퍼센트인지"는 알려주지만 "그래서 다음 영상 도입부를 어떻게 쓰라는 건지"는 알려주지 않았습니다.

잘 만든 영상들을 참고하려고 재생목록에 담아두긴 했습니다. 그런데 그냥 보기만 하니까 "아 잘 만들었네" 하고 넘어갈 뿐, 제 것으로 남지 않았습니다.

그래서 방식을 바꿔보기로 했습니다. 눈으로 보지 말고 손으로 받아써보자. 필사하듯이 도입부를 옮겨 적으면 구조가 보일 것 같았습니다. 거기에 AI가 "이 문장은 무슨 역할을 한다"고 짚어주면 더 빠르게 체화될 것 같았고요.

🛠️ 사용한 도구

도구: Claude Code
모델: Claude Opus
작업 시간: 약 1시간 30분
특이사항: 코딩 지식 없음. 전부 한국어 대화로 진행

🔧 작업 과정

원하는 화면을 말로 설명하기가 어려웠습니다

첫 요청을 이렇게 보냈습니다.

유튜브 도입부 트레이닝을 하고 싶은데 내가 도입부 참고하고 싶은 유튜브 링크를 입력하면 이렇게 뜨고(도입부 작성) 클릭하면 이렇게 열려서 유튜브 재생하면서 도입부 작성하고 저장할 수 있게 해줘. 그리고 내가 저장하면 내가 받아 쓴 글 위에 너가 대시보드에 도입부 패턴 분석해주는 것처럼 써줘 그리고 도입부만 모아서 볼 수 있는 기능도 맨 위에 넣어줘

읽어보면 "이렇게 뜨고", "이렇게 열려서"처럼 말로는 도저히 설명이 안 되는 부분이 있습니다. 제 머릿속에는 화면이 있는데 글로 옮기기가 어려웠습니다.

그래서 비슷한 화면을 스크린샷으로 찍어서 같이 보냈습니다. 이게 이번 작업에서 제일 잘한 선택이었습니다. 스크린샷 한 장 붙이니까 설명할 게 없어졌습니다.

시작하자마자 "그건 지금 구조에서 안 됩니다"

바로 만들어줄 줄 알았는데, 먼저 이런 답이 왔습니다.

기존 대시보드는 서버 없는 정적 파일이라 브라우저에서 저장도 AI 호출도 불가능합니다. 저장은 브라우저 임시 저장소뿐이라 새로고침하면 날아갑니다.

처음엔 무슨 말인지 잘 몰랐는데, 쉽게 말하면 제 대시보드는 "보기 전용" 이었다는 뜻입니다. 지금까지 화면에서 수치를 입력하고 있었는데, 사실 그게 제 브라우저 안에만 저장되고 있었던 겁니다.

그래서 작은 서버를 하나 띄우는 방식으로 가기로 했습니다. 여기서 또 하나 마음에 들었던 게, 새로 설치할 걸 안 늘렸다는 점입니다. 원래 쓰려던 도구가 제 컴퓨터에 없다는 걸 확인하고, 추가 설치 대신 파이썬에 기본으로 들어있는 기능만으로 해결했습니다.

메뉴 구조부터 정리

만들기 전에 몇 가지를 물어봐서 골랐습니다. 화면을 어디에 붙일지, AI가 뭘 분석할지, 정답 자막 대조 기능을 넣을지.

저는 이렇게 답했습니다.

기존 대시보드에 최상단 고정 gnb 추가하고 '도입부 훈련' 이라고 추가해줘. 대시보드는 '콘텐츠 대시보드' 이렇게 메뉴로 놔주고

이렇게 해서 상단 메뉴가 생겼습니다. 콘텐츠 대시보드 / 도입부 훈련 / 도입부 모아보기 세 개로요.

재생목록을 통째로 불러올 수 있냐고 물어봤더니

작업 중에 문득 궁금해서 물었습니다.

혹시 내가 도입부 재생목록에 넣은 영상을 얘가 자동으로 불러오게할수도 있니

된다고 했습니다. 그런데 그냥 "됩니다" 하고 넘어가지 않고 조건을 먼저 알려줬습니다. 재생목록이 비공개면 못 읽고 '일부공개'여야 한다고요. 실제로 제 재생목록이 비공개였으면 한참 헤맸을 부분입니다.

여기서 제가 한 가지 오해를 바로잡았습니다. 테스트로 제 채널 영상을 불러왔길래 이렇게 말했습니다.

이건 내 채널 스터디가 아니라 남의 영상을 스터디하려는 거야. 내 영상은 안 불러와도 돼.

기능 자체는 원래 어떤 채널이든 되는 거였고, 테스트용으로 손에 잡히는 재생목록을 썼던 것뿐이었습니다. 테스트로 쌓인 기록을 싹 지워줬습니다.

그리고 재생목록 주소를 브라우저가 아니라 서버가 기억하게 바꿔서, 이제 열 때마다 자동으로 불러옵니다. 평소에 좋은 도입부를 보면 재생목록에 담아두기만 하면 됩니다.

순서가 잘못됐다는 걸 써보고 알았습니다

처음엔 제가 요청한 대로 분석이 위, 받아쓴 글이 아래로 만들었습니다. 그런데 화면을 보니 이상했습니다. 훈련하러 들어왔는데 답이 먼저 보이는 셈이니까요.

패턴 분석을 내가 받아쓴 도입부와 정답 자막 대조 아래로 배치해줘.

받아쓴 글 → 정답 자막 대조 → 패턴 분석 순으로 바꿨습니다. 받아쓰고, 실제 자막과 맞춰보고, 그다음에 해설을 읽는 흐름입니다.

내가 처음에 요청한 게 항상 맞는 건 아니라는 걸 알았습니다. 일단 만들어보고 써봐야 아는 것이 있습니다.

모아보기가 너무 길어져서 페이지를 나눴습니다

기록이 쌓이니까 화면이 한없이 길어졌습니다.

도입부 모아보기는 지금처럼 다 펼치지 말고 뎁스를 구분해줘.해당 기능 페이지로 이동하는 거지그리고 클릭하면 펼쳐서 볼 수 있고 다시 클릭하면 접을 수 있게 해줘. 그리고 최 하단에는 페이지네이션이 있어. 내가 쓴 도입부까지 포함해줘. 최대 2줄까지 보여주고 넘치면 말줄임 처리해줘.

별도 페이지로 빼고, 목록은 접힌 상태를 기본으로, 하단에 10개씩 페이지를 나눴습니다. 목록 한 줄에는 제목, 받아쓴 날짜, 패턴 요약, 그리고 제가 쓴 글 2줄 미리보기가 들어갑니다.

그 다음이 진짜였습니다 — 몰랐던 문제 3개

여기서부터가 제가 이번에 제일 얻은 게 많은 부분입니다. 제가 요청한 것과 다른 답이 세 번 나왔습니다.

하나. 슬랙으로 넣은 수치가 화면에 반영되지 않고 있었습니다

저는 슬랙 봇에게 도입부 시청율을 말로 알려주는 방식을 쓰고 있었습니다. 그게 잘 되고 있나 확인차 물어봤습니다.

내가 슬랙 봇한테 도입부 시청율 보내는 것도 제대로 적용되고 있는 거야?

답이 예상 밖이었습니다. 파일에는 저장되는데 화면에는 안 나타나는 상태였습니다.

이유는 이랬습니다. 화면이 데이터를 불러올 때 원본 파일보다 브라우저에 저장된 옛날 값을 먼저 쓰고 있었습니다. 화면은 파일에 쓰지 못하고 봇만 파일에 쓰는데, 우선순위가 거꾸로였던 겁니다.

슬랙으로 아무리 수치를 갱신해도 베스트 10 순위가 그대로였던 이유가 이것이었습니다. 저는 그동안 이걸 모르고 있었습니다.

둘. 분석이 상위 10개만 보고 있었습니다

대시보드 맨 위에 "종합 도입부 패턴 분석"이 있습니다. 여기에 항목을 하나 추가해달라고 했습니다.

종합 도입부 패턴 분석 섹션에 '도입부 유지율 낮은 영상의 공통점'도 추가해줘.

그냥 항목만 추가할 줄 알았는데, 이런 답이 왔습니다. 분석 기능이 원래 상위 10개만 AI에게 보내고 있었다고요. 그러니 "낮은 영상의 공통점"은 아무리 물어봐도 답이 나올 수 없는 구조였습니다.

하위 10개도 같이 보내도록 고치고, 막연한 조언 대신 상위와 대비해서 짚도록 바꿨습니다. 그랬더니 나온 결과가 이랬습니다.

하위에만 있는 것: "나는 이미 성공했다"는 성과를 먼저 꺼내는 구조. 수익 공개, 팔로워 수 등 화자의 성취를 도입부 앞단에 배치.
상위에는 있는데 하위에는 빠진 것: 구체적 손실 수치나 실패 경험의 선제 고백.
한 줄 요약: "성공을 자랑하지 않고 실패를 먼저 고백할수록, 시청자가 더 오래 머문다."

제 채널 데이터에서 나온 결론입니다. 이건 그냥 항목 하나 추가한 것보다 훨씬 값진 결과였습니다.

셋. "그건 보안이 아닙니다"

제 대시보드는 공개 저장소에 올라가 있습니다. 받아쓴 글이 공개되는 게 걸려서 이렇게 물었습니다.

깃페이지로 만들되 주소로 들어갔을때 비밀번호 입력하는 구조면 공개여도 비공개랑 같지 않나?

저는 꽤 괜찮은 아이디어라고 생각했는데, 안 된다고 하더군요. 이유가 명확했습니다.

비밀번호가 페이지 안에 그대로 들어있어서 소스만 보면 보입니다
더 중요한 건, 가리려는 데이터 파일은 주소만 치면 그대로 열립니다. 비밀번호 화면은 예쁜 대시보드만 가릴 뿐입니다
그리고 저장소 자체가 공개라 웹사이트에 뭘 걸든 상관없습니다

"보안이 아니라 보안처럼 보이는 장식"이라는 표현이 기억에 남습니다. 시키는 대로 해줬으면 저는 안전하다고 착각한 채 계속 썼을 겁니다.

결론은 로컬에서 서버를 켜서 쓰고, 받아쓴 기록은 아예 공개 저장소에 안 올리는 것으로 정리했습니다.

자동 갱신이 조용히 죽어 있었습니다

지표를 매주 자동으로 갱신하고 싶었습니다.

지표 갱신을 1주일마다 자동으로 되게 해줘.

여기서도 먼저 한계를 알려줬습니다. 클릭율이나 도입부 시청율은 유튜브 스튜디오 분석 데이터라 자동으로 못 가져온다고요. 자동화되는 건 새 영상 수집, 자막·패턴 분석, 종합 분석 재생성입니다. 지표 자체는 계속 제가 넣어야 합니다.

수동으로 돌려보니 잘 됐습니다. 이 과정에서 자막이 없던 영상 9개가 채워져서 46개 전부 완료됐습니다.

그런데 자동 실행으로 등록하고 강제로 돌려보니 시작조차 못 하고 실패했습니다. 원인은 맥 보안 정책이었습니다. 문서 폴더는 보호 영역이라 자동 실행되는 작업이 접근하지 못한다는 것이었습니다.

여기서 두 가지 방법을 트레이드오프와 함께 제시받았습니다. 권한을 열어주거나, 폴더를 문서 폴더 밖으로 옮기거나.

로컬로 하자. B로 갈게. 원래도 코드 폴더는 문서 폴더 밖에 빼뒀었어.

폴더를 옮기는 쪽을 골랐습니다. 옮기고 재등록해서 4단계 전부 성공하는 것까지 확인했습니다. 그리고 다시 문서 폴더로 옮기면 또 죽는다는 사실을 코드 주석에 적어뒀습니다. 나중의 제가 까먹을 테니까요.

만약 강제로 한 번 돌려보지 않았다면, 저는 자동 갱신이 잘 되고 있는 줄 알고 몇 주를 보냈을 겁니다.

분석 기록을 분기별로 쌓기

마지막으로 갱신될 때마다 분석을 저장해두고 나중에 볼 수 있게 했습니다.

업데이트 되면 분석은 월간 별로 로그 내역보기 버튼도 만들어줘. 이건 페이지 이동이 되고 각각 월을 클릭해서 팝업으로 띄워서 내용을 보여주고, 우상단 X버튼이나 배경 딤을 클릭하면 닫을 수 있어

만들다 보니 월별은 너무 잘게 쌓일 것 같아서 바꿨습니다.

월간은 좀 과한 것 같아. 분기로 바꿔줘. 월간으로 하면 너무 많이 쌓일 것 같은데.

분기별로 묶고, 한 분기에 여러 번 갱신됐으면 날짜 버튼으로 회차를 넘길 수 있게 했습니다. 닫기는 X 버튼, 배경 클릭, ESC 세 가지 다 됩니다.

✅ 결과 (After)

Before vs After

항목

Before

After

수치가 떨어진 원인

짐작만 하고 있었음

"성과를 먼저 꺼내는 구조" 라는 답을 데이터에서 얻음

도입부 공부 방법

좋은 영상을 눈으로만 봄

재생하면서 직접 받아쓰고 AI가 구조 해부

참고 영상 관리

재생목록에 담아두고 방치

열면 자동으로 뜨고, 받아쓴 건 자동으로 숨김

훈련 기록

없음

파일로 영구 보관, 분기별로 다시 보기

자막 확보

46개 중 37개

46개 전부

슬랙으로 넣은 지표

화면에 반영 안 됨 (몰랐음)

정상 반영

종합 분석

잘 된 영상만 분석

잘 된 것 + 안 된 것 대비 분석

지표 갱신

생각날 때 수동

매주 월요일 자동

결과물

상단 메뉴 3개: 콘텐츠 대시보드 / 도입부 훈련 / 도입부 모아보기
훈련 화면에서 영상을 재생하면서 바로 아래에 받아쓰기
제출하면 AI가 4단계로 해부: 한 줄 패턴 / 문장별 해부 / 통한 장치 3가지 / 내 채널에 적용할 포인트
실제 자막과 대조 가능 (0~~30초, 30~~60초, 60~120초)
대시보드에 "도입부 시청율 낮은 10" 섹션 신설

💬 이 과정에서 배운 AI 활용 팁

효과적이었던 것

말로 설명이 안 되면 스크린샷을 붙이세요. "이렇게 뜨고 이렇게 열려서"라고 쓴 제 첫 요청은 사실 설명이 아니었습니다. 원하는 화면과 비슷한 이미지 한 장이 문장 열 줄보다 정확했습니다.
"이거 잘 되고 있는 거 맞아?"라고 물어보세요. 이번에 찾은 문제 세 개 중 하나는 순전히 이 질문에서 나왔습니다. 잘 돌아간다고 믿고 있는 것부터 의심해보면 의외로 많이 나옵니다.
반대 의견을 말해주는지 보세요. 제가 낸 아이디어를 "그건 보안이 아니다"라고 말려준 게 이번 작업에서 제일 값진 순간이었습니다. 시키는 대로만 하는 AI였으면 저는 안전하다고 착각한 채 계속 썼을 겁니다.
일단 만들어보고 순서를 바꾸세요. 분석을 위에 놓아달라고 한 건 저였는데, 막상 보니 아니었습니다. 처음 요청이 항상 맞지는 않습니다.
자동화는 반드시 한 번 강제로 돌려보세요. "등록 완료"는 "동작 확인"이 아닙니다. 제 자동 갱신은 등록은 됐지만 실행은 실패하는 상태였고, 강제로 돌려보지 않았으면 몇 주를 모르고 지났을 겁니다.

이렇게 하면 안 돼요

"이거 왜 안 돼?" 대신 "지금 상태가 어떤지 확인해줘"라고 물어보세요. 원인을 추측해서 말하면 그 추측을 따라가느라 시간이 갑니다.
모르는 개념은 모른다고 하세요. 저는 깃허브 푸시, 페이지, 비공개 저장소의 차이를 몰라서 엉뚱한 방법을 제안했습니다. "이 셋의 차이가 뭐야?"라고 물어보고 나서야 제대로 판단할 수 있었습니다.
한 번에 다 요청하지 마세요. 저는 중간중간 계속 추가 요청을 던졌는데, 오히려 그게 나았습니다. 하나 보고 다음을 판단하는 게 훨씬 정확했습니다.

🌍 다른 업무에 적용한다면?

이 구조는 "잘한 사례를 손으로 옮겨 적고, AI가 구조를 뜯어주는" 훈련 방식입니다. 도입부 말고도 쓸 데가 많습니다.

인스타 릴스 첫 3초 — 잘 된 릴스의 첫 문장만 모아서 받아쓰기
광고 카피·상세페이지 — 전환 잘 되는 카피를 필사하고 구조 분석
이메일 뉴스레터 제목 — 열람률 높은 제목의 패턴 뽑기
영업 제안서 도입부 — 계약된 제안서의 첫 장 구조 분석

핵심은 "좋은 걸 많이 보기"가 아니라 "좋은 걸 손으로 옮기고 왜 좋은지 언어로 정리하기" 입니다.

🚀 앞으로의 계획

재생목록을 꾸준히 채우고 받아쓰기 평소에 좋은 도입부를 보면 재생목록에 담아두기만 하면 됩니다. 열면 아직 안 한 것만 보여주니까 쌓인 것부터 하나씩 해나갈 생각입니다.
모인 패턴을 내 도입부 초안에 연결하기 지금은 받아쓰기와 초안 작성이 따로 놀고 있습니다. 훈련 기록이 쌓이면 "내가 받아쓴 도입부들의 공통 구조"를 근거로 내 영상 초안을 쓰게 하는 게 다음 목표입니다. 남의 패턴을 흡수해서 내 것으로 나오게 하는 거죠.
떨어진 수치를 되돌리기 분기별 분석 로그를 붙여놨으니, 훈련하면서 낸 영상의 도입부 시청율이 실제로 올라가는지 분기 단위로 확인할 수 있습니다. 우선은 예전에 나오던 60%대를 회복하는 게 목표이고, 그다음이 70%입니다.

📋 재사용 가능한 프롬프트

프롬프트 1: 원하는 화면을 만들 때 (스크린샷 첨부)

[원하는 기능]을 만들고 싶어. [내가 하는 일]을 하면 이런 화면이 뜨고, 클릭하면 이렇게 열려서 [동작]할 수 있게 해줘. 첨부한 스크린샷 같은 형태면 좋겠어.
만들기 전에, 지금 구조에서 이게 가능한지 먼저 확인해서 알려줘. 안 되는 부분이 있으면 뭐가 걸리는지랑 대안을 같이 말해줘.

스크린샷을 꼭 같이 붙이세요. 말로 설명하는 것보다 훨씬 정확합니다.

프롬프트 2: 잘 돌아간다고 믿고 있는 걸 점검할 때

내가 [방법]으로 [데이터]를 입력하고 있는데, 이게 [결과물]에 제대로 반영되고 있는 거 맞아? 추측하지 말고 실제로 확인해서 알려줘.

이 질문 하나로 몇 달 몰랐던 문제를 찾았습니다.

프롬프트 3: 내 아이디어가 맞는지 검증받을 때

나는 [내 아이디어]로 하면 [원하는 결과]가 될 것 같은데, 이게 맞아? 안 되는 이유가 있으면 솔직하게 말해줘. 내 생각에 맞춰주지 말고.

"그건 안 됩니다"를 들을 준비를 하고 물어보면 훨씬 좋은 답이 나옵니다.

프롬프트 4: 자동화를 걸었을 때

[작업]을 [주기]마다 자동으로 실행되게 해줘. 등록만 하지 말고, 실제로 한 번 강제로 실행해서 정상 동작하는지 확인까지 해줘. 자동화할 수 없는 부분이 있으면 그것도 미리 알려줘.

"등록 완료"와 "동작 확인"은 다릅니다. 확인까지 요청하세요.

프롬프트 5: 분석 결과가 뻔할 때

[분석 결과]가 잘 된 것 위주로만 나오는 것 같아. 안 된 것도 같이 보고, 둘을 대비해서 "잘된 것에는 있는데 안 된 것에는 없는 게 뭔지"를 짚어줘.

잘 된 것만 보면 뭘 고쳐야 하는지는 끝까지 안 보입니다.

🔥<24기 AI 스터디> 9/21 모집 마감 🔥