본문으로 건너뛰기

[Hermes] 워크봇한테 lo-fi 유튜브 플레이리스트를 통째로 맡겼더니, 봇의 "스킬"과 "기억"이 스스로 진화했다

TJ

2026.06.03

[Hermes] 워크봇한테 lo-fi 유튜브 플레이리스트를 통째로 맡겼더니, 봇의 "스킬"과 "기억"이 스스로 진화했다 본문 이미지

📝 한줄 요약

Suno로 음악 여러 곡을 생성 → 플레이리스트로 합쳐 편집 → 비주얼라이저 입혀 1시간 영상으로 → YouTube 업로드하는 전 과정을, 텔레그램 워크봇 3마리에게 통째로 맡겼습니다. 사령탑 대장냥이 가사·기획 픽냥과 실행 척척냥에게 일을 나눠 시키고, 저는 텔레그램에서 리뷰하고 "다시 해줘"만 반복했죠.

그런데 흥미로운 일이 벌어졌습니다. 제가 수정 지시한 내용이 봇의 스킬 문서와 장기기억에 자동으로 쌓여서, 다음 작업에선 같은 말을 안 해도 알아서 하더군요. 이게 스터디가 말하는 "스킬이 자가 진화하는(메가진화)" 의 실제 모습이었습니다.

바쁘시면 이것만:

  • 🐾 봇 분담 + 토픽 분리: 대장냥(위임·요약 전용) → 픽냥(가사·기획) / 척척냥(Suno·렌더·업로드). 각자 전용 텔레그램 토픽.

  • 🎵 플레이리스트 자동화: Suno v5.5로 5개 곡 컨셉 생성 → 12곡 선별 → loudnorm 마스터링 + 3초 크로스페이드로 25개 세그먼트 = 58분 43초 조립.

  • 🔁 제가 한 건 리뷰 → "다시"의 연속: 가사 8차, 비주얼라이저 v1→최종, 메타데이터 다회.

  • 🧬 핵심(2개 층의 자가진화): ① 내 수정 지시가 봇 스킬의 Durable lesson으로 박제 ② 내 취향·규칙을 봇이 관찰·요약해 USER 장기기억에 9개 항목으로 자동 누적 → 봇이 다음엔 안 틀림.

  • 🧱 정직한 벽: CAPTCHA 안전게이트 / 데이터 희소·48h 지연으로 "진화 신호"는 큰 채널에서나 robust.

🎯 이런 분들께 도움돼요

  • 워크봇에게 콘텐츠 제작을 위임하고 싶은데, 매번 똑같은 실수를 반복할까 봐 망설이는 분

  • "리뷰만 했는데 봇이 똑똑해진다"는 자가진화가 마케팅 문구인지, 실제로 뭔지 직접 확인하고 싶은 분

  • Suno → 플레이리스트 → 비주얼라이저 → YouTube lo-fi 채널 자동화의 현실적인 손맛이 궁금한 분


1. 😫 문제 상황 (Before) — 플레이리스트 한 편이 반나절

lo-fi 카페재즈 "1시간 BGM" 영상 한 편을 유튜브에 올리려면, 한 곡이 아니라 여러 곡을 다뤄야 합니다:

  1. Suno로 여러 곡 컨셉을 생성 (좋은 것만 골라야 하니 더 많이 뽑음)

  2. 쓸 만한 곡 선별 + 순서 배치 (지루하지 않게 변주 섞기)

  3. 곡 사이 크로스페이드로 자연스럽게 잇고, 음량 표준화(loudnorm) 로 마스터링

  4. 1시간 분량으로 합쳐 편집

  5. 앨범 커버 → 비주얼라이저(영상 배경) 제작

  6. 썸네일 + 제목 + 타임스탬프 + 다국어 설명 작성

  7. 업로드

혼자 하면 반나절입니다. 그래서 이걸 텔레그램 워크봇들에게 위임하기로 했는데, 진짜 궁금했던 건 따로 있었습니다 — 이 과정에서 봇이 "배우긴" 하는가? 스터디 주제가 "스킬이 자가 진화하는 hermes"인데, 그게 실제인지 직접 검증하고 싶었습니다.


2. 🐾 위임 구조 — 대장냥은 직접 일하지 않는다

봇

역할

전용 텔레그램 토픽

대장냥(orchestrator)

직접 작업 ❌, 픽냥·척척냥에게 위임만 + 결과 요약 보고

🧭 위임/요약

픽냥(piknyang)

가사·제목·스타일 프롬프트·기획

💡 픽냥 토픽

척척냥(ops)

Suno 음원 생성, Remotion 렌더, 메타데이터, 업로드

🛠️ 척척냥 토픽

  • 작업 큐는 SQLite 칸반에 쌓여서, 누가 무슨 작업을 언제 시작·완료했는지 전부 기록됩니다.

  • 토픽을 분리한 이유: 픽냥의 가사 초안은 픽냥 토픽에, 척척냥의 결과물은 척척냥 토픽에 — 대장냥은 요약만. 한 채팅방에 모든 게 뒤섞이지 않게.


3. 🛠️ 실제 제작 과정 — "리뷰 → 다시 해줘"의 연속

음악 (플레이리스트)

  • Suno v5.5로 5개 곡 컨셉을 생성하고 변주를 섞었습니다: Warm Mug Slow Keys · Soft Focus Drizzle · Midnight Coffee Soul · Amber Window Groove · Rain on the Rhodes

  • 새로 뽑은 12곡을 선별(이전 시도작은 제외), 변주를 교차 배치해 25개 세그먼트로 구성.

  • AAC 192k, loudnorm I=-16 / TP=-1.5 / LRA=11, 3초 크로스페이드, 페이드 인/아웃으로 마스터링 → 58분 43초 완성.

비주얼라이저 (단계별 — 실제 이미지 첨부)

영상 배경을 만드는 데 리뷰 왕복이 가장 치열했습니다. 단계별 실제 결과물입니다:

단계

봇이 만든 것

제 피드백 → 결과

이미지

1

정사각 앨범 커버 (비 오는 창·카페·피아노·따뜻한 조명)

좋다, 이걸 기반으로

① 커버 →갤러리

2

커버를 크롭·블러 + 큰 제목 오버레이

"너무 간소화했는데?" → 거부

(거부)

3

원본 분위기를 AI로 16:9 풍경 재생성 (Codex gpt-image-2)

배경 채택, "근데 text는 없네?"

② 16:9 배경 →갤러리

4

하단 웨이브(파장) 추가

"웨이브 애니메이션 좀 별로다"

③ 웨이브 →갤러리

5

웨이브를 얇은 progress line으로 교체 시도

"더 깔끔하지만 비주얼라이저 느낌이 약하다" → 거부

④ progress line(거부) →갤러리

6

v2 스펙트럼으로 복귀 + 색을 부드럽게(앰버/크림, opacity 0.75→0.55) + 제목 오버레이

✅ 채택

⑤ 최종 채택 →갤러리

💡 5→6단계가 발표 포인트입니다. "더 미니멀하고 premium한 progress line"이 객관적으론 깔끔했지만, 음악 비주얼라이저의 정체성(소리가 보이는 느낌)을 잃어서 거부했습니다. 봇은 이 판단을 그대로 학습했습니다(아래 §4). 썸네일도 별도 작업: 썸네일 2종(갤러리 ⑥⑦).

막혔던 벽들 (정직하게)

  • 🟥 Suno CAPTCHA 안전 게이트: 척척냥이 Suno 웹 작업 중 hCaptcha에서 멈춤. ("내 화면엔 안 보이는데?" → 처리 방침을 다시 알려줌)

  • 🟥 2분 프리뷰로는 부족: 짧은 프리뷰만 보고 승인하려다 전체를 봐야 한다 판단 → 58:43 풀렌더 재요청.

  • 🟥 미디어가 텔레그램에 안 보임: 봇이 파일 경로만 보내고 이미지가 안 뜸 → "미디어 캐시에 복사 후 실제 토픽 대상으로 첨부 전송"으로 해결.


4. 🧬 전환점 — 봇이 "스스로" 진화한다 (실측, 2개 층)

여기가 이 사례의 진짜입니다. 위의 리뷰 왕복이 한 번 쓰고 버려진 게 아니라, 봇의 두 곳 — 작업 중 정리한 스킬 문서(references) 와, 봇이 대화를 관찰해 자동 요약하는 장기기억(USER.md) — 에 쌓였습니다.

층 ① 스킬 지식 박제 — references/

봇이 작업 중 만든 스킬 reference 파일에 제 말이 그대로 남아 있습니다:

"너무 간소화 했는데?" Durable lesson: "simplify" should mean removing distracting UI clutter, not stripping out the album-cover world. Preserve the aesthetic density of the approved cover.

"웨이브 애니메이션 좀 별로다" / progress line이 깔끔했지만 거부 What worked: keep the v2 spectrum structure but soften it — warm side muted amber/cream, cool side desaturated blue-gray, opacity 0.75 → 0.55, glow 0.20 → 0.12.

→ 신규 스킬 music-visualizer-production 이 생성됐고, 색 보정 Remotion 코드까지 박제됐습니다. 다음 비주얼라이저 작업 땐 "너무 간소화 마라 / progress line보다 부드러운 spectrum"을 이미 알고 시작합니다.

층 ② 사용자 선호 박제 — USER.md 장기기억

더 강력한 건 이쪽입니다. 제가 흘리듯 한 규칙들을 봇이 관찰해 3인칭으로 요약한 뒤 영구 USER 기억에 자동으로 쌓았습니다(실제 박제된 항목들 — 전부 "User prefers…" · "TJ expects…" 형식이라 사람이 쓴 메모가 아니라 봇의 자동 추출임을 알 수 있습니다):

  • "워커는 한국어 캐릭터명으로 불러라 (ops → 척척냥)"

  • "Suno 워크플로우는 가사 초안 후 내 승인을 받고 음원 생성으로 넘어가라"

  • "칸반 완료 보고엔 상태 요약만 말고 실제 결과물 미디어를 첨부하라"

  • "Suno는 Suno Note 사용, 가사는 사실 기반, 제목에 '1 hour' 넣지 마라, 챕터는 'II/Reprise' 반복 말고 창의적·무드별로, KR/EN/JA 적용"

  • "웨이브는 smooth line 말고 하단 둥근 수직 바 스펙트럼, 좌측 따뜻한 색 우측 차가운 색"

  • "비주얼라이저 배경은 정사각 크롭 말고 16:9 네이티브 생성"

  • (그 외 토픽 분리·미디어 첨부 규칙 등 — 척척냥 3 + 대장냥 6 = 총 9개 항목)

→ 즉 제가 한 번 교정한 취향이 봇의 기억에 영구히 남아, 두 번 말할 필요가 없어집니다. 채널이 떡상하는 게 메가진화가 아니라, 봇의 스킬·기억이 내 피드백을 먹고 누적되는 것이 메가진화였습니다.


5. 🎬 결과물

  • 채널: XXXXXX

  • 영상: Rainy Soul Cafe XXXX

  • (58:43)

  • 구성: Suno v5.5 인스트루멘탈 12곡 / 25세그먼트 / 3초 크로스페이드 / loudnorm 마스터 / 288MB

  • 제목 후보 3안 + 태그 10개 + KR/EN/JA 설명 + 챕터 타임스탬프까지 봇이 자동 생성

  • 최종 프레임: ⑤ 최종 (아래 갤러리)


6. 🧱 자가진화의 "정직한 벽" (장밋빛 아님)

이 사례를 "조회수 떡상"으로 포장하지 않으려 합니다. 스터디 테마가 자가진화라 진화 신호의 한계를 정직하게 적습니다:

  • 📉 신호 희소: 소형 채널은 데이터가 적어 6~12개월간 통계적 노이즈. "진화 루프"는 월 수백만 조회 채널에서나 robust.

  • ⏱️ 48시간 지연: YouTube Analytics 지표가 늦게 들어옴 → 빠른 피드백 루프가 어려움.

  • 👀 경쟁사 CTR·retention은 비공개 → 벤치마크가 빈약(공개 조회수만 보임).

  • ⚖️ 완전 AI 오디오 = Content ID 불가, 저작권 보호 약함. "내 영상 광고수익"만 가능.

→ 그래서 이번 사례의 KPI는 "수익"이 아니라 "리뷰 → 수정 → 스킬·기억 박제 루프를 닫은 것" 그 자체입니다.


7. 💡 인사이트 (발표 마무리용)

"자동화는 '봇이 한 번에 잘하는 것'이 아니라, '내가 고쳐준 걸 봇이 기억하는 것'이다."

  • 워크봇 위임의 진짜 가치는 속도가 아니라 누적입니다. 첫 곡은 8번 고쳤지만, 그 8번이 스킬·기억에 쌓이면 다음 곡은 2~3번이면 됩니다.

  • 멀티 에이전트의 핵심은 화려한 페르소나가 아니라 명확한 역할 분리 + 결과물이 보이는 위임 채널 + 피드백이 박제되는 메모리 구조.

  • "메가진화"는 마법이 아니라 리뷰-수정 루프를 닫고, 그 결과를 영구 저장하는 평범한 엔지니어링입니다.


🧰 사용한 도구

Claude Code · Hermes Agent(대장냥/픽냥/척척냥 프로필 + SQLite 칸반 + USER 장기기억) · Suno v5.5 · Remotion · Codex(gpt-image-2 배경 생성) · ffmpeg(loudnorm·크로스페이드·스틸) · Telegram Bot(토픽 분리) · YouTube Data/Analytics API


🖼️ 아래 단계별 비주얼라이저 실제 이미지 갤러리에서 ①커버 → ②16:9 배경 → ③웨이브 → ④progress line(거부) → ⑤최종(채택) 순서의 전/후 비교를 볼 수 있습니다.


🖼️ 단계별 비주얼라이저 — 실제 이미지① 앨범 커버 — 채택 기반 (비 오는 창·카페·피아노)

② AI로 16:9 풍경 재생성 — 채택한 영상 배경 (Codex gpt-image-2)

③ 하단 웨이브(파장) 추가 — '애니메이션이 좀 별로다'

레인 소울 카페 - 스크린샷 썸네일

④ progress line으로 교체 시도 — 깔끔하지만 비주얼라이저 느낌이 약해 거부

⑤ v2 스펙트럼 복귀 + 색 보정(앰버/크림) — 최종 채택 프레임

⑥ 썸네일 시안 A

레인 소울 카페 - 스크린샷 썸네일

⑦ 썸네일 시안 B

밤에 커피숍에 있는 피아노 이미지

이렇게 피드백 주면서 개선 작업하고 다음 사이클에선 아래 처럼 멋지게 한번에 뽑아주네요

비오는 창 고양이 - 스크린샷 미리보기 이미지

함께 이야기해요 0

로그인하고 댓글을 남겨 주세요

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기