영상 자동화 초기 단계 시행착오

소개

이번 수업에서는 Remotion AI와 Antigravity를 활용해 "고양이의 우주 모험"을 테마로 한 AI 애니메이션 제작에 도전하고 있습니다. 단순히 멋진 이미지를 뽑는 것을 넘어, 내가 의도한 캐릭터가 영상 속에서 일관되게 움직이게 만드는 '캐릭터 정체성 유지''비주얼 일관성'을 확보하는 것이 이번 프로젝트의 핵심 과제입니다.

진행 상황 및 핵심 고민

1. 캐릭터 생성 (Nano Banana)

  • 먼저 나노바나나를 활용해 우주복을 입은 고양이 캐릭터를 생성했습니다.

  • 수많은 프롬프트 시도 끝에 마음에 쏙 드는 '주인공 고양이' 모델을 뽑아내는 데 성공했습니다.

2. 직면한 문제: "내가 알던 그 고양이가 아니야"

  • 캐릭터 변형: 나노바나나에서 생성된 이미지(소스)를 Antigravity로 가져와 영상화하면, 고양이의 무늬나 우주복의 디테일이 미묘하게 변하는 현상이 발생했습니다.

  • 매체 간 간극: 정지 영상에서는 완벽했던 캐릭터가 '움직임'이 부여되는 순간 다른 존재처럼 느껴지는, 이른바 'AI 영상의 일관성 붕괴' 문제를 겪고 있습니다.

해결을 위한 노력 (진행 중)

  • 프롬프트 튜닝: 캐릭터의 고유 특징(눈 색깔, 우주복의 특정 로고 등)을 고정하기 위해 더 세밀한 프롬프트 엔지니어링을 시도 중입니다.

  • 시드(Seed) 및 레퍼런스 활용: 생성된 베스트 컷을 기반으로 영상의 매 프레임이 원본의 특징을 잃지 않도록 Antigravity의 설정값을 조절하며 테스트하고 있습니다.

  • 시행착오의 반복: 원하는 결과가 나오지 않을 때마다 '문제 정의 → 프롬프트 수정 → 재렌더링'의 사이클을 돌리며 AI를 길들이는 과정을 학습하고 있습니다.

결과와 배운 점 (현재까지의 느낀 점)

AI 영상 제작은 '그리는 것'이 아니라 '조율하는 것'이다.

  • 내가 직접 선을 긋는 것이 아니기에, AI가 내 의도를 정확히 파악하도록 만드는 '디렉팅 능력'이 무엇보다 중요하다는 것을 깨달았습니다.

기술적 제약이 곧 창의성의 시작이다.

  • 캐릭터가 다르게 나오는 상황을 단순히 '실패'로 보지 않고, 왜 이런 변형이 일어나는지 분석하며 AI의 작동 원리를 깊이 이해하게 되었습니다.

완벽한 한 장보다 일관된 열 장이 어렵다.

  • 단일 이미지의 퀄리티보다 영상 전체의 흐름과 스타일을 유지하는 것이 훨씬 고난도의 작업임을 실감했습니다. 이 '일관성'을 확보하는 것이 앞으로 정복해야 할 가장 큰 산입니다.

2
1개의 답글
밀어주고 끌어주는

온·오프라인 AI 스터디

AI로 어디까지 할 수 있는지
직접 확인하실 분만 신청하세요.