소개
Seedance 2.0 영상을 만들면서 시도했던 시행착오들을 공유합니다.
진행 방법
seedance2.0을 사용함
좋은 레퍼런스를 찾은 뒤에, 이를 공부해서 영상으로 만들 생각을 했습니다.
게임 애니메이션처럼 있는 레퍼런스가 있어서, 이 움직임을 학습시켜보기로 했스빈다.
뽀짝이를 주인공으로 삼으려고, 이미지 및 에셋도 준비를 했습니다. 이미지는 코덱스로 만들었습니다.
해당 화풍을 분석한 다음에 필요한 에셋을 코덱스로 만들어달라고 했더니 잘 만들었습니다.
2. 정지 이미지 → 영상 (Seedance i2v)
방식 A: 시작 + 엔드 핀 (start_image + end_image)
컷마다 시작 프레임과 엔드 프레임을 Codex로 만들면, 그 사이 동작을 Seedance가 채운다.
장점: 구도·캐릭터·적 디자인을 100% 통제할 수 있다.
주의사항
한 컷에 동작이 여러 개이거나 시작/끝 구도 차이가 너무 크면 둥둥 뜨는 모핑("수영") 발생 → 한 클립 = 한 동작 엄수
전투 컷은 윈드업(start) → 임팩트 직후(end), 같은 앵글·같은 배경, 적은 양쪽 프레임에 모두 배치
임팩트 어휘 필수:
impact flash,screen shake,speed lines,ink explosionfast는 품질을 깎으므로 금지끝 포즈 이후 남는 시간은
camera pushes in after impact로 채우거나, 편집에서 트림컷끼리 연속성이 없으므로 연결이 필요하면 체이닝 필수 (앞 컷 마지막 프레임 → 다음 컷 start)
문제가 발생한 내용은 아래에 설명 드리겠습니다.
이렇게 영상을 뽑았을 때 문제는, 연속성이 없었다.
시작점과 끝점을 주고 영상을 만들라고 했더니, 약 2초정도 멈추는 문제점이 발생했다.
이거 편집할 생각을 하니 꽤나 아찔했다.(사실 편집하는 일이 맞는데 시간이 없었기 때문)
그러다 seedance2.0에 영상을 레퍼런스로 주고, 이미지를 바꿀 수 있는 기능이 있다는 사실을 알게 됨
돈 태우는 일이지만 바로 만들어주는 걸 볼 수 있었습니다.
방식 B: 영상 레퍼런스 (video role) ✅ 최종 채택
원본 영상 구간을 video로, 뽀짝이를 image로 주면 원본의 동작과 카메라를 뽀 짝이에 입힌다(모션 트랜스퍼).
장점: 격렬한 카메라워크 + 전투의 펀치감 + 연속성이 공짜. 부드럽게 흐르는 결과물의 정답.
단점: 원본의 배경·적 디자인이 딸려 오기 때문에 커스텀 디자인이 약해진다. 렌더 시간도 컷당 10분 이상으로 길다. 단, 배경이 보이는 구간을 고르면 성/계단 배경은 유지된다.
영상 3개를 합쳐서 나온 결과입니다.
결과와 배운 점
힉스필드 mcp로 영상을 만들고 있는데, 클코 작업하면서 영상을 만드는게 신기했습니다.
다만, IP 차단 이슈가 있다는 점
