소개
AI 동화책 만들기 강의를 2024년에 많이 진행했어요. 주로 챗GPT와 코파일럿으로 진행했고, 올해에는 미드저니로 진행해보려고 미드저니로 동화책 만들기를 진행했습니다. 그리고 이를 SNS에서 전달하기 위해서 클링AI로 도입부 짧게 영상으로 만들었어요.
먼저 무료 챗GPT와 코파일럿으로 만든 AI 동화책 소개드려요.
https://slashpage.com/aistory/n5w9812g9kr6724kpgze
코파일럿 AI로 동화책을 만들때는 챗GPT에게 동화작가를 추천받고, 챗GPT에게 마음에 드는 작가 스타일로 스토리에 맞는 이미지 프롬프트를 달라고 하고, 그 프롬프트를 코파일럿에 넣어서 만들었습니다. 코파일럿이 멍청해서 그림은 아주 많이 뽑아야 마음에 드는 그림이 나왔어요. 이 과정은 다음에 소개 드릴께요.
진행 방법
챗GPT와 클로드AI로 스토리를 작성하고, 미드저니로 그림을 그리고, 클링으로 AI 비디오 제작, 캡컷으로 편집했습니다.
챗GPT와 AI 동화책 만들기를 할거라고 이야기하고 스토리를 추천받았어요.
(지금 챗GPT가 접속이 안돼서 프롬프트는 다음에 올릴께요._)
추천해준 작가를 링크로 받았기때문에 한번씩 열어봅니다. 그러나 생존 작가들이어서 저작권 문제가 있으므로 직접적으로 참고하긴 어려워서 아래처럼 작가의 스타일만 주어서 이미지 프롬프트를 추천받습니다.
챗GPT가 추천해준 프롬프트는 아래입니다.
A tiny cute snail at the base of a large apple tree in an enchanted forest, looking up with wonder at a bright red apple at the top, soft sunbeams filtering through leaves, dreamy watercolor style, Studio Ghibli inspired, gentle pastel colors, children's book illustration style, soft lighting, magical atmosphere, detailed nature background, 8k
그리고 미드저니는 이런 그림을 그려줬어요.
그림이 너무 고차원, 고퀄이라 이걸로는 달팽이가 안나오겠다 싶어서 달팽이를 먼저 그리기로 했어요.
챗GPT는 길게 아름다운 달팽이 프롬프트를 추천해줬는데요, 미드저니는 이런 그림을 그립니다.
난감해진 저는 그냥 심플한 그림책 달팽이를 요청하기로 했어요. 딥엘로 가서 적당한 달팽이를 번역하고 미드저니로 그렸습니다.
위 딥엘이 준 영문 프롬프트로 미드저니가 그려준 그림이에요.
달팽이는 사람과 너무나 다르게 생긴 동물이어서 좀 어려운가 봅니다. 달팽이 그림의 위에서 3번째 그림 스타일이 마음에 들어서 이걸 이후의 미드저니 작업에서 계속 스타일레퍼런스로 사용했습니다.
수많은 vary subtle, strong 및 챗GPT에게 스토리에 어울리는 이미지 프롬프트를 추천받아 그리다 이제 쓸만한 달팽이가 나왔어요.
그리고 배경이 되는 사과나무 그림도 챗GPT에게 프롬프트를 추천받고 미드저니로 그려요.
처음에 얻은 달팽이 일러스트와 사과나무를 이후 그림에 적당히 캐릭터 레퍼런스, 스타일 레퍼런스로 사용하면 그림이 잘 나온다는걸 알게되었어요. 스타일 레퍼런스는 그림 화풍 뿐만 아니라 구도도 따라하기 때문에 상황에 따라 적절히 사용합니다.
이렇게 얻은 그림으로 클링으로 갔어요.
작년에 코카콜라 트럭 영상을 따라하다 보니 클링은 현재진형형보다 현재형으로 뽑는 것이 훨씬 효과적이더라고요. 그래서 클링에 프롬프트를 쓸때 현재진행형보다 현재형으로 작성합니다.
예를 들면 is moving 보다 moves로 프롬프트를 입력해요 달팽이 그림을 영상으로 만들때 프롬프트가 'A cute snail moves.'인 경우와 'A cute snail is moving.' 인 경우 클링 AI에서 생성되는 영상은 다릅니다. 현재진행형으로 프롬프트가 입력되면 달팽이 외의 다른 사물들도 moving 하는 영상이 생성되더라고요.
이유를 챗GPT에게도 물어봤어요.
클링에서 현재형과 현재진행형 프롬프트의 차이는 아래 영상에서 확연하게 보실 수 있어서 올려드려요.
1) 현재형 the truck moves
2) 현재진행형 the truck is moving
그리고 클링에서 이미지를 넣고 영상을 뽑아요.
추가로 거북이 영상을 클링으로 만들어봤는데요,
1) The leaves sparkle in the sunlight. The soft wind shakes the leaves gently. The turtle smiles and talks quietly.
위 프롬프트는 생각나는대로 적어서 나뭇잎이 바람에 흔들리는게 먼저 들어갔는데요, 중요한 프롬프트를 앞에 두고, 좀더 심플하게 프롬프트를 다시 넣었어요. 아래처럼 넣으니 좀 더 원하는 영상이 나옵니다.
2) The turtle talks slowly. The soft wind shakes the leaves gently.
영상을 다 합쳐서 완성하지는 못했는데요, 앞부분 조금 완성한거 올려봅니다.
(내용 입력)
결과와 배운 점
배운 점과 나만의 꿀팁을 알려주세요.
동화책을 작성할때는 주인공 캐릭터와 배경을 먼저 그려서 캐릭터 레퍼런스, 스타일 레터런스용 그림을 먼저 뽑아요.
클링에서 영상을 뽑을때는 ing 말고 현재형으로 넣어요.
AI 영상을 만들때도 중요한 내용은 앞부분의 프롬프트로 넣습니다.
도움이 필요한 부분이 있나요?
아래 그림에서 햇빛이 나무사이로 반짝이면서 쏟아지는 느낌을 주고 싶은데 이게 클링이나 다른 AI 영상도구로 가능한지 궁금합니다.
우선 이러한 장면을 위해서 아래 두개의 프롬프트로 시도해봤지만 똑같은 영상이 나왔어요.
1) The sun is shining. The leaves sway in a gentle breeze.
2) The sun is shining through the trees. A gentle breeze blows and the leaves sway slightly.
앞으로의 계획이 있다면 들려주세요.
동화책도 완성하고, 영상도 완성하려고요!! 완성되면 올리겠습니다.
급히 쓰느라 두서가 없네요. 읽어 주셔서 감사합니다!
