Pika.art로 애니메이션 만들기

생성형 AI로 일본 애니메이션 만들어보기

Pika는 Nat Friedman과 Daniel Gross가 주도한 프리 시드 및 시드 라운드와 함께 설립 후 6개월 동안 총 5,500만 달러(한화로 약 715억 원)를 모금에 성공했다. 

3D 애니메이션, 애니메이션, 시네마틱 등 다양한 스타일의 동영상을 생성하고 편집할 수 있는 새로운 AI 모델과 사용 편의성을 높인 새로운 웹 환경을 포함하는 주요 제품 업그레이드인 Pika 1.0을 공개했다. 

다른 AI 동영상 도구는 주로 전문가와 상업적 용도에 초점을 맞춘 반면, Pika는 일반 소비자와 크리에이터가 쉽고 간편하게 사용할 수 있는 동영상 제작 및 편집 환경을 설계했다. Pika를 사용하면 누구나 크리에이티브 디렉터가 될 수 있다.

위에 직접 제작한 영상의 프로세스를 상세히 설명하겠다.

사용한 툴은 Pika.art, ChatGPT, Suno.ai, Runway이다.

Step 1. 챗GPT에게 애니메이션 시나리오 작성 요청

Pika.art는 4초짜리 동영상을 생성한다. 프롬프트를 추가로 요청하면 더욱 길게 생성하 지면, 부자연스럽게 나온다. 

챗GPT 프롬프트

일본 애니메이션 스타일의 1분 길이 애니메이션을 제작하고자 합니다. 주제는 '용과 소녀, 그리고 하늘을 나는 모험'입니다. 각 장면은 최대 4초 길이로 구성되며, 전체적인 분위기는 마법적이고 환상적인 요소를 포함해야 합니다. 

프롬프트를 영어로 작성할 때, 각 장면을 생생하고 구체적으로 묘사하고, 마지막에 'anime style'을 추가하여 일관된 스타일을 유지하는 것이 좋습니다. 예시와 같이, 풍부한 세부사항을 포함하고 감각적인 요소를 강조하는 것이 중요합니다. 이를 통해 더 명확하고 생동감 있는 이미지를 생성할 수 있습니다.

예시:
Heartwarming farewell scene between the girl and dragon in the forest, capturing a bittersweet moment, anime style. 

Step 2. Pika.art에서 애니메이션 제작

Pika.art에서 챗GPT가 생성해 준 시나리오 프롬프트를 입력하면, "스즈메의 문단속" 그림체와 유사한 애니메이션이 만들어진다. "용과 소녀, 그리고 하늘을 나는 모험"이라는 주제에 어울리는, 아름다운 4초 분량의 애니메이션을 생성한다. 총 9개의 장면을 생성했다. 

여기서 단점이 많이 드러나기는 한다. 바로 완전히 통일적인 스타일을 만들어내기가 어렵다. 물론 프롬프트를 자세히 입력하면 해결되어 보이지만, 입력할 수 있는 단어숫자가 제한적이다. 

Step 3. 테마곡 작사, 작곡

애니메이션에 어울리는 노래를 Suno.ai를 이용해 제작해봤다. Suno.ai는 곡 작성과 제작을 간편하게 할 수 있게 돕는 창조적인 AI 서비스이다. 일본어를 한 번도 배운 적이 없어서, ChatGPT로 가사를 작성했다. 

챗GPT 프롬프트:

"일본 애니메이션의 주제곡을 위한 가사를 작성해 주세요. 이 노래는 42초 길이의 에너지가 넘치고, 긴박감이 돋보이며, 모험적인 분위기를 갖추어야 합니다. 가사는 일본 애니메이션의 전형적인 스토리 요소들을 반영하며, 주인공이 겪는 도전과 성장을 강조해야 합니다. 빠른 템포에 맞춰 감정이 잘 표현되도록 구성해 주세요."

Step 4. 동영상 편집

AI 동영상 편집 플랫폼인 Runway를 활용해, 영상 편집을 더욱 간편하게 진행했다. 결과적으로, 42초짜리 아름다운 애니메이션을 만드는 데 겨우 2시간이 소요되었다.

마무리

생성형 인공지능(AI) 기술은 놀라운 속도로 발전하고 있으며, 이제는 단순히 데이터를 처리하는 것을 넘어서 인간의 창의성과 상상력을 확장시키는 데에 크게 기여하고 있다. 

사용자가 상상하는 이미지나 디자인을 실제로 구현해내며, 이는 예술가나 디자이너들에게 무한한 영감을 제공한다. 또한, 문학이나 음악 분야에서도 AI는 사용자의 아이디어를 바탕으로 새로운 작품을 창조해내는 데 도움을 준다.

작가나 작곡가가 생각하는 스토리나 멜로디를 AI가 구체화시켜, 보다 풍부하고 다채로운 결과물을 만들어낸다.