AI 애니메이션: 단편 영화 제작의 새로운 시대 -

전문 영화감독이 아닌 사람이 만든 AI 프로젝트가 일반적인 단편 영화들 사이에서 어떻게 돋보일 수 있었을까?

2023년 XNUMX월, 게임 산업 프로그래머인 짐은 AI 아티스트가 되었습니다.

2024년 XNUMX월, 짐의 AI 애니메이션 단편 영화 "The Thin Man The Gun The Hotpot"은 Independent Shorts Awards에서 최우수 애니메이션 단편 금상을 수상했습니다.

이것은 AI 작품을 위한 것이 아니라 독립 영화계의 중요한 국제 단편 영화제이며, 짐에게는 큰 성과입니다. 그는 "심사위원들이 AI라는 라벨을 무시하고 스토리 자체에 집중한 것이 기쁩니다."라고 말했습니다.

"The Thin Man The Gun The Hotpot"은 주로 짐 혼자 완성했습니다. 10분 분량의 이 영화는 242개의 샷으로 구성되어 있으며, 제작하는 데 거의 200개월이 걸렸고, 하루 평균 XNUMX시간 이상, 최소 XNUMX시간의 작업이 필요했습니다.

90일간의 창작 과정 동안 짐은 AI와 지혜의 싸움을 벌이고, AI의 한계를 뛰어넘고 제약을 피하는 것 같은 기분을 느꼈습니다. 시청자들이 "AI가 애니메이션을 만들기 시작했어요"라고 말했을 때, 짐은 "AI가 애니메이션을 만들도록 이끄는 건 크리에이터들이죠"라고 답했습니다.

3개월, 10분

"The Thin Man The Gun The Hotpot"은 헐리우드의 과거에서 중요한 장르였던 누아르 범죄 영화로, 중국 문화에 뿌리를 둔 스토리를 담고 있습니다. "The Thin Man The Gun The Hotpot"이라는 용어는 중국 남서부에서 유래되었으며, 밤늦게까지 문을 여는 작은 음식 노점을 말합니다.

주인공 쉬샤는 밤늦게 노점에서 식사를 하는 청년입니다. 아버지의 치료비를 지불하기 위해 비윤리적인 선택을 하지만, 건드릴 수 없는 도덕의 선을 유지합니다. 결국 그는 운명에 갇히고 폭력과 살인에 얽매이게 됩니다.

어둡고 긴박감 넘치는 분위기를 담은 The Thin Man, The Gun, The Hotpot 전체 영화 스크린샷.

AI 애니메이션이라고 부르기보다는 AI 도구를 사용해 만든 애니메이션이라고 하는 게 더 정확할 듯합니다.

AI가 비주얼을 생성했고, 대본, 편집, 음성 연기, 음악, 음향 효과와 같은 다른 요소는 수동으로 수행되었습니다. 비주얼의 텍스트는 후반 작업에서 추가되었습니다.

비주얼 면에서 Jim은 "순수한 AI 세대" 스타일을 따릅니다. "The Thin Man The Gun The Hotpot"에는 실사 영상이 없으며 이미지-비디오 변환에 의존합니다. 이미지는 Midjourney에서 생성했고 비디오는 Keling, Pika, Jidream, PixVerse, Runway에서 생성했습니다.

AI 세대는 예측할 수 없지만, AI로 일관된 스토리를 전달하려면 안정성이 필요합니다. 캐릭터 디자인에서 Jim은 캐릭터 일관성을 유지하는 방법을 고려했습니다.

짐은 캐릭터 디자인에 대한 두 가지 원칙을 가지고 있었습니다. 첫째, 전체적인 모습은 단순해야 하며 몇 가지 키워드로 설명할 수 있어야 합니다. 둘째, 캐릭터는 독특한 요소를 가져야 하므로 완전히 일관되지 않더라도 관객이 알아볼 수 있어야 합니다.

가장 대표적인 캐릭터는 브라더 완과 리자쟈입니다. 브라더 완은 대머리에 운동복과 선글라스를 착용하고 있고, 리자쟈는 90년대 복고풍 여성을 닮았으며, 붉은색에 물결 모양의 머리를 하고 있습니다.

The Thin Man The Gun The Hotpot 캐릭터인 Brother Wan은 독특한 외모를 가지고 있습니다. — _{씬맨 더 건 더 핫팟 캐릭터 '브라더 완'이 독특한 외모를 자랑한다}

레트로한 90년대 스타일을 선보이는 The Thin Man The Gun The Hotpot의 등장인물인 리자쟈. — _{얇은 남자 총 핫팟 캐릭터 "리자쟈"}

수염 없이 안경과 정장을 입은 겉보기에 세련된 주 씨는 특이한 특징이 전혀 없어서 짐이 가장 많이 반복한 캐릭터가 되었습니다.

짐은 AI가 "고대 돈"의 분위기를 가진 캐릭터를 쉽게 생성하지만, 부유하지만 엘리트는 아니고, 위험하지만 범죄 두목은 아닌 주 씨와 같은 캐릭터를 만드는 데 어려움을 겪는다는 것을 발견했습니다.

마른 남자, 총, 냄비 캐릭터인 주 씨는 세련된 외모를 가지고 있습니다. — _{씬맨 건 핫팟 캐릭터 '주씨'}

짐은 자신의 애니메이션 스타일을 "애니메이션 필터가 있는 실사 영화"라고 설명합니다. 시청자는 실제 배우가 출연하면 어떨지 상상할 수 있습니다.

각 캐릭터의 이미지가 텍스트를 통해 생성되면 영화의 의상 사진을 갖는 것과 같습니다. 그런 다음 Jim은 이러한 이미지를 소재로 사용하여 캐릭터를 그대로 유지하면서 다양한 각도와 장면의 더 많은 이미지를 생성합니다.

충분한 이미지가 있으면 비디오를 생성할 수 있습니다. AI 비디오 도구는 빠르게 업데이트됩니다. "The Thin Man The Gun The Hotpot"은 2024년 XNUMX월부터 XNUMX월까지의 버전을 사용했습니다.

기술적으로 어려운 샷의 경우, Jim은 다양한 비디오 도구를 실험했습니다. 각 도구에는 장점이 있습니다. Jidream, Keling, Pika가 가장 많이 사용된 도구였습니다.

당시 지드림은 액션 샷에, 피카는 씬 샷과 간단한 대화 애니메이션에 뛰어났으며, 켈링은 전반적으로 강력한 역량을 갖추었지만 특정 상황에서는 때때로 불필요하게 복잡했습니다.

애니메이션 캐릭터와 함께하는 The Thin Man, The Gun, The Hotpot 대화 장면.

오늘날의 도구를 사용하더라도 "The Thin Man The Gun The Hotpot"의 많은 장면은 자연스럽게 구현하기 어렵습니다. 이를 위해서는 전통적인 방법에 의존해야 합니다.

예를 들어, 캐릭터가 정면을 향하지 않거나 AI가 쉽게 인식할 수 있는 클로즈업에 있고, 액션, 표정, 카메라 각도가 움직이는 경우, 성우는 비디오의 입술 움직임에 따라 더빙해야 합니다. 짐은 새로운 기능이 반드시 유용한 것은 아니라고 생각합니다. 오래된 방법은 어색할 수 있지만 더 신뢰할 수 있습니다.

틈새 시장과 다양성

"The Thin Man The Gun The Hotpot"의 스토리는 중국 남서부의 작은 마을을 배경으로 하며, 등장인물들은 짐의 개인적 선호도인 쓰촨 방언을 사용합니다. "The Thin Man The Gun The Hotpot"의 아트 스타일도 독특하여 시청자들은 "Love, Death & Robots"의 한 에피소드와 비교합니다.

짐은 게임 산업에서 일하면서 너무 비슷하고, 이미 검증된 콘텐츠를 많이 보았습니다.

AI 기반 창작은 개인화될 수 있다. 고품질 작품은 여전히 대기업이 상당한 자원을 투자해야 하지만, 짐은 "기본적인 작품"을 만드는 데 더 많은 가능성을 본다.

Midjourney를 처음 사용할 때부터 Jim은 "주류" 스타일로 만들고 싶지 않다는 것을 분명히 했습니다. Midjourney를 많이 사용하는 그는 AI가 쉽게 생성하는 스타일을 잘 알고 있으며, 이는 또한 자신의 금지 구역이기도 합니다.

그는 곧바로 알아볼 수 없는 스타일, 즉 복고적이지만 완전히 구식 애니메이션은 아닌, 친숙하면서도 새로운 스타일을 선호합니다.

짐은 "The Thin Man The Gun The Hotpot"의 아트 스타일을 위해 애니메이션 감독인 유아사 마사아키와 만화가인 츠게 요시하루를 참고했습니다.

그는 먼저 Midjourney의 Describe 기능을 사용하여 스타일의 키워드를 파악한 다음 지속적으로 프롬프트를 작성하고 반복해서 작업하여 요구 사항을 충족하는 이미지를 생성했습니다.

"The Thin Man The Gun The Hotpot"의 세계관은 짐이 익숙한 지역과 요소에서 크게 비롯되었습니다.

2019년, 짐은 디아오 이난이 감독하고 후 거가 주연을 맡은 "야생의 거위 호수"를 보고 "누아르 미학과 핵심을 갖춘 현실적인 배경"에 깊은 인상을 받았습니다. 그는 전통적인 장르 영화가 고정관념에 얽매이지 않고 중국 서사에 새로운 활력이 있다는 것을 깨달았습니다.

"마른 남자, 총, 냄비"의 주인공은 후거의 외모에서 영감을 얻었습니다.

2021년, 짐은 각본을 쓰기 시작했고, 작은 마을, 절망에 빠진 청년, 인생의 곤경을 포함한 "The Thin Man, The Gun, The Hotpot"의 기본 줄거리를 형성했습니다.

2023년에 짐은 Midjourney를 사용하여 AI 콘셉트 아트를 배우기 시작했습니다.

하지만 2024년 이전에는 짐은 실제로 AI 영화를 만드는 것에 대해 생각해 본 적이 없었습니다. 그는 사진, 각본, 영화 촬영을 스스로 배웠지만 거기서 멈췄습니다. 비디오는 렌즈를 통해 스토리를 전달하지만, 그는 자신의 세트 샷을 만들 수 없었습니다.

2024년 초, 짐은 피카와 같은 초기 AI 비디오 중 일부를 사용하기 시작했고, 마침내 장면을 애니메이션화하고, 이미지를 조정하고 수정하고, 이를 연결하여 단편 영화를 완성할 수 있다는 것을 갑자기 깨달았습니다. 창조하려는 그의 열망은 전례 없이 강해졌습니다.

자료가 준비되자 편집, 음향 효과, 더빙, 음악 작업이 시작되었습니다. 짐은 전통적인 영화 제작 과정을 더 깊이 파고들었습니다. 그는 실험하고 배우면서 점차적으로 빌리빌리에 스타일리시하고 개인적으로 독특한 작품을 업로드했습니다.

"하드 밥 건맨"의 또 다른 스크린샷. — _{"Hard Bop Gunman"의 또 다른 스크린샷.}

짐의 또 다른 AI 단편 영화인 "Hard Bop Gunman"은 오래된 미국 만화와 무성 영화의 스타일을 따왔으며, 나중에 1905 Movie Network와 Bilibili 같은 플랫폼에서 열린 AI 영상 경연대회의 크리에이티브 트랙에서 상을 수상했습니다.

AI는 아직 많은 산업을 파괴하지는 못했지만, 소규모 팀과 개인 창작자에게는 제작 비용이 수용 가능한 수준이 되었으며, 다양한 콘텐츠가 청중에게 노출될 기회가 생겼습니다.

쓰촨-충칭 지역을 배경으로 한 "The Thin Man The Gun The Hotpot"을 만든 짐은 자신이 다소 "의도적"이었다고 인정합니다. 그는 틈새 콘텐츠를 만들 때 더 이상 "너무 위험하다"는 전통적인 개념에 대해 너무 걱정할 필요가 없다는 것을 증명하고 있습니다.

제한적이지만 독특함

10분 분량의 "The Thin Man The Gun The Hotpot"은 빌리빌리에서는 긴 영상으로 여겨지지 않을 수도 있습니다. 하지만 AI 커뮤니티에서는 10분이라는 길이는 흔치 않은데, "The Thin Man The Gun The Hotpot"이 완전한 스토리를 담고 있다는 사실은 말할 것도 없습니다.

이 10분을 채우기 위해 짐은 자신과 AI의 한계를 시험했습니다.

짐은 "The Thin Man The Gun The Hotpot"의 핫팟 레스토랑 액션 장면을 촬영하기 위해 많은 노력을 기울였지만, 최종 효과는 40%에도 미치지 못했습니다.

"The Thin Man, The Gun, The Hotpot"의 액션 장면. — _{"The Thin Man, Gun, The Hotpot"의 액션 장면.}

짐은 AI의 액션 장면이 실제로 부족하다는 것을 인정합니다. 충격감이 없고 공기를 치는 것과 같은 물리적 논리를 따르지 않습니다. 액션 장면뿐만 아니라 질식, 망치 던지기 또는 돌로 부수는 것과 같이 상당한 움직임이 있는 모든 장면은 AI가 달성하기 어렵습니다.

짐의 경험에 따르면, AI를 위한 액션 장면을 디자인해야 한다면 차가운 무기를 피하고 대신 총기를 사용하세요. AI는 최소한 사격을 시뮬레이션할 수 있기 때문입니다. 짐은 이 기술을 직접 사용했습니다. "구출해 준 오래된 홍콩 영화에 감사드립니다."

실제 배우들이 액션 장면에서 어려움을 겪을 때, 스턴트 더블이 대신할 수 있지만, 표정이 풍부한 것은 배우의 기본 기술입니다. 하지만 이는 AI의 약점이기도 한데, AI는 과장된 연기를 하거나 표정을 전혀 보이지 않습니다.

2024년 XNUMX월, Runway는 Act-One 기능을 출시했는데, 이는 AI 캐릭터가 실제 인간 퍼포먼스 비디오에 기반하여 동일한 표정을 짓도록 합니다. Jim은 이를 더 많은 제품이 유사한 기능을 출시하면 AI가 실제로 성능에 병목 현상이 있음을 나타내는 신호로 봅니다.

실제 인간의 연기를 기반으로 한 AI 캐릭터 표현. — _{런웨이 액트 원}

"The Thin Man The Gun The Hotpot"에서 캐릭터는 종종 클로즈업과 반신 샷으로 등장하는데, 이는 AI의 약점을 반영합니다. 즉, 여러 피사체가 있는 샷을 처리하는 것입니다. 샷을 디자인할 때 Jim은 아직 좋은 해결책을 찾지 못했기 때문에 여러 사람이 있는 장면을 피하려고 합니다.

Midjourney로 이미지를 생성할 때에도 두 명 이상이면 얼굴 문제가 발생할 수 있습니다. AI 비디오 상호작용에 배치하면 장면이 더욱 혼란스러워집니다.

AI가 생성한 영상에는 많은 제약이 있기 때문에 후반 작업에서 Jim은 클로즈업, 상징적 샷, 빠른 컷을 사용하여 시각적 단점을 보완합니다. "The Thin Man The Gun The Hotpot"에서 반복되는 동물 이미지가 그 예입니다.

은유와 상징주의는 일부 고전적인 미국 누아르 영화에서도 흔히 사용됩니다. 1940년대와 50년대에는 폭력적인 이미지를 제한하는 Hays Code와 같은 기술적 제한과 규정으로 인해 2024년의 AI 비디오와 상황이 다소 비슷했습니다.

수십 년에 걸친 반향은 짐에게 흥미로웠다. "아마도 오래된 방법이 AI 영화에서는 잘 통할 거야."

하지만 청중은 솔직하게 "매끄러운 파워포인트 프레젠테이션"이나 "향상된 역동적인 만화"와 같은 피드백을 제공합니다. 짐은 이를 받아들였고, 그래서 AI 애니메이션을 만들기로 했습니다.

매끄러운 피부, 소름 돋게 움직이는 실제 스타일과 비교했을 때, 애니메이션은 적어도 "시청자에게 '와, 너무 가짜다'고 즉시 생각하게 하지 않는다." 캐릭터의 약간 딱딱하고 경직된 움직임은 비현실적인 애니메이션에서 더 수용 가능하다.

독립 단편 영화상 수상증 — _{ndependent Shorts Awards 인증서}

맹목적으로 길이를 추구하지 않고 품질을 먼저 보장하는 것은 부분적으로 Jim이 일반 영화와 벤치마킹하기 때문입니다. 그는 심사위원들이 AI 라벨을 간과하고 스토리 자체에 집중하도록 하기 위해 비AI 경쟁 Independent Shorts Awards에 참가했습니다.

짐은 자신의 작품을 볼 때 관객들이 AI의 존재를 인식하지만 AI를 위해 오지는 않기를 바라며 AI 영화 평가 시스템에 관대함을 보이지 않기를 바란다. "AI 커뮤니티는 너무 친절해서 거친 말을 들어야 할 필요가 있습니다."

불안을 극복하기 위해 창조에 집중하다

AI 뉴스에서는 종종 '하룻밤 사이에 일어난 변화'에 대해 쓰는데, 3개월 만에 단편 영화를 만드는 것도 이미 긴 시간이다.

AI는 매일 발전합니다. 2023년에 Jim은 매일 AI 정보를 따라잡을 수 있었지만, 2024년 초부터는 트렌드를 따라잡는 것이 불가능해졌습니다. 그는 또한 불안함을 느끼지만 다른 많은 사람들처럼 맹목적으로 불안하지는 않습니다.

기술은 강력하지만, 인간이 해야 할 일이 아직 많이 있습니다. 창조의 어려움과 흥미는 어떤 문제는 창조자 스스로 해결해야 한다는 사실에 있습니다.

"거위 호수"에는 짐에게 깊은 인상을 남긴 총격전 장면이 있습니다. 사람들이 광장에서 춤을 추고, 사복 경찰이 빛나는 신발을 신고, 범죄자들이 총을 쏘고, 경찰이 빛나는 피 속에서 쫓아가다가 총을 쏘는 장면입니다.

긴장감과 장난기 어린 대조가 짐을 감동시켰다. 이 장면이 없었다면 스퀘어 댄싱에 대한 첫 반응은 "촌스러웠을 것"이다.

그는 익숙한 요소들이 오래되지는 않았지만 창작자의 심도 있는 탐구가 부족한 경우가 많다고 믿는다.

반대로, 오래된 도구로 신중하게 표현된 것은 새로운 기술로 대체될 수 없을 수도 있습니다.

AI 영상은 여러 번 업데이트되었지만, 짐은 이전 AI 단편 영상을 리메이크할 계획이 없습니다.

단편 영화 전체의 디자인과 타협은 당시 AI의 한계에 기반을 두었고, 완전한 실체를 형성했습니다. 몇 년이 지난 지금도 여전히 재미있는 측면이 있는데, 바로 여기에 작품의 가치가 있습니다.

AI는 Jim이 더 유사한 실험을 완료하고 흥미로운 것을 다시 생각하도록 도울 수 있습니다. 그는 AI가 직접 답을 제공하는 것을 좋아하지 않습니다. 그는 AI를 계산기와 비슷한 도구로 사용하여 스스로 문제를 해결하는 것을 선호합니다.

_{"The Thin Man, Gun, The Hotpot"의 한 장면}

AI를 사용하여 광고나 뮤직비디오를 만드는 것과 비교했을 때, Jim은 여전히 AI를 사용하여 스토리를 전달하는 것을 선호합니다. 그에게 "내러티브는 영화 제작의 원래 의도입니다."

몇 년 전, 짐이 독학으로 대본 쓰기를 배우던 시절, 그는 책을 읽는 것뿐만 아니라 대본을 쓰고 완성하는 연습도 했습니다. "끝내지 못한다면 별 의미가 없습니다."

동시에 그는 많은 영화를 보고, 끊임없이 새로운 영화를 보고, 흥미로운 장면을 구성하고, 다른 사람들의 설명과 분석을 보았습니다. 그는 "튼튼한 기초가 없다"고 말하지만, 이미지에 민감하고, 유사한 사물을 연결하는 데 능숙하며, 카메라 언어를 사용하여 감정과 느낌을 정확하게 전달하는 데 더 능숙합니다.

"The Thin Man The Gun The Hotpot"의 생선머리 핫팟

지금 짐은 휴식을 취하고, AI 창작물을 공유하고, 다음 AI 프로젝트를 준비하고, 각 AI 비디오 도구의 최신 개발 사항을 따라잡을 계획입니다. 그의 견해로는, AI 도구가 아무리 많더라도 각 사람이 투자할 수 있는 리소스는 동등하고 없어서는 안 될 것입니다. 양은 중요하지 않습니다. 자신에게 맞는 올바른 길을 찾는 것이 더 중요합니다.

Jim의 빌리빌리 댓글 섹션에서 한 시청자는 시청 경험을 "영혼 없는 도구, 영혼 있는 창조"라고 설명했습니다. 그는 "이 진술은 많은 무게를 지닙니다."라고 답했습니다.

불안에 맞서는 가장 좋은 방법은 창조입니다. 짐은 AI가 미래에 무엇을 할 수 있을지 또는 누구를 대체할 것인지 추측하고 싶어하지 않습니다. 그는 끊임없이 자신의 손에서 새로운 작품을 창조하는 것이 사람의 견고한 요새라고 믿는 것을 선호합니다.

출처 이판르

최신 뉴스