Animasi AI: Era Baharu dalam Penciptaan Filem Pendek

Bagaimanakah projek AI pembuat filem bukan profesional menonjol dalam kalangan filem pendek biasa?

Pada Februari 2023, Jim, seorang pengaturcara dalam industri permainan, menjadi artis AI.

Menjelang Disember 2024, filem pendek animasi AI Jim "The Thin Man The Gun The Hotpot" memenangi Anugerah Emas Pendek Animasi Terbaik di Anugerah Seluar Pendek Bebas.

Ini adalah festival filem pendek antarabangsa yang penting dalam dunia filem bebas, bukan khusus untuk karya AI, menjadikannya pencapaian utama untuk Jim. Dia menyatakan, "Sungguh menggembirakan kerana para hakim memberi tumpuan kepada cerita itu sendiri, mengabaikan label AI."

"The Thin Man The Gun The Hotpot" telah disiapkan terutamanya oleh Jim sahaja. Filem berdurasi 10 minit itu mengandungi 242 tangkapan, mengambil masa hampir tiga bulan untuk dibuat, dan memerlukan sekurang-kurangnya 200 jam bekerja, dengan purata lebih dua jam sehari.

Semasa proses penciptaan selama 90 hari, Jim merasakan dia berada dalam pertempuran kecerdasan dengan AI, menolak hadnya dan mengelakkan kekangannya. Apabila penonton menyatakan, "AI telah mula membuat animasi," Jim menjawab, "Ia adalah pencipta yang memacu AI untuk membuat animasi."

3 Bulan, 10 Minit

“The Thin Man The Gun The Hotpot” ialah sebuah filem jenayah noir, genre penting di Hollywood masa lalu, dengan cerita yang berakar umbi dalam budaya Cina. Istilah "The Thin Man The Gun The Hotpot" berasal dari Barat Daya China, merujuk kepada gerai makanan kecil yang dibuka lewat malam.

Protagonis, Xu Xia, ialah seorang lelaki muda yang sedang makan di gerai jalanan pada larut malam. Untuk membayar rawatan perubatan bapanya, dia membuat pilihan yang tidak beretika tetapi mengekalkan garis moral yang tidak boleh disentuh. Akhirnya, dia terjerat dalam keganasan dan pembunuhan, terperangkap oleh takdir.

Daripada memanggilnya "animasi AI," lebih tepat untuk mengatakan "The Thin Man The Gun The Hotpot" ialah animasi yang dibuat menggunakan alat AI.

AI menghasilkan visual, manakala elemen lain seperti skrip, penyuntingan, lakonan suara, muzik dan kesan bunyi dilakukan secara manual. Teks dalam visual telah ditambah dalam pasca pengeluaran.

Dari segi visual, Jim mengikut gaya "generasi AI tulen". "The Thin Man The Gun The Hotpot" tidak mempunyai rakaman aksi langsung; ia bergantung pada penukaran imej-ke-video. Imej dihasilkan oleh Midjourney, dan video oleh Keling, Pika, Jidream, PixVerse dan Runway.

Penjanaan AI tidak dapat diramalkan, tetapi menceritakan kisah yang koheren dengan AI memerlukan kestabilan. Daripada reka bentuk watak, Jim mempertimbangkan cara mengekalkan konsistensi watak.

Jim mempunyai dua prinsip untuk reka bentuk watak. Pertama, penampilan keseluruhan hendaklah ringkas, boleh diterangkan dengan beberapa kata kunci. Kedua, watak harus mempunyai unsur tersendiri, jadi walaupun tidak sepenuhnya konsisten, ia tetap dapat dikenali oleh penonton.

Watak yang paling mewakili ialah Saudara Wan dan Li Jiajia. Abang Wan botak, memakai pakaian sukan, dan cermin mata hitam; Li Jiajia menyerupai wanita retro 90-an, memakai merah dengan rambut ikal.

Encik Zhu yang kelihatan halus, memakai cermin mata dan sut tanpa janggut, tidak mempunyai ciri-ciri luar biasa, menjadikannya watak yang paling diulang oleh Jim.

Jim mendapati bahawa AI mudah menjana watak dengan aura "wang lama", tetapi bergelut dengan watak seperti Encik Zhu, yang kaya tetapi bukan elit, berbahaya tetapi bukan bos jenayah.

"Filem aksi langsung dengan penapis animasi," ialah cara Jim menerangkan gaya animasinya. Penonton boleh membayangkan bagaimana rupanya dengan pelakon sebenar.

Sebaik sahaja imej setiap watak dijana melalui teks, ia seperti mempunyai foto kostum filem. Jim kemudian menggunakan imej ini sebagai bahan, menghasilkan lebih banyak imej dengan sudut dan pemandangan yang berbeza sambil mengekalkan watak tidak berubah.

Dengan imej yang mencukupi, video boleh dijana. Alat video AI dikemas kini dengan cepat; “The Thin Man The Gun The Hotpot” menggunakan versi dari Ogos hingga September 2024.

Untuk tangkapan yang mencabar dari segi teknikal, Jim bereksperimen dengan pelbagai alatan video. Setiap alat mempunyai kekuatannya. Jidream, Keling, dan Pika adalah alat yang paling banyak digunakan.

Pada masa itu, Jidream cemerlang dalam syot aksi, Pika pada syot adegan dan animasi bercakap mudah, manakala Keling mempunyai keupayaan keseluruhan yang kuat, walaupun kadangkala tidak perlu rumit dalam situasi tertentu.

Walaupun dengan alatan hari ini, banyak adegan dalam “The Thin Man The Gun The Hotpot” mencabar untuk dicapai secara semula jadi. Ini memerlukan bergantung pada kaedah tradisional.

Sebagai contoh, apabila watak tidak menghadap terus ke hadapan atau dalam jarak dekat yang mudah dikenali AI, dan apabila aksi, ekspresi dan sudut kamera sedang bergerak, pelakon suara mesti mengalih suara mengikut pergerakan bibir video. Jim percaya bahawa ciri baharu tidak semestinya berguna; kaedah lama, walaupun mungkin kekok, lebih dipercayai.

Niche dan Pelbagai

Kisah “The Thin Man The Gun The Hotpot” berlatarkan sebuah bandar kecil di barat daya China, dengan watak-watak yang bercakap dialek Sichuan, pilihan peribadi Jim. Gaya seni "The Thin Man The Gun The Hotpot" juga unik, dengan penonton membandingkannya dengan episod "Love, Death & Robots."

Dalam kerjanya dalam industri permainan, Jim telah melihat terlalu banyak kandungan yang serupa dan diuji.

Penciptaan berasaskan AI boleh diperibadikan. Kerja berkualiti tinggi masih memerlukan syarikat besar untuk melabur sumber yang besar, tetapi Jim melihat lebih banyak kemungkinan dalam mencipta "kerja asas."

Sejak mula menggunakan Midjourney, Jim jelas bahawa dia tidak mahu mencipta dalam gaya "arus perdana". Sebagai pengguna berat Midjourney, dia amat mengetahui gaya yang mudah dihasilkan AI, yang juga merupakan zon larangannya.

Dia lebih suka gaya yang tidak dapat dikenali dengan segera, dengan rasa retro tetapi tidak sepenuhnya animasi kuno—biasa lagi novel.

Untuk gaya seni "The Thin Man The Gun The Hotpot," Jim merujuk pengarah animasi Masaaki Yuasa dan artis manga Yoshiharu Tsuge.

Dia mula-mula menggunakan ciri Huraikan Midjourney untuk memahami kata kunci gaya mereka, kemudian terus menulis gesaan, berulang kali berulang untuk menjana imej yang memenuhi keperluannya.

Pandangan dunia "The Thin Man The Gun The Hotpot" sebahagian besarnya berpunca daripada kawasan dan unsur yang biasa digunakan Jim.

Pada 2019, Jim menonton "The Wild Goose Lake" arahan Diao Yinan dan dibintangi oleh Hu Ge, dan sangat kagum dengan "setting yang sederhana dengan estetika dan teras noir". Dia menyedari bahawa filem bergenre tradisional tidak berlatarbelakangkan batu, dan terdapat daya hidup baharu dalam naratif Cina.

Pada tahun 2021, Jim mula menulis skrip, membentuk garis besar asas "The Thin Man The Gun The Hotpot," termasuk sebuah bandar kecil, seorang lelaki muda yang terdesak dan kesusahan hidup.

Pada tahun 2023, Jim mula menggunakan Midjourney untuk mempelajari seni konsep AI.

Walau bagaimanapun, sebelum 2024, Jim tidak pernah terfikir untuk benar-benar membuat filem AI. Dia belajar sendiri fotografi, penulisan skrip, dan sinematografi tetapi berhenti di situ. Video bercerita melalui kanta, tetapi dia tidak dapat mencipta syot set sendiri.

Pada awal 2024, Jim mula menggunakan beberapa video AI terawal seperti Pika dan tiba-tiba menyedari dia akhirnya boleh menghidupkan adegan, melaraskan dan mengubah suai imej serta menyambungkannya untuk menyiapkan filem pendek. Keinginannya untuk mencipta menjadi sangat kuat sebelum ini.

Dengan bahan sedia, sudah tiba masanya untuk mengedit, kesan bunyi, alih suara dan muzik. Jim menyelidiki lebih mendalam proses pengeluaran filem tradisional. Dia bereksperimen dan belajar, secara beransur-ansur memuat naik beberapa karya yang digayakan secara peribadi di Bilibili.

Filem pendek AI Jim yang lain, "Hard Bop Gunman," diambil daripada gaya komik lama Amerika dan filem senyap, kemudian memenangi anugerah dalam Pertandingan Video Trek Kreatif bagi sebuah AI pada platform seperti 1905 Movie Network dan Bilibili.

AI masih belum mengganggu banyak industri, tetapi untuk pasukan kecil dan pencipta individu, kos penciptaan telah diterima, dan kandungan yang pelbagai mempunyai peluang untuk dilihat oleh khalayak.

Menetapkan "The Thin Man The Gun The Hotpot" di wilayah Sichuan-Chongqing, Jim mengakui dia agak "sengaja." Dia membuktikan bahawa apabila mencipta kandungan khusus, tidak lagi perlu terlalu risau tentang tanggapan tradisional "terlalu berisiko".

Terhad, Namun Unik

"The Thin Man The Gun The Hotpot" selama 10 minit mungkin tidak dianggap sebagai video panjang di Bilibili. Tetapi dalam komuniti AI, 10 minit adalah panjang yang jarang berlaku, apatah lagi "The Thin Man The Gun The Hotpot" menceritakan kisah yang lengkap.

Untuk melengkapkan 10 minit ini, Jim menolak kedua-dua dirinya dan AI ke had.

Adegan aksi di restoran hotpot dalam "The Thin Man The Gun The Hotpot" mengambil banyak usaha daripada Jim, dengan setiap tangkapan direka, tetapi kesan akhir menunjukkan kurang daripada 40%.

Jim mengakui bahawa adegan aksi AI memang kurang, tanpa kesan dan tidak mengikut logik fizikal, seperti memukul udara. Bukan sahaja adegan aksi, tetapi sebarang pukulan dengan pergerakan yang ketara, seperti tercekik, membaling tukul atau menghancurkan dengan batu, adalah sukar untuk dicapai oleh AI.

Mengikut pengalaman Jim, jika anda mesti mereka adegan aksi untuk AI, elakkan senjata sejuk dan gunakan senjata api sebaliknya, kerana AI sekurang-kurangnya boleh mensimulasikan penangkapan. Dia sendiri menggunakan teknik ini, "Terima kasih kepada filem lama Hong Kong untuk penyelamatan."

Apabila pelakon sebenar bergelut dengan adegan aksi, aksi beregu boleh masuk, tetapi ekspresi muka ekspresif adalah kemahiran asas pelakon. Walau bagaimanapun, ini juga merupakan titik lemah untuk AI, yang sama ada melampaui atau tidak menunjukkan ekspresi.

Pada Oktober 2024, Runway melancarkan ciri Act-One, yang mendorong watak AI untuk membuat ekspresi yang sama berdasarkan video prestasi manusia sebenar. Jim melihat ini sebagai tanda bahawa jika lebih banyak produk melancarkan ciri yang serupa, ini menunjukkan bahawa AI sememangnya mempunyai kesesakan dalam prestasi.

Dalam “The Thin Man The Gun The Hotpot,” watak sering muncul dalam gambar dekat dan separuh badan, mencerminkan kelemahan AI: mengendalikan syot dengan berbilang subjek. Semasa mereka gambar, Jim cuba mengelak adegan dengan berbilang orang kerana dia belum menemui penyelesaian yang baik lagi.

Walaupun semasa menjana imej dengan Midjourney, jika terdapat lebih daripada dua orang, masalah muka mungkin timbul. Apabila diletakkan dalam interaksi video AI, pemandangan menjadi lebih huru-hara.

Visual yang dijana AI mempunyai banyak batasan, jadi dalam pasca produksi, Jim menggunakan gambar dekat, syot simbolik dan potongan pantas untuk mengimbangi kekurangan visual. Imej haiwan yang berulang dalam "The Thin Man The Gun The Hotpot" ialah contoh.

Metafora dan simbolisme juga biasa digunakan dalam beberapa filem noir klasik Amerika. Pada tahun 1940-an dan 50-an, disebabkan oleh had teknikal dan peraturan seperti Kod Hays yang menyekat imejan ganas, keadaannya agak serupa dengan video AI pada tahun 2024.

Gema merentasi dekad menarik minat Jim, "Mungkin kaedah lapuk berfungsi dengan baik dalam filem AI."

Walau bagaimanapun, khalayak bersikap jujur, menawarkan maklum balas seperti "persembahan PowerPoint yang lancar" atau "komik dinamik yang dipertingkatkan." Jim menerima ini, itulah sebabnya dia memilih untuk membuat animasi AI.

Berbanding dengan gaya hidup sebenar yang berkulit licin dan menakutkan, animasi sekurang-kurangnya "tidak membuatkan penonton segera berfikir, wow, ini terlalu palsu." Pergerakan watak yang sedikit kaku dan tegar lebih boleh diterima dalam animasi tidak realistik.

Tidak mengejar panjang secara membuta tuli dan memastikan kualiti terlebih dahulu adalah sebahagiannya kerana Jim menanda aras terhadap filem biasa. Dia menyertai pertandingan bukan AI Anugerah Seluar Pendek Bebas untuk membuat hakim terlepas pandang label AI dan fokus pada cerita itu sendiri.

Jim berharap apabila menonton karyanya, penonton dapat menyedari kehadiran AI tetapi tidak datang untuk AI, tidak menunjukkan kelonggaran dalam sistem penilaian filem AI, "Komuniti AI terlalu mesra, mendengar beberapa perkataan kasar adalah perlu."

Bertekun dalam Penciptaan untuk Mengatasi Kebimbangan

Berita AI sering menulis tentang "perubahan semalaman," dan mencipta filem pendek dalam masa tiga bulan sudah lama.

AI berkembang setiap hari. Pada 2023, Jim boleh mengikuti maklumat AI harian, tetapi mulai awal 2024, mengikuti arah aliran menjadi mustahil. Dia juga berasa cemas tetapi tidak secara membabi buta, seperti ramai orang lain.

Teknologi memang berkuasa, tetapi masih banyak kerja yang perlu dilakukan oleh manusia. Kesukaran dan minat dalam penciptaan terletak pada hakikat bahawa beberapa masalah mesti diselesaikan oleh pencipta itu sendiri.

Dalam "The Wild Goose Lake," terdapat adegan tembak-menembak yang meninggalkan kesan mendalam kepada Jim: orang ramai menari di dataran, polis berpakaian preman memakai kasut bercahaya, penjenayah menembak, polis mengejar dengan darah bercahaya, dan kemudian menembak juga.

Kontras yang tegang lagi suka bermain itu menggerakkan Jim. Tanpa adegan ini, reaksi pertama terhadap tarian persegi adalah "norak."

Dia percaya bahawa selalunya, unsur biasa tidak lapuk tetapi kurang penerokaan mendalam oleh pencipta.

Sebaliknya, perkara yang dinyatakan dengan teliti dengan alat lama mungkin tidak boleh digantikan dengan teknologi baharu.

Video AI telah dikemas kini berkali-kali, tetapi Jim tidak bercadang untuk membuat semula seluar pendek AI sebelumnya.

Reka bentuk dan kompromi keseluruhan filem pendek adalah berdasarkan batasan AI pada masa itu, membentuk entiti yang lengkap. Walaupun bertahun-tahun kemudian, masih terdapat aspek yang menyeronokkan, di mana nilai kerja itu terletak.

AI boleh membantu Jim menyelesaikan lebih banyak eksperimen serupa, memikirkan semula perkara yang menarik. Dia tidak suka AI secara langsung memberikan jawapan; dia lebih suka menyelesaikan masalah sendiri, menggunakan AI sebagai alat yang serupa dengan kalkulator.

Berbanding menggunakan AI untuk menjana iklan atau video muzik, Jim masih lebih suka menggunakan AI untuk bercerita. Baginya, "naratif adalah niat asal penciptaan filem."

Beberapa tahun yang lalu, semasa Jim belajar sendiri menulis skrip, dia bukan sahaja membaca buku tetapi juga berlatih dengan menulis skrip dan melengkapkannya, "Jika anda tidak habiskan, itu tidak bermakna."

Pada masa yang sama, dia menonton banyak filem, sentiasa menonton filem baru, mengatur syot yang menarik, dan menonton penjelasan dan analisis orang lain. Dia berkata dia "tidak mempunyai asas yang kukuh," tetapi dia sensitif terhadap imej, pandai menyambung objek yang serupa dan lebih baik menggunakan bahasa kamera untuk menyampaikan emosi dan perasaan dengan tepat.

Kini, Jim sedang berehat, merancang untuk berkongsi ciptaan AI, menghasilkan projek AI seterusnya dan mengikuti perkembangan terkini dalam setiap alat video AI. Pada pandangannya, tidak kira berapa banyak alat AI yang ada, sumber yang boleh dilaburkan oleh setiap orang adalah sama dan amat diperlukan. Kuantiti tidak penting; mencari jalan yang betul untuk diri sendiri adalah lebih penting.

Dalam bahagian ulasan Jim Bilibili, penonton menyifatkan pengalaman menonton mereka sebagai "alat tanpa jiwa, ciptaan yang penuh jiwa." Dia menjawab, "Pernyataan ini membawa banyak berat."

Cara terbaik untuk memerangi kebimbangan adalah penciptaan. Jim tidak mahu membuat spekulasi tentang apa yang boleh dilakukan AI pada masa hadapan atau siapa yang akan digantikannya. Dia lebih suka percaya bahawa sentiasa mencipta karya baru di tangannya adalah kubu kukuh seseorang.

Sumber daripada ifan

Penafian: Maklumat yang dinyatakan di atas disediakan oleh ifanr.com, secara bebas daripada Chovm.com. Chovm.com tidak membuat perwakilan dan jaminan tentang kualiti dan kebolehpercayaan penjual dan produk. Chovm.com secara jelas menafikan sebarang liabiliti untuk pelanggaran yang berkaitan dengan hak cipta kandungan.