Inicio » Últimas noticias » Animación con IA: una nueva era en la creación de cortometrajes
Póster de animación de IA con elementos de diseño abstracto.

Animación con IA: una nueva era en la creación de cortometrajes

¿Cómo se destacó el proyecto de IA de un cineasta no profesional entre los cortometrajes comunes?

En febrero de 2023, Jim, un programador de la industria del juego, se convirtió en artista de IA.

En diciembre de 2024, el cortometraje animado con inteligencia artificial de Jim, “The Thin Man The Gun The Hotpot”, ganó el premio de oro al mejor cortometraje de animación en los Independent Shorts Awards.

Este es un importante festival internacional de cortometrajes en el mundo del cine independiente, no específicamente para obras de IA, lo que lo convierte en un gran logro para Jim. Afirmó: "Es gratificante que los jueces se centraran en la historia en sí, ignorando la etiqueta de IA".

Póster de la película The Thin Man The Gun The Hotpot que presenta un tema misterioso y oscuro.

Jim completó en solitario “The Thin Man The Gun The Hotpot”. La película de 10 minutos consta de 242 tomas, tardó casi tres meses en realizarse y requirió al menos 200 horas de trabajo, con un promedio de más de dos horas diarias.

Durante el proceso de creación de 90 días, Jim sintió que estaba en una batalla de ingenio con la IA, superando sus límites y evitando sus restricciones. Cuando los espectadores comentaron: "La IA ha comenzado a hacer animaciones", Jim respondió: "Son los creadores los que impulsan a la IA a hacer animaciones".

3 meses, 10 minutos

“The Thin Man The Gun The Hotpot” es una película policial de cine negro, un género importante en el pasado de Hollywood, con una historia arraigada en la cultura china. El término “The Thin Man The Gun The Hotpot” proviene del suroeste de China y hace referencia a pequeños puestos de comida que abren a altas horas de la noche.

El protagonista, Xu Xia, es un joven que come en un puesto callejero a altas horas de la noche. Para pagar el tratamiento médico de su padre, toma decisiones poco éticas, pero mantiene una línea moral intocable. Al final, se ve envuelto en la violencia y el asesinato, atrapado por el destino.

El hombre delgado, la pistola, el hotpot captura de pantalla completa de la película con una atmósfera oscura y de suspenso.

En lugar de llamarlo “animación de IA”, es más preciso decir que “The Thin Man The Gun The Hotpot” es una animación realizada con herramientas de IA.

La IA generó los elementos visuales, mientras que otros elementos como el guion, la edición, la actuación de voz, la música y los efectos de sonido se hicieron manualmente. El texto de los elementos visuales se agregó en posproducción.

En cuanto a lo visual, Jim sigue un estilo de “generación puramente artificial”. “The Thin Man The Gun The Hotpot” no tiene imágenes en vivo; se basa en la conversión de imagen a video. Las imágenes fueron generadas por Midjourney y los videos por Keling, Pika, Jidream, PixVerse y Runway.

La generación de IA es impredecible, pero contar una historia coherente con IA requiere estabilidad. A partir del diseño de personajes, Jim consideró cómo mantener la coherencia de los personajes.

Jim tenía dos principios para el diseño de personajes. En primer lugar, la apariencia general debía ser simple, describible con unas pocas palabras clave. En segundo lugar, los personajes debían tener elementos distintivos, de modo que, aunque no fueran completamente consistentes, siguieran siendo reconocibles para el público.

Los personajes más representativos son el hermano Wan y Li Jiajia. El hermano Wan es calvo, viste ropa deportiva y gafas de sol; Li Jiajia se asemeja a una mujer retro de los años 90, viste de rojo y tiene el pelo ondulado.

El Hombre Delgado, La Pistola, El Personaje de Hotpot, el Hermano Wan con un aspecto distintivo.
El hombre delgado La pistola El personaje de Hotpot “Hermano Wan” con un aspecto distintivo
El hombre delgado, la pistola y el personaje de Hotpot, Li Jiajia, con un estilo retro de los 90.
El hombre delgado La pistola El personaje de Hotpot “Li Jiajia”

El aparentemente refinado Sr. Zhu, con gafas y traje sin barba, carece de rasgos inusuales, lo que lo convierte en el personaje más iterado por Jim.

Jim descubrió que la IA genera fácilmente personajes con un aura de “dinero antiguo”, pero tiene dificultades con personajes como el Sr. Zhu, que es rico pero no pertenece a la élite, peligroso pero no es un jefe criminal.

El hombre delgado, la pistola y el personaje de Hotpot, el Sr. Zhu, con una apariencia sofisticada.
El hombre delgado La pistola El personaje de Hotpot “Sr. Zhu” 

“Una película de acción real con un filtro de animación”, así describe Jim su estilo de animación. Los espectadores pueden imaginar cómo se vería con actores reales.

Una vez que se genera la imagen de cada personaje a través del texto, es como tener la foto del vestuario de una película. Jim luego usa estas imágenes como material, generando más imágenes con diferentes ángulos y escenas mientras mantiene los personajes inalterados.

Con suficientes imágenes, se pueden generar videos. Las herramientas de video con IA se actualizan rápidamente; “The Thin Man The Gun The Hotpot” utilizó versiones de agosto a septiembre de 2024.

Para las tomas técnicamente más complejas, Jim experimentó con varias herramientas de video. Cada herramienta tiene sus puntos fuertes. Jidream, Keling y Pika fueron las herramientas más utilizadas.

En ese momento, Jidream se destacó en tomas de acción, Pika en tomas de escena y animaciones de diálogo simples, mientras que Keling tenía fuertes capacidades generales, aunque a veces innecesariamente complejas en situaciones específicas.

El Hombre Delgado, La Pistola, La Olla Caliente escena de conversación con personajes animados.

Incluso con las herramientas actuales, muchas escenas de “El hombre delgado, la pistola, el estofado” son difíciles de lograr de forma natural, por lo que es necesario recurrir a métodos tradicionales.

Por ejemplo, cuando los personajes no están mirando directamente hacia adelante o en primeros planos que la IA puede reconocer fácilmente, y cuando las acciones, expresiones y ángulos de cámara están en movimiento, un actor de doblaje debe realizar el doblaje de acuerdo con los movimientos de los labios del video. Jim cree que las nuevas funciones no son necesariamente útiles; los métodos antiguos, aunque quizás torpes, son más confiables.

Nicho y Diversidad

La historia de “The Thin Man The Gun The Hotpot” se desarrolla en un pequeño pueblo del sudoeste de China, con personajes que hablan el dialecto de Sichuan, una preferencia personal de Jim. El estilo artístico de “The Thin Man The Gun The Hotpot” también es único, y los espectadores lo comparan con un episodio de “Love, Death & Robots”.

En su trabajo en la industria de los videojuegos, Jim ha visto demasiado contenido similar y probado.

La creación basada en IA se puede personalizar. Las obras de alta calidad aún requieren que las grandes empresas inviertan recursos importantes, pero Jim ve más posibilidades en la creación de “una obra básica”.

Desde el principio, Jim tenía claro que no quería crear con un estilo "convencional". Como usuario intensivo de Midjourney, es muy consciente de los estilos que la IA genera fácilmente, que también son sus zonas prohibidas.

Imagen estilo Y2K generada por IA por Jim.
Imagen estilo Y2K generada por IA por Jim.

Prefiere estilos que no sean inmediatamente reconocibles, con un toque retro pero sin una animación totalmente anticuada: familiar pero novedosa.

Para el estilo artístico de “The Thin Man The Gun The Hotpot”, Jim hizo referencia al director de animación Masaaki Yuasa y al artista de manga Yoshiharu Tsuge.

Primero utilizó la función Describe de Midjourney para comprender las palabras clave de sus estilos, luego escribió indicaciones continuamente, iterando repetidamente para generar imágenes que cumplieran con sus requisitos.

Escena de El hombre delgado, la pistola y la olla caliente.

La cosmovisión de “The Thin Man The Gun The Hotpot” proviene en gran medida de las regiones y elementos con los que Jim está familiarizado.

En 2019, Jim vio “El lago del ganso salvaje”, dirigida por Diao Yinan y protagonizada por Hu Ge, y quedó profundamente impresionado por su “ambiente realista con una estética y un núcleo de cine negro”. Se dio cuenta de que las películas de género tradicionales no están escritas en piedra y que hay una nueva vitalidad en las narrativas chinas.

Personaje principal de "El hombre delgado, la pistola y el estofado", inspirado en el look de Hu Ge.

En 2021, Jim comenzó a escribir el guion, formando el esquema básico de “The Thin Man The Gun The Hotpot”, que incluye un pequeño pueblo, un joven desesperado y una situación difícil en la vida.

En 2023, Jim comenzó a usar Midjourney para aprender el arte conceptual de la IA.

Sin embargo, antes de 2024, Jim nunca pensó en hacer una película con IA. Aprendió por su cuenta fotografía, escritura de guiones y cinematografía, pero se detuvo allí. Los videos cuentan historias a través de lentes, pero no podía crear sus propias tomas del set.

A principios de 2024, Jim comenzó a utilizar algunos de los primeros videos de IA como Pika y de repente se dio cuenta de que finalmente podía animar escenas, ajustar y modificar imágenes y conectarlas para completar un cortometraje. Su deseo de crear se volvió increíblemente fuerte.

Con los materiales listos, llegó el momento de la edición, los efectos de sonido, el doblaje y la música. Jim se adentró más en el proceso de producción cinematográfica tradicional. Experimentó y aprendió, subiendo gradualmente algunas obras estilizadas y personalmente distintivas a Bilibili.

Captura de pantalla de "Hard Bop Gunman".
Otra captura de pantalla de "Hard Bop Gunman".
Otra captura de pantalla de “Hard Bop Gunman”. 

El otro cortometraje de inteligencia artificial de Jim, “Hard Bop Gunman”, se inspiró en el estilo de los viejos cómics estadounidenses y las películas mudas, y luego ganó un premio en la categoría Creative Track de un concurso de videos de inteligencia artificial en plataformas como 1905 Movie Network y Bilibili.

La IA aún no ha revolucionado muchas industrias, pero para equipos pequeños y creadores individuales, el costo de creación se ha vuelto aceptable y el contenido diverso tiene la oportunidad de ser visto por el público.

Jim admite que, al ambientar “The Thin Man The Gun The Hotpot” en la región de Sichuan-Chongqing, fue algo “deliberado”. Está demostrando que, al crear contenido de nicho, ya no hay necesidad de preocuparse demasiado por la noción tradicional de “demasiado arriesgado”.

Limitado, pero único

Un video de 10 minutos de duración de “The Thin Man The Gun The Hotpot” podría no considerarse un video largo en Bilibili. Pero en la comunidad de IA, 10 minutos es una duración poco común, sin mencionar que “The Thin Man The Gun The Hotpot” cuenta una historia completa.

Para completar estos 10 minutos, Jim se exigió a sí mismo y a la IA hasta el límite.

Las escenas de acción en el restaurante de hotpot en “The Thin Man The Gun The Hotpot” le exigieron mucho esfuerzo a Jim, ya que cada toma fue diseñada a la perfección, pero el efecto final fue menor al 40%.

Escena de acción de "El hombre delgado, la pistola y el estofado".
Escena de acción de “El hombre delgado, la pistola y el estofado”. 

Jim admite que las escenas de acción de la IA son realmente deficientes, no tienen sensación de impacto y no siguen una lógica física, como golpear el aire. No solo las escenas de acción, sino cualquier toma con un movimiento significativo, como un atragantamiento, un lanzamiento de martillo o un golpe con una piedra, son difíciles de lograr para la IA.

Según la experiencia de Jim, si tienes que diseñar escenas de acción para la IA, evita las armas blancas y utiliza en su lugar armas de fuego, ya que la IA al menos puede simular disparos. Él mismo utilizó esta técnica: “Gracias a las viejas películas de Hong Kong por el rescate”.

Cuando los actores reales tienen dificultades con las escenas de acción, los dobles pueden intervenir, pero las expresiones faciales expresivas son una habilidad básica de un actor. Sin embargo, este también es un punto débil para la IA, que sobreactúa o no muestra expresión alguna.

En octubre de 2024, Runway lanzó la función Act-One, que impulsa a los personajes de IA a hacer las mismas expresiones basadas en videos de desempeño humano real. Jim ve esto como una señal de que, si más productos lanzan funciones similares, indica que la IA tiene un cuello de botella en el rendimiento.

Expresión de personajes de IA impulsada por el desempeño humano real.
Pasarela, acto uno

En “The Thin Man The Gun The Hotpot”, los personajes suelen aparecer en primeros planos y tomas de medio cuerpo, lo que refleja una debilidad de la IA: manejar tomas con múltiples sujetos. Al diseñar tomas, Jim intenta evitar escenas con múltiples personas porque aún no ha encontrado una buena solución.

Incluso al generar imágenes con Midjourney, si hay más de dos personas, pueden surgir problemas faciales. Cuando se colocan en interacciones de video con IA, la escena se vuelve aún más caótica.

Las imágenes generadas por IA tienen muchas limitaciones, por lo que en la posproducción, Jim utiliza primeros planos, tomas simbólicas y cortes rápidos para compensar las deficiencias visuales. Las imágenes recurrentes de animales en “The Thin Man The Gun The Hotpot” son un ejemplo.

Captura de pantalla de "El hombre delgado, la pistola y el estofado"

Las metáforas y el simbolismo también son habituales en algunas películas clásicas del cine negro estadounidense. En los años 1940 y 50, debido a limitaciones técnicas y normativas como el Código Hays que restringía las imágenes violentas, la situación era algo similar a la de los vídeos de IA en 2024.

El eco a través de las décadas resulta intrigante para Jim: “Tal vez los métodos obsoletos funcionen bien en las películas de IA”.

Sin embargo, el público es honesto y ofrece comentarios como “una presentación de PowerPoint fluida” o “un cómic dinámico mejorado”. Jim lo acepta, por eso decidió hacer animaciones con IA.

En comparación con el estilo de vida real, de piel suave y movimientos inquietantes, la animación al menos "no hace que los espectadores piensen inmediatamente, vaya, esto es demasiado falso". Los movimientos ligeramente rígidos y rígidos de los personajes son más aceptables en la animación no realista.

Certificado de los premios Independent Shorts Awards
Certificado de los premios Independent Shorts Awards

En parte, Jim no persigue ciegamente la duración y se asegura de la calidad en primer lugar porque se basa en películas normales. Participó en el concurso de cortometrajes independientes Independent Shorts Awards para que los jueces pasaran por alto la etiqueta de IA y se centraran en la historia en sí.

Jim espera que al ver su trabajo, el público pueda ser consciente de la presencia de la IA, pero no acudir a ella, ni mostrar indulgencia en el sistema de evaluación de películas con IA: "La comunidad de IA es demasiado amigable, escuchar algunas palabras duras es necesario".

Persistir en la creación para vencer la ansiedad

Las noticias sobre inteligencia artificial a menudo hablan de “cambios repentinos”, y crear un cortometraje en tres meses ya es mucho tiempo.

La IA avanza día a día. En 2023, Jim podía mantenerse al día con la información diaria sobre IA, pero a principios de 2024, mantenerse al día con las tendencias se volvió imposible. También se siente ansioso, pero no a ciegas, como muchos otros.

La tecnología es poderosa, pero aún queda mucho trabajo por hacer para los humanos. La dificultad y el interés de la creación residen en que algunos problemas deben ser resueltos por el propio creador.

En “The Wild Goose Lake”, hay una escena de tiroteo que dejó una profunda impresión en Jim: la gente está bailando en una plaza, policías vestidos de civil usan zapatos brillantes, criminales disparan, la policía persigue con sangre brillante y luego también dispara.

Escena de "El lago del ganso salvaje"
Escena de “El lago del ganso salvaje”

El contraste tenso pero lúdico conmovió a Jim. Sin esta escena, la primera reacción al baile cuadrado sería “de mal gusto”.

Él cree que, a menudo, los elementos familiares no están obsoletos sino que carecen de una exploración profunda por parte de los creadores.

Por el contrario, las cosas expresadas cuidadosamente con herramientas antiguas no pueden ser reemplazadas por tecnología nueva.

Los videos de IA se han actualizado muchas veces, pero Jim no planea rehacer los cortos de IA anteriores.

El diseño y los compromisos de todo el cortometraje se basaron en las limitaciones de la IA en ese momento, formando una entidad completa. Incluso años después, todavía hay aspectos divertidos, que es donde radica el valor del trabajo.

La IA puede ayudar a Jim a realizar más experimentos similares y replantear cosas interesantes. A Jim no le gusta que la IA le proporcione respuestas directamente; prefiere resolver los problemas por sí mismo, utilizando la IA como una herramienta similar a una calculadora.

Escena de "El hombre delgado, la pistola y la olla caliente"
Escena de “El hombre delgado, la pistola y la olla caliente”

En comparación con el uso de la IA para generar anuncios publicitarios o vídeos musicales, Jim sigue prefiriendo utilizar la IA para contar historias. Para él, “la narrativa es la intención original de la creación cinematográfica”.

Hace unos años, cuando Jim estaba aprendiendo a escribir guiones por su cuenta, no solo leía libros, sino que también practicaba escribiendo guiones y completándolos: “Si no los terminas, no significa mucho”.

Al mismo tiempo, vio muchas películas, veía constantemente nuevas, organizaba tomas interesantes y observaba las explicaciones y análisis de los demás. Dice que “no tiene una base sólida”, pero es sensible a las imágenes, bueno para relacionar objetos similares y mejor en el uso del lenguaje de la cámara para transmitir emociones y sentimientos con precisión.

Cazuela de cabeza de pescado de "El hombre delgado, la pistola y la cazuela"

Ahora, Jim se está tomando un descanso, planeando compartir creaciones de IA, preparando el próximo proyecto de IA y poniéndose al día con los últimos avances en cada herramienta de video de IA. En su opinión, no importa cuántas herramientas de IA haya, los recursos que cada persona puede invertir son iguales e indispensables. La cantidad no importa; encontrar el camino correcto para uno mismo es más importante.

En la sección de comentarios de Jim Bilibili, un espectador describió su experiencia como “herramientas sin alma, creación con alma”. Respondió: “Esta afirmación tiene mucho peso”.

La mejor manera de combatir la ansiedad es la creación. Jim no quiere especular sobre lo que la IA puede hacer en el futuro ni sobre a quién reemplazará. Prefiere creer que la creación constante de nuevas obras en sus manos es la fortaleza sólida de una persona.

Fuente de ifanr

Descargo de responsabilidad: La información establecida anteriormente es proporcionada por ifanr.com, independientemente de Chovm.com. Chovm.com no representa ni garantiza la calidad y confiabilidad del vendedor y los productos. Chovm.com renuncia expresamente a cualquier responsabilidad por violaciones relacionadas con los derechos de autor del contenido.

Deja un comentario

Su dirección de correo electrónico no será publicada. Las areas obligatorias están marcadas como requeridas *

Ir al Inicio