El 27 de abril, según el Wall Street Journal, en el drama histórico bíblico "King of David" producido por Amazon, actores reales interpretaron a ángeles caídos y mujeres mortales, y el paisaje circundante era una obra maestra generada por IA, como un cielo sombrío de color gris acero y escarpadas crestas montañosas.

Figura 1: El fondo de "La dinastía de David" se genera utilizando IA

Hubo 850 tomas de efectos visuales en la primera temporada del programa, 73 de las cuales fueron creadas utilizando IA generativa, incluida una herramienta desarrollada por el sitio de videos chino Kuaishou. Wonder Project, el productor del programa, dijo que esto ahorra el costo de la costosa filmación en exteriores.

Desde éxitos de taquilla de Hollywood hasta videos cortos de redes sociales, los creadores de videos recurren cada vez más a la IA para producir contenido que antes requería grandes equipos de camarógrafos.

"A medida que los costos de producción caen, el umbral para que los creadores experimenten y prueben nuevas ideas también disminuye", dijo Zeng Yushen, jefe de operaciones del modelo grande Keling AI de Kuaishou Video. El modelo de IA desarrollado por la empresa se utilizó en la producción de "El rey de David".

La gran modelo china lidera el camino

Aunque la mayoría de los estadounidenses tal vez no se den cuenta cuando miran televisión o miran videos en sus teléfonos, China está desempeñando un papel importante en esta área. Las empresas chinas representan siete de los 10 principales modelos de generación de vídeo clasificados por la plataforma de revisión Artificial Analysis, que compiten con rivales como Google y xAI de Elon Musk.

Este mes, un modelo de generación de vídeos llamado "HappyHorse" se volvió viral después de vencer a sus rivales estadounidenses en una evaluación de calidad a ciegas. Más tarde, el gigante chino del comercio electrónico Alibaba reveló que el modelo era suyo.

Figura 2: China representa 7 de los diez principales modelos de vídeo

A principios de este año, Bytedance lanzó su último generador de vídeo con IA, Seedance 2.0, que también atrajo mucha atención. Puede convertir indicaciones de texto en escenas realistas de películas cortas. TikTok de ByteDance compite con Kuaishou, que tiene cientos de millones de usuarios en China.

Tilly Zhang, analista de tecnología de la firma de investigación Gavekal, dijo que estas plataformas "naturalmente tienen cantidades masivas de datos de videos cortos etiquetados que pueden usarse para el entrenamiento de modelos. Esto crea una barrera de datos que es difícil de replicar para la mayoría de las empresas".

Desafíos del modelo de vídeo

OpenAI decidió recientemente cerrar su servicio de generación de videos Sora y poner fin a su asociación con Disney. Otras empresas estadounidenses como Google siguen invirtiendo activamente en este campo.

El cierre de Sora pone de relieve los desafíos técnicos y legales que enfrenta el vídeo con IA. Generar un vídeo puede requerir cientos de veces más potencia informática que una aplicación de chatbot que produzca una respuesta de texto. OpenAI espera evitar invertir en proyectos marginales que consuman demasiada potencia informática para centrarse en productos con mayores márgenes de beneficio.

Los problemas de derechos de autor también afectan a la industria. ByteDance ha retrasado el lanzamiento de su actualización Seedance en EE. UU. tras la oposición de Hollywood. En China, algunos actores conocidos también condenaron públicamente recientemente el uso no autorizado de sus imágenes en videos generados por IA.

Figura 3: OpenAI cierra Sora

La plataforma de vídeo china iQiyi se ha visto envuelta en una controversia recientemente. Cuando su director ejecutivo, Gong Yu, presentó un proyecto de inteligencia artificial que incluye una biblioteca de licencias para retratos de celebridades, dijo: "La fotografía con actores reales pronto podría convertirse en una cosa del pasado". Tan pronto como salió esta declaración, muchos actores conocidos rápidamente se pronunciaron y afirmaron que no tenían nada que ver con el proyecto.

Aún así, los vídeos de IA se están integrando cada vez más en la vida diaria en línea de las personas, especialmente en China pero también en Estados Unidos, donde las dos superpotencias se influyen mutuamente. A principios de este año, una serie de absurdas parodias cortas de películas de artes marciales obtenidas por IA obtuvieron miles de millones de visitas en las redes sociales chinas e inspiraron a un gran número de fanáticos a crear videos similares. Los videos originales fueron producidos por una empresa de alimentos china que utilizó las herramientas de inteligencia artificial de ByteDance para promocionar su producto de pato estofado.

Algunas nuevas empresas chinas de modelado de vídeo están invirtiendo en "modelos mundiales", que están diseñados para simular el mundo físico. Algunos investigadores dicen que los robots humanoides equipados con excelentes modelos del mundo pueden exhibir comportamientos más cercanos a los humanos.

Ya sea un modelo mundial o una generación de video de IA, es necesario dominar las leyes matemáticas y físicas básicas del movimiento de objetos en el mundo real. Muchas empresas, como Aishi Technology y Shengshu Technology, invertidas por Alibaba, están avanzando simultáneamente en estas dos direcciones técnicas.

IA de juego corto

La industria de los dramas cortos de rápido crecimiento se ha convertido en una de las primeras en adoptar la tecnología de generación de videos con IA. Estas series, que giran en torno al romance o las disputas familiares, duran solo unos minutos cada una y están diseñadas para mantener a los espectadores pegados a las pantallas de sus teléfonos. Debido al ritmo ajustado y los frecuentes cambios de trama, los espectadores suelen ser menos sensibles a los defectos visuales cuando miran este tipo de contenido en pantalla pequeña.

Este tipo de contenido se ha disparado en China y se están integrando miniseries en sitios de comercio electrónico y aplicaciones de entrega de alimentos para competir por la atención de los consumidores. Recientemente, este modelo también ha ido surgiendo paulatinamente en Estados Unidos. Plataformas como ReelShort y DramaBox creadas por fundadores chinos han generado decenas de millones de dólares en ingresos del público estadounidense.

En un estudio en la ciudad de Hangzhou, en el este de China, Shao Zhikun dirige un equipo de producción de dramas cortos con IA de 60 personas. Dijo que su flujo de trabajo se parecía más a jugar a la lotería que a hacer una película.

Para crear una escena utilizable, el equipo de Shao Zhikun necesita ingresar repetidamente palabras clave en el modelo de IA, lo que consume mucho tiempo y potencia informática. A veces, afirma, los clips que se obtienen con éxito son de suficiente calidad como para servir como base para un posterior pulido. El equipo también descubrió cómo ahorrar dinero generando primero imágenes estáticas más baratas y luego usando estas imágenes como guías para ayudar al modelo a generar videos, ahorrando así costos.

El equipo de Shao Zhikun utiliza las herramientas de Bytedance para producir 100 dramas cortos cada mes para plataformas como Hongguo Short Drama y ReelShort de Bytedance. Shao Zhikun dijo que los costos de producción oscilan entre unos pocos cientos de dólares estadounidenses y más de 10.000 dólares estadounidenses, lo que es sólo una pequeña parte del presupuesto tradicional.

El líder del equipo de 29 años dijo: "La lógica aquí es diferente. No estamos tratando de crear obras maestras artísticas. Mientras uno o dos dramas se conviertan en éxitos, el costo se puede recuperar".

Al igual que los videojuegos, las miniseries intentan atraer a los espectadores con episodios o avances gratuitos y luego les exigen que paguen o vean anuncios para desbloquear el contenido posterior. También podrán incluir cortes comerciales dentro del espectáculo.

Zeng Yushen, jefe de operaciones de Kuaishou Keling AI, dijo que la demanda de la industria del entretenimiento también está creciendo fuera de China. Miracle Pictures, el productor de la serie "King of David", reveló que en la segunda temporada, la cantidad de tomas producidas utilizando herramientas de inteligencia artificial generativa fue más de cuatro veces mayor que en la primera temporada.

Zeng Yushen dijo que el 70% de los ingresos de Keling provienen de fuera de China y que Estados Unidos es su principal mercado. Kuaishou dijo que planea gastos de capital de aproximadamente 3.800 millones de dólares este año, principalmente para satisfacer las crecientes necesidades de potencia informática de Keling.

"Predigo que dentro de uno o dos años, los videos de IA alcanzarán un nivel en el que será realmente difícil para las personas distinguir entre autenticidad y falsedad", dijo Zeng Yushen. "Esta tecnología se convertirá en un pilar de la industria del cine y el entretenimiento".