Cómo la inteligencia artificial ayuda (y perjudica) al cine

por | 24/1/2023

Este artículo ha sido escrito con la colaboración de Mitchell Block, productor ejecutivo galardonado con un Oscar y catedrático Jon Anderson de Periodismo y Comunicación de la Universidad de Oregón.

El productor ejecutivo Mitchell Block, ganador de un Oscar, dice que recuerda cuándo se dio cuenta realmente que la inteligencia artificial (IA) cambiaría el cine para siempre. Fue poco después de ver la obra de Morgan Neville Anthony Bourdain: un chef por el mundo, un documental sobre el difunto Anthony Bourdain.

La película incluía diálogos generados por IA de la celebridad fallecida. Brock no se dio ni cuenta hasta que Neville mencionó en una entrevista que el diálogo se había producido con IA.

"Y eso es lo increíble de la IA: la idea de que puedes crear algo que no existe sin necesidad de un ejército de artistas y gente de efectos para hacer todo el trabajo duro", dice.

Índice de contenidos

Comparte archivos sin limitaciones

¿Archivos grandes? No te preocupes. MASV no tiene límites en los paquetes de archivos y gestiona archivos de hasta 15 TB.

Ejemplos de IA en el cine

La Cuarta Revolución Industrial impulsada por los macrodatos y la IA ha llegado a prácticamente todas las industrias del mundo, incluida la cinematográfica. Las herramientas de IA pueden hacer mucho más que resurrecciones sintéticas de actores fallecidos. También ayudan a profesionales creativos a escalar sus proyectos realizando tareas de forma más rápida y eficaz.

Pero persisten muchos interrogantes en torno a la ética, los usos y las implicaciones de la IA y sus vástagos, el aprendizaje automático (AM) y el aprendizaje profundo (AD). Mientras que algunos expertos afirman que, en última instancia, será algo que creará empleo, otros no están tan seguros, especialmente en lo que se refiere a las industrias creativas que antes se consideraban a salvo de la irrupción de la IA.

Algo especialmente problemático en el ámbito de la producción cinematográfica y de vídeo es el uso persistente (y creciente) de la IA generativa para crear imágenes y vídeos "deepfake", o ultrafalsos.

Kendrick Lamar Will Smith Deepfake

Fotograma del vídeo musical de "The Heart Part 5" de Kendrick Lamar, que utiliza la tecnología deepfake de Deep Voodoo.

Dicho esto, aunque la concienciación pública sobre la IA en la realización de películas ha aumentado recientemente, la tecnología ya está bien establecida en el negocio cinematográfico. Herramientas de IA para cine, y tareas relacionadas como la mezcla de audio, el enmascaramiento, la coloración, el doblaje de idiomas y la edición de vídeo ya son relativamente comunes.

De hecho, el número de empresas que ofrecen productos y servicios de IA a la industria de la producción de vídeo está floreciendo.

  • Flawless y su producto TrueSync para doblaje AI que lanzaron sigilosamente en 2018. Papercup, que realiza una función similar, existe desde 2017.
  • Digital Domain, Hour One, y Tally Labs crean personajes virtuales e incluso humanos artificiales.
  • Aigency proporciona gestión de talentos "para personalidades robóticas", y con ello se refieren a humanos virtuales, no a personas reales.

Y los creadores de "South Park" consiguieron hace poco 20M $ en capital riesgo para financiar su Deep Voodoo que pretende crear "tecnología líder de deepfake", "servicios de efectos visuales rentables" y "proyectos de medios sintéticos".

Todo ello se suma a un frenesí de actividad en torno a los medios de comunicación con IA, también conocidos como medios de comunicación sintéticos. Entonces, ¿a qué viene todo este revuelo?

Consigue la mejor transferencia de archivos grandes

Regístrate hoy y obtén 20 GB gratis para usar con la transferencia rápida y fiable de archivos grandes de MASV.

Cómo ayuda la IA a cineastas y productores de vídeo

Las formas en las que la IA ayuda a los flujos de trabajo de producción de vídeo son casi demasiadas para abarcarlas en su totalidad, así que nos centraremos en algunas de las áreas principales, el tema general siendo que las herramientas de IA ayudan a ahorrar tiempo y dinero en cada una de ellas.

1. Plan de preproducción

La IA ya se ha convertido en una parte cotidiana del proceso de preproducción. Ayuda a planificar el rodaje y otros calendarios, a encontrar lugares de rodaje adecuados analizando datos del mundo real y comparándolos con los requisitos del guión, e incluso a organizar el metraje para ayudar a los editores a encontrar escenas o ángulos de cámara específicos más rápido.

"Si quieres simplificar la preproducción en términos de logística y diseño y de organizar una película (desde el reparto hasta el presupuesto, pasando por el desglose de las localizaciones, el atrezzo y el vestuario), todas esas cosas se pueden hacer y presupuestar fácilmente y con precisión utilizando IA a partir del guión", explica Block.

2. Edición de vídeo

Las herramientas de IA ya están bien establecidas en el mundo de la edición de vídeo. Aunque existen generadores de vídeo de IA completos, la mayoría de las herramientas de IA para la edición de vídeo ayudan a escalar el trabajo de editores de vídeo humanos.

  • Herramientas de marco como Premiere Pro, por ejemplo, ofrecen herramientas de IA para realizar automáticamente la correspondencia de colores, los cambios de relación de aspecto y usan motion tracking.
  • Otras herramientas, como Runway, permiten a los editores rotoscopiar y enmascarar secuencias en cuestión de minutos utilizando ML, un cambio importante respecto a los métodos tradicionales que suelen requerir varias horas.
  • Flawless, la empresa que hemos mencionado antes, aprende los fonemas y visemas (cómo suenan y el aspecto que tienen al emitir sonidos) de los actores. Esto le permite a los editores de vídeo "alterar a la perfección sus expresiones faciales y movimientos de boca para que coincidan con el diálogo recién grabado", según Los Angeles Times.
  • La IA también ayuda a restaurar películas antiguas eliminando automáticamente arañazos, suciedad, deformaciones y parpadeos de las copias.
  • Y la compresión de vídeo con IA puede , en teoría, mejorar la calidad de vídeo de las producciones de menor resolución.

3. Efectos visuales (VFX)

Hemos mencionado cómo la IA ha ayudado a reanimar a actores fallecidos y cómo el aprendizaje automático puede aumentar drásticamente la velocidad del trabajo manual, como la rotoscopia y el enmascaramiento. Pero también ha ayudado a agilizar el pipeline de VFX automatizando partes del modelado 3D, el procesamiento de imágenes, la gradación del color, el match moving y otros elementos.

La IA también se utiliza habitualmente para rejuvenecer o envejecer actores vivos, construir fondos digitales y aumentar la iluminación, y su capacidad para escanear escenas enteras y clasificar objetos puede acelerar aún más el proceso de efectos visuales.

4. Casting y Guión

La IA puede ayudar a tomar decisiones de casting extrayendo mucha información sobre la actuación y la reacción del público para determinar cuál es el mejor actor para un papel determinado. Los directores de casting cargan los guiones directamente en herramientas de IA como Largo.ai, analizando qué actores podrían monetizar el papel de forma más eficaz o quiénes podrían conllevar un mayor riesgo.

Pero como con cualquier buena herramienta de IA, el humano toma la decisión final. En este caso, el director de casting. Simplemente se trata de una decisión más informada que requiere menos tiempo y energía.

La tecnología también se utiliza para desarrollar guiones. DeepMind de Google creó una herramienta llamada Dramatron que aprovecha grandes modelos lingüísticos para generar guiones aproximados para películas, programas de TV u obras de teatro. Los guiones generados por la IA se completan con un título, descripciones de personajes, diálogos y descripciones de escenas.

Logotipo de Dramatron

5. Marketing y promoción

Estudios como Warner Bros. utilizan software con IA como Cinelytic o ScriptBook para predecir qué guiones tienen más posibilidades de éxito comercial y determinar qué películas se hacen y cuáles no.

"El sistema puede calcular en segundos lo que antes un humano tardaba días en valorar en términos generales del conjunto de la película o de la valía de una estrella", afirma el fundador de Cinelytic, Tobias Queisser, en The Hollywood Reporter.

Y la red neuronal Merlin, desarrollada por 20th Century Fox, junto con otras herramientas similares, ayudan a los estudios a realizar una serie de actividades de gestión y promoción de películas, entre ellas:

  • Optimizar los trailers de películas para conseguir la mejor reacción.
  • Optimizar one-sheets para la promoción de películas.
  • Planificar campañas de marketing por geolocalización y demografía o intereses de la audiencia mediante microsegmentación.

"Si puedes identificar a cinco millones de espectadores potenciales para llevar a 500.000 personas al cine por una fracción del coste, se trata de una ventaja enorme para el negocio del cine", afirma Block. "La IA puede ayudar a cineastas, así como a estudios, ejecutivos y financieros, a averiguar cómo crear su película, pero también cómo financiarla y comercializarla".

6. Composición musical

Ahora equipos de producción pueden utilizar programas informáticos con IA, como Dynascore para componer música para su producción de vídeo. En lugar de la música de archivo y sus limitaciones inherentes, el software de composición de IA genera partituras musicales adaptadas para sincronizarse con los cortes y otras acciones de un guión.

Y Sony Computer Science Laboratories (CSL) ha desarrollado Flow Machines, un compositor musical de IA para ayudar a compositores humanos a crear varios acordes y melodías para adaptarlos al estilo que buscan.

7. Producción

Las películas o vídeos producidos íntegramente por IA sin apenas intervención humana aún son raros, aunque un artista informático ganó hace poco el Premio del Jurado del Festival de Cortometrajes de Cannes por su película generada por IA de texto a vídeo, The Crow.

Otro no cineasta, Adrian Seltzer, ha sido aclamado recientemente por Salt, una serie de cortometrajes publicados en Twitter y generados mediante una combinación de herramientas de IA como Stable Diffusion, Midjourney, DALL-E 2, Synthesia, Murf y GPT-3.

Comparte archivos de vídeo de producción virtual fácilmente

Comparte de archivos de vídeo masivos de 8K o 12K de forma segura, fiable y rápida con MASV.

Problemas potenciales con la IA y el cine

"Ya no podemos confiar plenamente en lo que vemos", afirma el profesor de la Universidad Concordia de Wisconsin, Robert Wahl, en el artículo del LA Times citado anteriormente.

Y aunque el cine siempre ha intentado convencer al público de que suspenda su incredulidad, la era deepfake lleva las cosas a un nivel completamente nuevo.

Incluso la película Anthony Bourdain: un chef por el mundo de Neville se llevó una buena dosis de críticas por no alertar inmediatamente al público y a los críticos sobre sus contenidos generados por IA, incluidas las de la ex mujer del difunto famoso.

Algunos observadores afirman que es muy posible que la tecnología de alteración de vídeo y diálogo, como Flawless, allane el camino para actualizar o cambiar por completo películas varios años después de los hechos, lo que, según los críticos, podría comprometer el consentimiento de los actores originales.

De hecho, ¿qué sentido tiene la participación humana si la IA puede escribir guiones, planificar lugares de rodaje, elegir actores y crear automáticamente efectos digitales alucinantes, incluso producir películas y vídeos enteros?

Según Block, la calidad es una razón importante.

"Creo que es como cualquier otra cosa, el hecho de que una máquina de escribir sustituyera a la pluma no significó que la escritura mejorara". dice, y añade que, en última instancia, son las personas las que aportan la creatividad humana y el toque personal que hay detrás de una película, una obra escrita o incluso un objeto de diseño.

"Vamos hacia un mundo en el que todo puede crearse o recrearse digitalmente", explica. "Incluidos nosotros mismos, como clones. Pronto podremos imprimir en 3D bolsos de diseño o ropa cara. Y si puedes crearlo en casa con tu impresora 3D, ¿qué valor tiene una marca?".

Según él, serán los críticos, el público e incluso las plataformas tecnológicas quienes tendrán que pedir cuentas a los cineastas y los estudios por el uso excesivo o poco ético de la IA en la producción de vídeo.

¿Reemplazará la IA al cine tradicional?

El Festival de Cine de Raindance dice que las personas pueden mantenerse relevantes en una industria cada vez más automatizada de la siguiente manera:

  • Centrándonos en la perspectiva única y la profundidad emocional de la narración humana.
  • Centrándonos en tareas que la IA aún tiene dificultades para realizar, como las que requieren empatía, habilidades sociales y destreza física.
  • Adaptándonos y aprovechando el poder de las nuevas tecnologías para mejorar nuestro propio trabajo.

Pero Block dice que no le preocupa que los humanos sean sustituidos por la IA, al menos por ahora.

"Por sí sola, la IA no puede crear una idea brillante y comercializable", afirma. "Incluso en un mundo en el que la IA puede introducir la idea en una caja y sale una película, sigue haciendo falta un ser humano que la haga y la mire y diga: 'esto es una mierda' o 'esto es estupendo'.

"Y es ese proceso de incorporar lo humano lo que hace que el trabajo sea valioso".

Comparte archivos grandes con MASV

Consigue 20 GB para usar con el servicio de transferencia de archivos más rápido y seguro que existe hoy en día, MASV.