El futuro de Hollywood no consiste en alimentar prompts en modelos de IA genérica

es un reportero que se enfoca en cine, televisión y cultura pop. Antes de The Verge, escribió sobre cómics, trabajo, raza y más en io9 y Gizmodo durante casi cinco años.
Aunque parece poco probable que la IA genérica pueda crear alguna vez una película convincente desde cero, Tribeca presentó varias películas que demostraron cómo los artistas humanos pueden aprovechar la tecnología de maneras intrigantes.
Aunque ninguna de las películas impulsadas por IA que se proyectaron en Tribeca fue tan terrible como el material de video que empresas como OpenAI y xAI han inundado en internet, algunos de los proyectos fueron ejemplos primordiales de por qué el contenido generativo tiende a sentirse tan inerte en comparación con el arte creado por humanos. Roar — un cortometraje animado producido por Illuminai Studios — se sintió más como un montaje desorientador de clips generados por IA que como una pieza cohesiva de cine. Y ChikaBOOM! de Asteria Film Co. carecía de la pulidez visual y sonora que es necesaria para que una fantasía de ritmo rápido sobre un mago en entrenamiento realmente te atrape.
La tozudez general de Roar y ChikaBOOM! parecía ser un reflejo de las limitaciones tecnológicas inherentes en sus respectivos flujos de trabajo de producción orientados hacia la IA. Pero otras películas, como Dear Upstairs Neighbors de Google DeepMind y Mauvais Soleil de OpenAI, mostraron cómo es posible que los cineastas eviten esos desafíos cuando la IA generativa se despliega con un poco más de ingenio.
Escrita y dirigida por la veterana de Pixar Connie Qin He en colaboración con investigadores de Google DeepMind, Dear Upstairs Neighbors cuenta la historia de una joven agotada que está tratando de irse a dormir. Lo único que quiere Ada (Márcia Mayer, quien también produjo el cortometraje) es obtener un par de horas de descanso pacífico antes de que tenga que despertarse y volver al trabajo. Pero cada vez que comienza a quedarse dormida, la cacofonía de ruido proveniente del departamento de sus vecinos de arriba la despierta bruscamente y la deja preguntándose qué podrían estar haciendo en medio de la noche.
Para darle a la mundo de Dear Upstairs Neighbors un estilo distintivo, He enlistó al diseñador de producción de Pixar Yingzong Xin, quien pintó arte conceptual en Photoshop y en papel utilizando acrílicos. La estética expresionista de esas ilustraciones fue clave para dar vida a la historia fantástica de Dear Upstairs Neighbors, pero también presentó un desafío único a los investigadores de DeepMind. Con la mayoría de los modelos de generación de video por IA, el estilo pictórico de las ilustraciones sería difícil de convertir en metraje visualmente consistente. Pero los ingenieros de DeepMind desarrollaron versiones personalizadas de Veo e Imagen que fueron diseñadas específicamente para dar a los artistas de Dear Upstairs Neighbors la capacidad de ajustar sus salidas.
Puedes ver cómo los cineastas tienen que sortear algunas de las limitaciones más típicas de la IA generativa.
Debido a que los modelos personalizados fueron entrenados con el arte conceptual de Xin, podían generar de manera consistente tomas que se ajustaban a la visión de He para el proyecto. Los modelos de texto a video fueron excelentes para reproducir ciertos detalles estilísticos, como la forma en que se visualiza el sonido cuando los objetos interactúan entre sí.
