pesadilla rota como Anuncio de inteligencia artificial de Coca-Cola y retirado Anuncio de Navidad de McDonald’s Mostrar la utilidad de los vídeos generados por IA como activos creativos terminados sigue siendo cuestionable. al mismo tiempo, OpenAI cierra Sora Nuevamente surgen dudas sobre si existe demanda y si puede ser seguro y rentable dada la cantidad de recursos que utiliza.
adobe Creo que tiene una solución para al menos uno de los principales problemas técnicos que dificultan el uso de películas con IA. Lanzó una vista previa de un producto experimental llamado MotionStream, que permite a los usuarios adoptar un enfoque más práctico para controlar el metraje generado por IA.
Las indicaciones de texto hacen que las películas con IA sean fáciles de generar, pero difíciles de controlar porque es difícil describir el movimiento con palabras. Las películas con IA también tardan en generarse, lo que significa que hay que esperar hasta que se genere un clip corto sólo para descubrir que el movimiento parece extraño y poco natural, y luego hay que regenerarlo desde cero.
La solución de Adobe fue desarrollar una forma de interactuar con películas generadas por IA. MotionStream pasa del renderizado diferido a la interacción en tiempo real, lo que permite a los usuarios usar cursores y controles deslizantes para reposicionar objetos y cambiar los ángulos de la cámara mientras generan video.
El proceso aún comienza con indicaciones de texto, pero los usuarios pueden hacer clic y arrastrar el objeto para controlar su movimiento y ajustar la posición de la cámara. Los usuarios pueden hacer clic para marcar los objetos que desean que permanezcan estáticos.
Eli Shechtman, científico principal y uno de los investigadores de MotionStream, dijo que la herramienta podría cambiar las reglas del juego para los efectos de asistencia que son difíciles de controlar manualmente.
“Por ejemplo, si quieres mover un elefante, puedes hacer clic y mover su cuerpo, pero hacer que estos movimientos parezcan naturales manualmente requiere mucho trabajo. Actualmente, esto requiere habilidades y software especializado para manipular, animar o fotogramas clave. Dibujos animadosun proceso que suele tardar horas o incluso días, según el alcance.
“En cambio, el generador de vídeo subyacente detrás de MotionStream esencialmente simula el mundo en tiempo real. Así que las patas del elefante se mueven naturalmente y las orejas se mueven naturalmente mientras el elefante se mueve. El modelo te brinda conocimiento sobre el mundo y puedes interactuar con él”.
Cree que la misma tecnología también podría cambiar la forma en que la gente edita fotografías y otras imágenes fijas.
“Una vez que el video se vuelve interactivo, su lienzo puede ser una película que siempre se ejecuta. A medida que interactúa con él, verá un cambio suave de la película en la dirección de edición que especifique. Puede observar la transición e incluso detenerla en el medio si le gustan los resultados intermedios. Hay un gran potencial tanto para imágenes como para videos”.
El cambio de paradigma detrás de MotionStream también acelerará el trabajo cinematográfico con IA. Los primeros modelos generaban el vídeo completo antes de entregárselo al usuario, mientras cada fotograma miraba a otros fotogramas.
Esto mejora la calidad de la generación, pero “conocer el pasado y el futuro no es la forma en que funciona el universo”, dice el científico investigador principal y colaborador de MotionStream, Richard Zhang.
Adobe Research quería eliminar esta limitación, por lo que desarrolló un método que puede generar películas en partes, con fotogramas futuros que dependen sólo de lo que ya se ha creado, un proceso llamado “autoregresivo”. Mientras el usuario mira el primer video, la herramienta genera un segundo video, lo que permite mostrarle al usuario el video resultante de manera más inmediata.
Actualmente, MotionStream todavía se está desarrollando como proyecto de investigación. Aún no hay detalles sobre si, cuándo o cómo se agregará a herramientas como Adobe Firefly o el software de edición de video Premiere de Adobe.
