De ‘Vengadores: Infinity War’ a ‘Los primeros pasos de los Cuatro Fantásticos’, cómo ha evolucionado la captura de actuaciones faciales
Fundada a principios de la década de 1990, Digital Domain sigue siendo un actor importante en el campo de los efectos visuales, contribuyendo a películas populares como las icónicas Avengers: Infinity War y Avengers: Endgame.
Un aspecto único de su trabajo durante los últimos quince años ha sido la captura de actuaciones faciales y su implementación en pantalla. Dibujos animados y efectos visuales (para obtener más inspiración, consulte el de este año) Ganador del premio VES y lo que elegimos Mejor película animada por computadora). Como parte de nuestra nueva serie Film in Focus, hablamos con el supervisor de efectos visuales del estudio, Phil Cramer, y aprendimos sobre el desarrollo de la tecnología.
El desarrollo de Masquerade, el software propietario de Digital Domain, es parte de la búsqueda de esta ventaja. El nuevo sistema utiliza imágenes del rostro de un actor tomadas por una cámara montada en el casco y convierte automáticamente estas imágenes en escaneos de movimiento de alta resolución cuadro por cuadro del rostro del actor.
Se utilizó una primera versión de “The Masquerade” para traducir toda la actuación de Josh Brolin en los movimientos faciales de Thanos en “Avengers: Infinity War” y “Avengers: Endgame”.
“Con los personajes digitales, no se trata sólo de animación”, señala Phil. “Cada pequeño aspecto contribuye a la credibilidad. Si piensas en Thanos o She-Hulk, la tecnología continúa evolucionando y evolucionando. Digital Domain ha estado a la vanguardia de la tecnología facial.
“Sabes, cada una de estas versiones de Masquerade se basa en las demás, utilizando tecnología que desarrollamos juntos, y luego la mejoramos. Lo que estamos haciendo ahora se basa en quince años de desarrollo facial”.
Masquerade 2.0, demostrado por Digital Domain en She-Hulk: The Law Firm, permite a los artistas editar y alterar continuamente los resultados de la captura facial, mientras que el aprendizaje automático suaviza las asperezas en días y semanas en lugar de meses.
“Para mí, mi mayor preocupación es asegurarme de que el rostro del actor se refleje en la acción y que los matices de la actuación y el movimiento real se reflejen”, explica Phil.
“Esto nos dio una base para trabajar. Anteriormente, en nuestro proceso facial, aplicábamos marcadores de seguimiento a la cara del actor y rastreamos manualmente cada marcador individual para registrar los datos. Luego interpretábamos esto nuevamente en el RIF de animación. Sin embargo, este era un proceso muy complejo, que tomaba hasta una semana por toma.
imagen 1 de 3
Esto se encuentra en una etapa muy temprana. Nuestro objetivo era utilizar estas imágenes de alta resolución de los rostros de los actores para extraer más datos y luego comenzamos a pensar: “Estos 60 puntos que tenemos no son suficientes para representar el rostro”. ¿Qué más podemos conseguir? ” Así que volvimos a la mesa de dibujo.
Queríamos comprender mejor el movimiento de la piel, así que introdujimos esta capa adicional y la llamamos delta: llevaría detalles adicionales de alta frecuencia del actor; solo los detalles muy, muy finos que usaron los animadores. No pueden controlarlo por completo, pero pueden encenderlo y apagarlo en diferentes áreas y controlar su intensidad. Creo que estos avances han hecho que Thanos sea increíblemente exitoso.
Fue algo así como el lanzamiento del Masquerade original. Gracias a Thanos, tenemos una mayor presencia en la industria y todos están interesados en lo que hacemos.
imagen 1 de 3
Para Los Cuatro Fantásticos: El primer paso, Digital Domain desarrolló un nuevo y revolucionario proceso que utiliza la última tecnología patentada de captura facial sin marcadores del estudio. Mascarada 3que ofrece 300 tomas complejas protagonizadas por The Thing. En particular, el proceso de Masquerade3 en la película fue compartido entre otros cuatro proveedores, un logro inusual en la industria de los efectos visuales.
Digital Domain proporcionó todas las escenas de montaje posteriores a la visualización que se basaban en material de Xsens y Masquerade3, que se cortaron en rangos de código de tiempo específicos proporcionados por el cliente. El proveedor de Previs, The Third Floor, recibió un volcado sin procesar de datos de Masquerade3 sobre el equipo de los personajes.
Este enfoque unificado proporciona a otros proveedores un punto de partida para la animación facial, garantizando la coherencia en el rendimiento de los personajes y la calidad de una toma a otra, independientemente del estudio que la ejecute.
“En nuestra forma actual de Masquerade3”, continúa explicando Phil, “lo interesante es que ya no se necesitan marcadores, por lo que es mucho más rápido para los actores. También es mucho más fácil para nosotros porque la calibración se simplifica”.
Cuando se trata de desarrollo de software propietario, Phil señaló: “Invertimos mucho en algunas áreas principales. Somos conocidos por nuestras caras, por lo que siempre queremos tener las últimas soluciones. El desarrollo propietario no suele estar vinculado a un proyecto específico. Es un desarrollo continuo, y luego encontramos proyectos que lo aplican o probamos nuevas versiones.
“Los próximos pasos de Masquerade se basarán en lo que creemos que es emocionante y ventajoso (no puedo entrar en detalles aquí). Lo más importante es que en Digital Domain nos centramos en tratar la tecnología con un enfoque artístico”.
