La poderosa herramienta de animación facial de IA de Nvidia ya está disponible para todos
El uso de personajes numéricos no es solo en el desarrollo del juego, sino también en dibujos animados Utilizado para marketing y servicio al cliente. NvidiaAudio2face es uno de los avances en AI, que ha estado acelerando el proceso de crear animaciones de cara real sincronizada con audio, y el gigante de la GPU ahora lo está poniendo a disposición de todos.
NVIDIA está abierto a la adquisición de modelos Audio2Face y Kits de desarrollo de software (SDK), por lo que todos los desarrolladores de juegos y aplicaciones 3D pueden usarlo para construir e implementar caracteres de alta fidelidad con animaciones de vanguardia. Estos incluyen algunos complementos El mejor software de modelado 3D y Mejor software de animación.
Nvidia Audio2face acelera personajes digitales realistas al proporcionar animación facial en tiempo real con IA y sincronización de labios. La herramienta utiliza IA para crear datos de animación para generar animación facial realista a partir de la entrada de audio mediante el análisis de características acústicas como fonemas y entonación.
Los datos se asignan a la pose facial del personaje. Se puede usar fuera de línea para el contenido pregrabado o los personajes dinámicos con alimentación de IA en tiempo real, proporcionando una sincronización de labios precisa y expresión emocional.
El modelo se ha utilizado ampliamente en juegos, entretenimiento y servicio al cliente. Los desarrolladores de juegos que lo usan incluyen Codemasters, GSC Game World, NetEase, Games World Perfect, mientras que los ISV incluyen Convai, Inworld AI, Realusion, Shatlabs, Farm 51 y UNEEQ.
El desarrollador de software Realusión lo ha integrado en uno de sus herramientas, lo que le permite integrarse con iClone, Role Creator y ICLone AI Assistant.
Ahora de código abierto, el SDK Audio2face incluye bibliotecas y documentos para autorizar y ejecutar animaciones faciales en el dispositivo o en la nube. También hay complementos para Autodesk Maya y Motor irreal 5. Permite al usuario enviar entrada de audio y recibir animaciones faciales de personajes.
NVIDIA también está abriendo la adquisición del marco de capacitación Audio2Face para que cualquiera pueda ajustar y personalizar los modelos existentes para sus casos de uso específicos.
Poder Girubtambién encontrará instrucciones para construirlo. Puedes aprender más Sitio web del desarrollador de NVIDIA. Es posible que necesite uno con una de las computadoras Mejor tarjeta gráfica Para ejecutarlo (ver transacciones a continuación).
