NVIDIA amplía el kit de herramientas del agente con la biblioteca Omniverse 3D
Nvidia Anunció la expansión de su Agent Toolkit mediante la integración de la biblioteca Omniverse. La colección de componentes de software proporciona a los agentes de IA herramientas y habilidades especializadas para integrar la funcionalidad física de la IA directamente en aplicaciones de software 3D y flujos de trabajo creativos existentes.
Estas bibliotecas automatizan la inspección de escenas, la señalización de problemas y la preparación de activos y están diseñadas para simplificar el complejo proceso de convertir contenido de diseño 3D estándar en entornos listos para simulación para robótica, fabricación industrial y sistemas autónomos.
El fundador y director ejecutivo de Nvidia, Jensen Huang, dijo en la conferencia de prensa: “La era de la IA física se construirá primero en la simulación. El Nvidia Agent Toolkit con biblioteca Omniverse incorpora agentes de IA a las herramientas 3D que los desarrolladores ya utilizan, ayudando a construir mundos listos para la simulación para entrenar y probar robots, fábricas y sistemas autónomos antes de que lleguen al mundo real”.
Simulación de sensores, física y estándares OpenUSD
Ahora disponible públicamente GitHubla nueva biblioteca Omniverse presenta tres conjuntos de habilidades principales diseñados para mejorar el modelado espacial y físico en entornos 3D. La biblioteca ovrtx proporciona simulación de sensores, lo que permite que las aplicaciones generen resultados realistas de cámara, lidar y radar a partir de escenas 3D, lo que permite a los desarrolladores y agentes de IA probar cómo los sistemas físicos de IA perciben los entornos virtuales. Para el comportamiento físico, la biblioteca ovphysx aprovecha la física acelerada por GPU para replicar propiedades del mundo real como colisión, masa, fricción y movimiento en escenas 3D.
Además, las habilidades de CAD a SimReady permiten a los artistas y diseñadores técnicos convertir datos de diseño asistido por computadora (CAD) en activos OpenUSD (descripción de escenario universal) estandarizados que contienen las propiedades de entidad básicas necesarias para las pruebas virtuales.
Para demostrar la integración práctica de estas bibliotecas, Nvidia ha presentado un modelo para implementar la funcionalidad Omniverse en Blender, demostrado a través de un flujo de trabajo de muestra llamado “SimReady” Blender. Esta integración demuestra cómo los fabricantes de software pueden incorporar la simulación de sensores y la verificación física en herramientas 3D de código abierto, al tiempo que garantizan que los creadores mantengan un control creativo total sobre el resultado final.
Integración de software en plataformas 3D y CAD
Varios desarrolladores y nuevas empresas de software de diseño importantes han comenzado a integrar la biblioteca Omniverse en sus entornos de producción y han puesto los planos a disposición en GitHub.
Kim Davidson, presidente y director ejecutivo de SideFX, dijo: “La creación programática en 3D es fundamental para construir los mundos complejos y controlables necesarios para la simulación, la robótica y la IA industrial. A través de la biblioteca Nvidia Omniverse y OpenUSD, SideFX está explorando cómo las herramientas listas para agentes pueden respaldar los flujos de trabajo de Houdini para ayudar a los artistas técnicos a revisar, probar y preparar contenido programático para la simulación mientras mantienen el control del proceso creativo.
Asimismo, la plataforma de gestión de datos de productos y CAD Onshape de PTC utiliza OpenUSD y ovrtx para conectar procesos de diseño nativos de la nube con simulación física. “Los equipos de ingeniería buscan formas más conectadas de diseñar, colaborar y simular durante todo el proceso de desarrollo”, afirmó Neil Barua, presidente y director ejecutivo de PTC. “La asociación de PTC con Nvidia respalda esta visión más amplia, y la biblioteca Nvidia Omniverse ayuda a habilitar flujos de trabajo listos para simulación que acercan la verificación y las pruebas al lugar donde se diseña el producto”.
Empresas emergentes como Palatial, Lightwheel, ForgeCAD y Moonlake AI también están utilizando estas habilidades para generar automáticamente activos y validaciones de escenas a partir de archivos CAD e indicaciones de texto.
Los flujos de trabajo de los agentes admiten la ejecución en dispositivos en todas las configuraciones de hardware, desde sistemas compactos Nvidia RTX Spark hasta estaciones de trabajo Nvidia DGX Station. La infraestructura local satisface las necesidades reales. Ejecute IA nativa en canales 3D profesionaleslo que permite a los estudios creativos y equipos de ingeniería automatizar la preparación de activos sin enviar archivos de proyecto confidenciales a servidores externos.
Los modelos de hardware RTX Spark se lanzarán este otoño por parte de fabricantes como Asus, Dell Technologies, HP, Lenovo, Microsoft Surface y MSI, seguidos de Acer y Gigabyte.
Conviértase en miembro de Design Week por £4 al mes o £40 al año
¿Ya eres miembro? Acceso.