Los robots tienen su ‘momento ChatGPT’

¿Qué son los ‘Modelos de Fundación Mundial’?

Si no está familiarizado con la frase «Modelos de la Fundación Mundial», tiene sentido, porque es bastante nueva y probablemente fue acuñada por Nvidia. Combina los conceptos existentes (pero también recientes) de “modelos mundiales” (sistemas de IA que crean representaciones internas de su entorno para simular y predecir escenarios complejos) y “modelos básicos” (sistemas de IA entrenados en vastos conjuntos de datos que pueden adaptarse para un amplia gama de tareas).

Según Nvidia, los WFM son una manera fácil de generar cantidades masivas de datos artificiales fotorrealistas basados ​​en la física para entrenar modelos existentes o construir modelos personalizados. Los desarrolladores de robots pueden agregar sus propios datos, como videos capturados en su propia fábrica, y luego dejar que Cosmos multiplique y expanda el escenario básico con miles más, brindando a la programación del robot la capacidad de elegir los movimientos correctos o mejores para la tarea en cuestión.

La plataforma Cosmos incluye WFM generativos, tokenizadores avanzados, barreras de seguridad y un proceso de procesamiento de video acelerado. Los desarrolladores pueden utilizar Omniverse de Nvidia para crear escenarios geoespacialmente precisos que tengan en cuenta las leyes de la física. Luego, pueden generar estos escenarios en Cosmos, creando videos fotorrealistas que proporcionen datos para la retroalimentación del aprendizaje por refuerzo robótico.