Nvidia расширила свою платформу Isaac для робототехники, добавив новые обучающие данные, инструменты симуляции, программное обеспечение для выполнения и технологии безопасности. Цель обновления — ускорить процесс перехода от обучения роботов к их практическому внедрению в реальном мире. Презентация расширенной платформы состоялась на конференции GTC Berlin, где компания продемонстрировала ее совместно с человекоподобным роботом Agile ONE SN от Agile Robots, предварительно настроенным на базе Nvidia Isaac GR00T и работающим на Jetson Thor.
Обновление включает в себя несколько ключевых компонентов. Среди них — SimReady Central Library, содержащая более 2000 готовых к симуляции активов для робототехники и заводов. Также был выпущен Human 1M Dataset, представляющий собой синхронизированное трехвидовое видео и отслеживание 3D-рук в различных человеческих действиях. Isaac Lab 3.0 стал общедоступным фреймворком с открытым исходным кодом для обучения и доработки политик роботов, поддерживающим многопроцессорные рабочие процессы и физические движки, такие как Newton и Nvidia PhysX.
Кроме того, Nvidia представила Isaac OS — открытую среду выполнения, которая связывает модели ИИ с датчиками, системами управления и аппаратным обеспечением роботов, обеспечивая детерминированную работу в реальном времени. Также были выпущены новые рабочие процессы для DGX Station, охватывающие доработку моделей GR00T 1.7 с помощью обучения с подкреплением, тренировку манипуляций и моделирование мира Cosmos для генерации синтетических данных. В сфере безопасности компания представила Halos — платформу полного цикла, разработанную на базе IGX Thor, которая помогает автономным транспортным средствам и роботам переходить от разработки к практическому использованию.
Nvidia отмечает, что расширенный стек уже используется такими компаниями, как ABB Robotics, KUKA, Sereact, Humanoid, Toyota Material Handling Europe, Franka Robotics и Neura Robotics. Эти компании применяют компоненты платформы для симуляции, обучения, восприятия, обеспечения безопасности и развертывания. По словам основателя и генерального директора Nvidia Дженсена Хуана, «общецелевая робототехника развивается с невероятной скоростью — момент ChatGPT для робототехники приближается. С помощью Nvidia Isaac, нашей платформы открытой робототехники полного цикла, мы предоставляем разработчикам модели, данные, инструменты симуляции и вычислительные системы для вывода физического ИИ в крупнейшие отрасли мира».
