• NVIDIA Isaac 5.0: обучение роботов с продвинутой физикой сенсоров и генерацией синтетических данных с открытым кодом

    NVIDIA Isaac robotics platform showing a humanoid robot interacting with objects

    NVIDIA представила обновления своей экосистемы Isaac для разработки роботов на выставке COMPUTEX 2025, которые улучшают возможности генерации синтетических данных и совершенствуют тестирование моделей на всех этапах разработки.

    Isaac Sim 5.0: открытая эра в симуляции роботов

    Новая версия Isaac Sim 5.0 от NVIDIA на базе NVIDIA Omniverse и OpenUSD будет полностью открытой и настраиваемой, что открывает доступ к генерация синтетических данных и тестированию для всех разработчиков.

     

    Особенности предстоящего релиза Isaac Sim 5.0:

    • Отрытый исходный код: Isaac Sim 5.0 будет доступен на GitHub, что сделает симуляцию сред для обучения роботов доступной для как для индивидуальных, так и для корпоративных разработчиков.
    • Интеграция с NVIDIA Brev. Этот сервис помогает ИИ-разработчикам найти среди предложений облачных провайдеров наиболее подходящий по соотношению цены и качества, создавая высококонкурентный рынок. Развертывание на облачных GPU Nvidia ускорит циклы итераций благодаря развертыванию в один клик.
    • Продвинутая физика сенсоров. Улучшенная симуляция датчиков глубины с реалистичным моделированием шума для стереокамер, создающая изображения глубины с шумовыми характеристиками, аналогичными данным с реальных сенсоров.
    depth sensor output
    Демонстрация работы сенсора глубины
    • Улучшенные модели исполнительных механизмов: Новые модели трения в суставах, определенные через схемы OpenUSD, разработанные в сотрудничестве с Hexagon Robotics и maxon, обеспечивают более точную симуляцию поведения роботов в реальном мире

    Генерация реалистичных синтетических данных

    Генерация синтетических данных имеет решающее значение для обучения адаптивных роботов, способных безопасно работать в реальных условиях. Нештатные ситуации, вроде пожаров на складе, удобнее отрабатывать в симуляторах. Isaac Sim 5.0 представляет несколько расширений для продвинутой генерации синтетических данных:

    • MobilityGen: открытое расширение для генерации физически достовернных данных для обучения роботов передвижению в сложных средах.
    • Симуляция персонажей и объектов: новые расширения, включая Isaacsim.Replicator.Agent для симуляции человеческих и роботизированных персонажей, и Isaacsim.Replicator.Object для генерации синтетических наборов данных для обнаружения объектов.
    • Расширение для инцидентов создает данные на основе инцидентов, таких как пожары, разливы или падающие объекты, для обучения реагированию в чрезвычайных ситуациях. В реальности такие ситуации моделировать затратно.
    • Расширение для подписей создает пары изображение-подпись для обучения моделей понимать сцены и считывать тестовую информацию.

    Isaac Lab 2.2: улучшенная среда для обучения роботов

    Isaac Lab 2.2 фокусируется на улучшении оценки и обучения политик управления роботами, в первую очередь для гуманоидных роботов. Ключевые обновления:

    Тестирование GR00T N1

    NVIDIA разработала набор программ, которые автоматически тестируют, насколько хорошо их модели ИИ (GR00T N1) справляются с реальными задачами. Эти тесты проходят в виртуальных средах, имитирующих настоящие производственные условия, где роботу нужно выполнять конкретные промышленные операции — например, отделять гайки от трубок и раскладывать их по разным контейнерам. Разработчики могут использовать эти готовые сценарии, чтобы быстро проверить, как их роботы будут действовать в реальном мире, не тратя время на создание тестовых сред с нуля.

    Тензоризованные присоски

    Продвинутая симуляция поверхностных захватов, поддерживающая деформируемые присоски с возможностью измерения сил захвата и обновления параметров в тензоризованном формате.

    Гуманоидный робот Fourier GR1, выполняющий сложную задачу бимануальной манипуляции с использованием GROOT N1
    Гуманоидный робот Fourier GR1, выполняющий сложную задачу бимануальной манипуляции с использованием GROOT N1

    Стандартизированные интерфейсы для оптимизации рабочих процессов

    Для упрощения интеграции между различными платформами NVIDIA представила ключевые улучшения связи:

    • Стандартизированные интерфейсы ROS 2: Разработанные в сотрудничестве с Robotec.ai, Gazebo, Open 3D Engine и NVIDIA, эти интерфейсы обеспечивают единый метод управления различными симуляторами через ROS 2.
    • Мост ZMQ: Расширение, добавленное в Isaac Sim 4.5, обеспечивающее быструю двунаправленную связь с внешними приложениями за пределами ROS, поддерживающее тестирование программного обеспечения с потенциалом для аппаратного тестирования на периферийных устройствах.

    Отраслевое внедрение

    Технологии робототехники NVIDIA адаптируются ведущими игроками в отрасли. Agility Robotics, Boston Dynamics, Fourier, Mentee Robotics, Neura Robotics и XPENG Robotics используют NVIDIA Isaac Sim и Isaac Lab для симуляции и валидации своих гуманоидных роботов. Skild AI использует среды симуляции для разработки общего интеллекта роботов, в то время как General Robotics интегрирует их в свою платформу симуляции роботов.

    Ведущие тайваньские производители электроники и робототехники, включая Adata, Advantech, Delta Electronics, Foxconn, Foxlink, Solomon, Techman и Wistron, используют NVIDIA Isaac Sim и Lab для разработки роботов следующего поколения на базе ИИ.

    Единая архитектура для полной разработки роботов

    Isaac Sim и Isaac Lab будут полностью совместимы с рабочими станциями и серверами NVIDIA RTX PRO 6000, предлагая единую архитектуру для всех стадий разработки роботов: обучение, генерацию синтетических данных, обучение роботов и симуляцию. Это дает возможность беспрепятственно переходить от симуляции к физическому развертыванию.

    NVIDIA Isaac Sim 5.0 и Isaac Lab 2.2 будут доступны до конца второго квартала 2025 года.

    Перспективы на будущее

    Эти достижения в совокупности представляют собой значительный шаг к сокращению разрыва между симуляцией и реальностью в разработке роботов. Достоверность симулируемых сред, расширяя возможности генерации синтетических данных и совершенствуя оценку фундаментальных моделей, NVIDIA позволяет разработчикам создавать более способных роботов, которые могут безопасно и эффективно работать в сложных реальных условиях.

    Интеграция мировых фундаментальных моделей с платформами симуляции роботов дополнительно демонстрирует приверженность NVIDIA созданию комплексной экосистемы для робототехники на базе ИИ, от генерации данных и обучения моделей до развертывания на физическом оборудовании.


    neurohive telegram
    Подписаться
    Уведомить о
    guest

    0 Comments
    Старые
    Новые Популярные