Гуманоидные роботы становятся все более практичными. На конференции разработчиков GTC компания Nvidia выступила с проектом GR00T (произносится как «Наземный робот»).
Обучая свое гуманоидное воплощение с помощью симуляторов с GPU-ускорением от NVIDIA, он использует имитационное обучение на основе всего нескольких демонстраций, чтобы приобрести навыки через подражание. Isaac Lab обеспечивает обучение с подкреплением, а OSMO выступает в качестве службы оркестровки вычислений для генерации движений робота на основе видеоданных.
Что такое проект GR00T?
Генеральный директор Nvidia Дженсен Хуанг представил технологию Generalist Robot 00 (GR00T), свою последнюю разработку в области робототехники и «воплощенного ИИ», во время своего выступления на конференции GPU Technology Conference (GTC) 2024. Nvidia утверждает, что GR00T позволяет роботам понимать естественный язык и имитировать движения, наблюдая за тем, как другие люди выполняют определенные действия — это должно позволить им обрести координацию, ловкость и другие необходимые навыки, необходимые для адаптации и взаимодействия с реальными ситуациями, по мнению Nvidia.
Во время презентации компания Nvidia продемонстрировала несколько роботов-гуманоидов, работающих на чипе GR00T, от таких компаний, как Agility Robotics, Apptronik, Fourier Intelligence и Unitree Robotics, выполняющих различные задачи и призванных продемонстрировать как возможности чипа в качестве обучающего устройства, так и более безопасное взаимодействие человека и робота.
Вычислительная платформа Jetson Thor от Nvidia обеспечила мощность для этих демонстраций, разработанная специально для решения сложных задач, требуемых от гуманоидных роботов. Основанная на архитектуре Blackwell от Nvidia, эта система-на-чипе может обеспечить до 800 терафлопс производительности ИИ для гуманоидных роботов, предоставляя им достаточно вычислительной мощности для запуска мультимодальных генеративных моделей и других систем ИИ.
Компания Nvidia представила не только свой новейший компьютер, но и набор программного и аппаратного обеспечения для человекоподобных роботов: Isaac Manipulator и Isaac Perceptor, а также предварительно обученные модели, библиотеки и эталонное оборудование, которые позволят разработчикам создавать более мощных, быстрых и безопасных роботов.
Недавно компания Nvidia представила обновление своей робототехнической платформы Isaac, которое позволит гуманоидным роботам, построенным на базе GR00T, использовать генеративный ИИ для обучения и адаптации. Эта система включает в себя Isaac Lab для обучения с подкреплением, службу оркестровки вычислений OSMO и инструменты для создания базовых моделей гуманоидных роботов; кроме того, Isaac Arms улучшает производительность руки робота, а Isaac Perceptor работает с многокамерным 3D компьютерным зрением.
Откройте для себя лучшие курсы по искусственному интеллекту, нажмите здесь!
Какова цель GR00T?
Компания Nvidia надеется расширить возможности человекоподобных роботов с помощью проекта GR00T— базовой модели технологии Generalist Robot 00 (не связанной со злым говорящим космическим деревом из Marvel). Эта инновационная модель помогает роботам понимать естественный язык, имитировать движения, наблюдая за действиями, и быстро обучаться координации, ловкости и другим навыкам, необходимым для навигации, адаптации и взаимодействия в реальных ситуациях. Генеральный директор Дженсен Хуанг (Jensen Huang) продемонстрировал эти преимущества во время выступления на конференции разработчиков GTC и показал, как роботы GR00T выполняют задачи, которые обычно не под силу другим роботам. Во время своего выступления на GTC генеральный директор Дженсен Хуанг продемонстрировал, как эти роботы выполняют задачи, с которыми другие робототехнические технологии справились бы с трудом.
Робототехническая платформа Nvidia Isaac предоставляет разработчикам всеобъемлющий набор инструментов для проектирования, моделирования и внедрения роботов, работающих на основе искусственного интеллекта. Сюда входят GPU-ускоренное обучение с подкреплением в Isaac Lab; служба оркестровки вычислений OSMO управляет рабочими процессами разработки реальных и синтетических роботов; а также предварительно обученные модели под названием Isaac Manipulator и Isaac Perceptor, которые обеспечивают более высокую производительность манипулятора робота и улучшенное многокамерное компьютерное 3D-зрение соответственно.
Компания Nvidia предоставляет свои собственные вычислительные мощности, чтобы воплотить GR00T в жизнь, используя Jetson Thor в качестве компьютера для гуманоидов. Оснащенный графической архитектурой Blackwell и движком трансформации, способным обеспечить 800 терафлопс 8-битной производительности ИИ, Jetson Thor позволяет беспрепятственно выполнять рабочие процессы моделирования и генеративные модели ИИ, такие как GR00T, как заявила компания Nvidia на личном брифинге.
Nvidia позиционирует свою платформу как идеальную вычислительную среду для человекоподобных роботов, сотрудничая с Figure AI, 1X Technologies и Agility Robotics, чтобы предложить решения на ее основе. В дополнение к поддержке GR00T от Apollo от Apptronik Робот, использующий технологию Nvidia, Apollo будет обучаться новым задачам, быстро наблюдая за демонстрациями человека, а не с помощью сложного программирования — все это часть стратегии Nvidia «воплощенный ИИ», направленной на создание мощных компьютеров с искусственным интеллектом, которые могут воспринимать, понимать и взаимодействовать с реальностью в реальных условиях.
Откройте для себя лучшие курсы по искусственному интеллекту, нажмите здесь!
В чем заключается технология GR00T?
Проект GR00T, или Generalist Robot 00 Technology, как его еще называют, позволит роботам учиться у людей, имитируя их движения, наблюдая за тем, как двигаются люди. Таким образом, роботы быстро приобретут координацию, ловкость, адаптивность и другие важные навыки, необходимые для навигации в реальных ситуациях — без многолетних строгих тренировок или риска восстания собратьев.
Генеральный директор Nvidia Дженсен Хуанг (Jensen Huang) рассказал о том, как GR00T может помочь гуманоидным роботам стать умнее и функциональнее во время своего выступления на GTC 2024, показав пример того, как робот, работающий на этой технологии, научился двигать головой и руками, наблюдая за тем, как человек выполняет эти движения, а затем воспроизводит их в автономном режиме. По мнению Nvidia, такое обучение позволит создать более функциональные и в то же время экономичные робототехнические системы.
Недавно компания Nvidia представила Jetson Thor, систему-на-чипе, оптимизированную для удовлетворения требований к производительности, мощности и размерам при разработке гуманоидных роботов на базе GR00T. Этот компьютер оснащен графическим процессором NVIDIA с архитектурой Blackwell, а также движком AI transformer, обеспечивающим производительность 800 терафлопс для облегчения процессов проектирования роботов для разработчиков роботов.
NVIDIA Isaac — робототехническая платформа, созданная для обеспечения сквозной экосистемы разработки и симуляции для воплощения роботов, включает NVIDIA Isaac Lab для обучения с подкреплением, а также сервис оркестровки вычислений OSMO, который предлагает услуги симуляции обучения и проверки аппаратного обеспечения в цикле. Кроме того, платформа Isaac была дополнена новыми модулями, такими как Isaac Manipulator, который обеспечивает быструю работу роботизированной руки, а также Isaac Perceptor, который предлагает возможности многокамерного 3D-видения.
Nvidia утверждает, что ее платформы GR00T и Isaac откроют эру воплощенного ИИ, когда умные, адаптивные роботы станут повсеместными. Nvidia надеется, что разработчики будут использовать ее программное обеспечение, инструменты и аппаратное обеспечение для создания различных видов роботов, подходящих для различных целей — используя алгоритмы с открытым исходным кодом, а также API, которые упрощают разработку программного обеспечения для конкретных роботов или задач.
Откройте для себя лучшие курсы по искусственному интеллекту, нажмите здесь!
Каково влияние GR00T?
Проект GR00T компании Nvidia выделяется в области робототехники и воплощенного ИИ (ИИ которая может физически интегрироваться в физическое окружение), как мультимодальная генеративная базовая модель будет служить мозгом для роботов, способных понимать человеческий язык и имитировать движения, наблюдая за людьми — быстро обучаясь координации, ловкости и другим навыкам, необходимым для адаптации и взаимодействия с реальным окружением. На своем ключевом выступлении на GTC генеральный директор Дженсен Хуанг продемонстрировал роботов-гуманоидов на базе GR00T, которые успешно выполняют различные задачи во время своего ключевого выступления Роботы-гуманоиды на базе GR00T успешно выполняют различные задачи во время своего ключевого выступления на GTC.
Компания Nvidia разработала Jetson Thor, систему-на-чипе, предназначенную специально для создания гуманоидных роботов на базе GR00T, в качестве компьютера для использования во время разработки таких гуманоидных роботов. Модульная архитектура, разработанная для управления сложностью и обеспечения безопасного и интуитивного взаимодействия человека и робота, оптимизирована по производительности, мощности и размеру и может похвастаться 800 терафлопсами 8-битной производительности ИИ — достаточной мощностью для запуска мультимодальных генеративных моделей, таких как GR00T.
Nvidia также объявила об обновлениях своей платформы Isaac, которые упростят разработку и внедрение роботов с искусственным интеллектом, включая новые модули, такие как Manipulator и Perceptor, которые обеспечивают современную ловкость и модульный ИИ для роботизированных рук и мобильных роботов, а также Isaac Lab, который обеспечивает быстрое параллельное моделирование в виртуальных средах с GPU-ускорением.
Компании Figure AI, Agility Robotics, Boston Dynamics, Apptronik и Sanctuary AI уже объединили свои усилия с Nvidia, чтобы интегрировать ее технологию в свои продукты. Nvidia представит на выставке два таких партнерства; эти достижения должны ускорить внедрение ИИ в реальные рабочие условия и предоставить доступ к нему большему числу людей.
Готовы ли Вы получить свой флот роботов-гуманоидов? Свяжитесь с нами сегодня!
