Компания Nvidia анонсировала набор новых моделей искусственного интеллекта, библиотек и инструментов, предназначенных для обработки информации из внешнего мира, что особенно пригодится разработчикам робототехники.
Главной новинкой стала модель машинного зрения Cosmos Reason с 7 млрд параметров. Она ориентирована на роботов и другие устройства с ИИ, позволяя им рассуждать с опорой на память и физические законы, а также планировать действия. Такая функциональность открывает возможности для более автономного и осмысленного поведения машин в сложных средах.
Модель Cosmos Transfer-2 создана для генерации синтетических сцен в 3D-симуляциях. Кроме того, Nvidia продемонстрировала улучшенную версию первой Cosmos Transfer, оптимизированную для ускоренной работы. Эти решения помогают формировать массивы синтетических обучающих данных, включая текст, изображения и видео, которые можно использовать для обучения роботов и других ИИ-систем.
Также представлены новые библиотеки для нейронной реконструкции, в том числе с применением метода прорисовки — трёхмерного моделирования реального мира на основе сенсорных данных. Эта функция интегрируется в открытый симулятор CARLA, активно используемый разработчиками для тестирования робототехнических систем.
Nvidia выпустила обновлённый комплект для разработчиков (SDK) Omniverse, а также локальные и облачные серверные решения для рабочих нагрузок, связанных с робототехникой. Новые инструменты облегчают создание обучающих данных, моделирование сложных сценариев и ускоряют разработку автономных систем с ИИ, делая их более точными, адаптивными и эффективными.
В совокупности эти решения демонстрируют стремление Nvidia расширять возможности машинного интеллекта, помогая роботам и другим ИИ-устройствам лучше ориентироваться в окружающем мире, взаимодействовать с ним и выполнять сложные задачи.
Источник
Уникальность