Nvidia объявила о запуске новых моделей искусственного интеллекта Cosmos, библиотек и инфраструктуры для разработчиков робототехники. Одним из ключевых нововведений стала модель Cosmos Reason — визуально-языковая модель с 7 миллиардами параметров, разработанная для решения задач в сфере физического ИИ и робототехники.
Об этом сообщает ProIT
Cosmos Reason и новые возможности для роботов
Cosmos Reason помогает роботам и интеллектуальным агентам выполнять логические операции благодаря интеграции памяти и понимания физических процессов. Это позволяет модели выступать в роли планировщика, определяя следующие действия встроенного агента. Модель можно использовать для подбора данных, планирования действий роботов и аналитики видео.
Cosmos Reason, по словам Nvidia, позволяет роботам и агентам ИИ «размышлять» благодаря пониманию памяти и физики, что дает возможность «выполнять планирование действий для определения следующих шагов».
К линейке моделей присоединились Cosmos Transfer-2, которая ускоряет генерацию синтетических данных на основе 3D-сцен или пространственных команд, и оптимизированная версия Cosmos Transfers, рассчитанная на повышенную скорость работы. Все эти модели ориентированы на создание синтетических наборов данных (текстовых, визуальных и видео), необходимых для обучения роботов и агентов искусственного интеллекта.
Новые библиотеки и серверные решения
Nvidia также презентовала инновационные библиотеки для нейронной реконструкции, среди которых — инструменты для визуализации реального мира в 3D с помощью сенсорных данных. Эта технология уже интегрируется в открытый симулятор CARLA, популярный среди разработчиков робототехники. Кроме того, компания обновила программный пакет Omniverse для разработчиков.
Среди серверных новинок — Nvidia RTX Pro Blackwell Servers, которые обеспечивают единую архитектуру для робототехнических задач, а также облачная платформа Nvidia DGX Cloud для управления процессами разработки.
Эти решения свидетельствуют о укреплении позиций Nvidia в сфере робототехники, поскольку компания ищет новые направления для применения своих графических процессоров, выходя за пределы традиционных AI-центров обработки данных.