На GTC Taipei (1 июня 2026) NVIDIA представила набор открытых моделей и инструментов для «физического» ИИ: омнимодель Cosmos 3, крупную модель вождения Alpamayo 2 Super и референс‑гуманоид Isaac GR00T; код и веса ожидаются этим летом на GitHub и Hugging Face.
На конференции GTC Taipei 1 июня 2026 года NVIDIA анонсировала сразу несколько релизов для робототехники, автономного вождения и видеосистем, в том числе омнимодель Cosmos 3, увеличенную дорожную модель Alpamayo 2 Super и открытый референс‑гуманоид Isaac GR00T. Компания позиционирует этот набор как переход к «физическому» ИИ-системам, которые работают непосредственно с окружающим миром, а не только с текстом и изображениями; это важно для промышленного применения, автопрома и разработчиков роботов.
Cosmos 3 — следующая версия «омнимодели», объединяющей текст, изображения, видео, окружающий аудиопоток и данные о движении в единую систему. Архитектура использует смесь трансформеров: один модуль предназначен для рассуждений о сцене, второй — для генерации видео, описаний или траекторий движения. Модель обучалась на миллиардах примеров по всем модальностям и выпускается в вариантах Super (максимальное качество), Nano (оптимизирован для быстрого вывода) и готовящемся Edge‑варианте для встроенных систем; релиз распространяется по лицензии OpenMDW‑1.1 и будет доступен на Hugging Face и GitHub.
NVIDIA выделяет три прикладных сценария для Cosmos 3. В режиме vision‑language модель анализирует видеопотоки — партнёр Linker Vision уже использует её для обнаружения аномалий в трафике. Как world‑model она может генерировать фотореалистичные видео редких событий (например, near‑miss), а в роли world‑action выдаёт числовые данные движения — углы сочленений или позиции захватов — для обучения роботов; в качестве примера приведён промышленный партнёр Agile Robots.
Alpamayo 2 Super — верхняя итерация открытой серии моделей для Level‑4 автономного вождения. В отличие от предыдущих Alpamayo 1 Nano и 1.5 Nano с примерно 10 миллиардами параметров, версия Super насчитывает 32 миллиарда параметров и нацелена на лучшее пространственное понимание и обработку редких дорожных сценариев. Модель выводит не только траекторию, но и "мета‑действия" (смена полосы, стоп, уступить) и сопровождает свои решения текстовой "цепочкой причинности" для целей безопасности и регуляторной проверки.
NVIDIA позиционирует Alpamayo 2 Super как учительскую модель: производители должны дистиллировать её в компактные сети для выполнения на бортовом железе Drive AGX Thor. Параллельно компания объявила AlpaGym — open‑source фреймворк для закрытого‑контурного обучения с подкреплением в симуляциях, и OmniDreams — генератор редких дорожных сценариев. Код и веса ожидаются на GitHub и Hugging Face этим летом; при этом компания не привела публичных бенчмарков, сопоставимых со стеком конкурентов вроде Waymo или Tesla.
В комплект релизов также вошёл открытый референс гуманоидного робота Isaac GR00T и запуск Cosmos Coalition — альянса партнёров (Black Forest Labs, Runway, LTX, Generalist, Agile Robots, Skild AI), использующего DGX Cloud для тренировки и совместного вклада моделей и данных. Для разработчиков это означает доступ к открытому стэку, инструментам синтетического датасета, симуляции редких событий и средствам дистилляции крупных учительских моделей; вместе с тем NVIDIA подчёркивает, что текстовые "цепочки причинности" и отсутствие внешних сравнений требуют тщательной валидации при сертификации и деплое.
Источники
Ответы (0)
Пока нет ответов в этой теме.
