Алсо, ржу с того, что БМВ ведёт себя как БМВ, случайно записалось

Честно говоря, такие машины надо убирать с дороги.

Nvidia выложила на Hugging Face модель Alpamayo 2 Super и разрешила использовать ее в коммерческих продуктах. Автопроизводители могут дообучать модель на своих данных, создавать производные версии и распространять их без отдельного согласования с Nvidia.

По названию может показаться, что это готовый электронный водитель: скачал модель, поставил в машину — и получил роботакси. На самом деле Nvidia описывает Alpamayo 2 Super прежде всего как облачного учителя для более компактных автомобильных систем, а не как готовый контроллер для установки в машину.

Ее задача — разбирать редкие дорожные ситуации, для которых трудно собрать достаточно примеров. Обычный автопилот относительно легко учится держаться в полосе. Сложнее решить, что делать, когда соседняя машина резко перестраивается, пешеход выходит из-за автобуса, а встречный водитель одновременно начинает поворот.

Модель получает изображение с камер вокруг автомобиля и выдает сразу несколько связанных результатов: предполагаемую траекторию, команду вроде «уступить» или «сменить полосу», объяснение причин решения и разметку объектов в кадре. Так необработанное видео с испытательной машины можно превратить в учебный материал для других моделей.

Дальше большую модель не обязательно возить с собой. Полученные примеры и рассуждения используют для дистилляции — обучения меньшей специализированной модели, которая уже способна работать в автомобиле в реальном времени. Получается конвейер «облако — машина»: сложный учитель готовит данные, компактный ученик принимает решения на дороге.

Главное изменение нынешнего релиза — лицензия OpenMDW-1.1. Предыдущие Alpamayo представлялись прежде всего как исследовательские модели. Теперь Nvidia прямо разрешает коммерческое дообучение, создание производных систем и их распространение. Все семейство Alpamayo, по данным компании, уже скачали с Hugging Face больше 500 тысяч раз.

Но до готового роботакси здесь еще далеко. Первое место Alpamayo 2 Super в бенчмарке LingoQA и ее преимущество над конкурентами приводит сама Nvidia. Тесты показывают способность рассуждать о записанных дорожных сценах, а не безопасность реальной машины в снегу, тумане или внезапной аварийной ситуации.

Поэтому открыли не автопилот, который завтра повезет пассажиров, а один из самых дорогих этапов его разработки. Раньше подобный облачный «учитель» был преимуществом нескольких крупнейших компаний. Теперь его веса можно скачать, адаптировать под собственный парк машин и использовать в коммерческой системе — если у разработчика хватит вычислений, данных и терпения пройти все испытания.

В Telegram-канале «Сбежавшая нейросеть» я разбираю открытые модели без рекламной мишуры: что именно можно скачать, где это запустить и какое ограничение спрятано за словом «открытая».

Самое время подписаться!