🟢 Kandinsky научит роботов: Сбер создал ИИ для генерации обучающих видео
Сбер представил семейство генеративных моделей Kandinsky WM 1.0 — они создают видео для обучения систем физического ИИ.
Модели генерируют пятисекундные ролики, в которых воспроизводятся отдельные действия и сценарии: перемещение предметов, проезд перекрестка, перестроение автомобиля или этапы производственного процесса. Эти видеоматериалы помогут обучать роботов и беспилотный транспорт в ситуациях, которые сложно, дорого или небезопасно воспроизводить в реальности.
В основе разработки — нейросеть Kandinsky 5.0 Video Lite, дообученная на миллионах записей с камер роботов, автомобилей и промышленных объектов.
Особое внимание разработчики уделили физической достоверности видео. Система сохраняет форму объектов, перспективу и естественность движений.
Главная задача Kandinsky WM 1.0 — восполнить дефицит данных для Physical AI.
🟢Один автомобиль с камерами способен собрать около 5 тысяч часов видео в год. А для обучения современных систем требуются миллионы часов.
🟢Синтетические данные позволяют воспроизводить редкие и опасные ситуации — ДТП, экстремальную погоду и отказы оборудования.
Модели уже применяют в Центре робототехники Сбера и дорожном симуляторе института AIRI. Код и веса Kandinsky WM 1.0 опубликованы в открытом доступе.
Роботехника
