Новая ИИ-система вдвое эффективнее планирует сложные визуальные задачи для роботов

Исследователи из MIT разработали гибридную систему, сочетающую визуально-языковые модели с формальным планированием. Она позволяет роботам ориентироваться в меняющейся среде и повышает эффективность работы команд.

Новая ИИ-система вдвое эффективнее планирует сложные визуальные задачи для роботов

Система генерирует планы для долгосрочных задач с вероятностью успеха около 70%, превосходя существующие методы (около 30%). Она способна решать новые, ранее не встречавшиеся задачи, что делает ее применимой в реальных условиях.

Система использует две модели: SimVLM для распознавания сценария и моделирования действий, и GenVLM для перевода симуляций в язык программирования и уточнения решения. Это позволяет автоматически генерировать файлы для классического ПО планирования.

Разработанный подход, VLMFP, успешно справляется с задачами 2D и 3D планирования, включая взаимодействие нескольких роботов и роботизированную сборку. В будущем планируется расширить возможности системы для обработки более сложных сценариев.

Читайте также

ИИ научили восстанавливать ветхие архивы и старые газеты

ИИ научили восстанавливать ветхие архивы и старые газеты

В ТГУ создали «ферментный конструктор» для программирования вкуса еды

В ТГУ создали «ферментный конструктор» для программирования вкуса еды

Российские ученые создали адаптены – стройматериалы с программируемыми свойствами

Российские ученые создали адаптены – стройматериалы с программируемыми свойствами

В Испании собрали копию легендарного суперкомпьютера Cray-1 из 30 старых Mac mini

В Испании собрали копию легендарного суперкомпьютера Cray-1 из 30 старых Mac mini

Планшет для выращивания человеческих тканей выпустила Mitsui Chemicals

Планшет для выращивания человеческих тканей выпустила Mitsui Chemicals

Французские супермаркеты массово пострадали от хакерской атаки

Французские супермаркеты массово пострадали от хакерской атаки

Российские ученые создали гибкие мемристоры для умной одежды и медицинских имплантатов

Российские ученые создали гибкие мемристоры для умной одежды и медицинских имплантатов

Прозрачная керамика позволит наблюдать за восстановлением тканей

Прозрачная керамика позволит наблюдать за восстановлением тканей

Из лабораторий — на работу: 7 компаний, создающих человекоподобных роботов для реального мира

Из лабораторий — на работу: 7 компаний, создающих человекоподобных роботов для реального мира

Почему невозможно создать абсолютно точную карту Земли, Луны или Марса?

Почему невозможно создать абсолютно точную карту Земли, Луны или Марса?

Оптические иллюзии Парфенона оказались мифом

Оптические иллюзии Парфенона оказались мифом

Хватит ли воды для городов на Луне: ученые подсчитали пределы лунной колонизации

Хватит ли воды для городов на Луне: ученые подсчитали пределы лунной колонизации

Физики МГУ сократили потери света в оптических процессорах

Физики МГУ сократили потери света в оптических процессорах

Квантовая нанофотоника повысила чувствительность биомедицинских микрочипов

Квантовая нанофотоника повысила чувствительность биомедицинских микрочипов

Huawei готовит новый бренд смартфонов Xingmang — возможную замену Honor

Huawei готовит новый бренд смартфонов Xingmang — возможную замену Honor

Bambu Lab анонсировала свой первый 3D-сканер S1 — появились первые подробности

Bambu Lab анонсировала свой первый 3D-сканер S1 — появились первые подробности