Новая ИИ-система вдвое эффективнее планирует сложные визуальные задачи для роботов

Исследователи из MIT разработали гибридную систему, сочетающую визуально-языковые модели с формальным планированием. Она позволяет роботам ориентироваться в меняющейся среде и повышает эффективность работы команд.

Новая ИИ-система вдвое эффективнее планирует сложные визуальные задачи для роботов

Система генерирует планы для долгосрочных задач с вероятностью успеха около 70%, превосходя существующие методы (около 30%). Она способна решать новые, ранее не встречавшиеся задачи, что делает ее применимой в реальных условиях.

Система использует две модели: SimVLM для распознавания сценария и моделирования действий, и GenVLM для перевода симуляций в язык программирования и уточнения решения. Это позволяет автоматически генерировать файлы для классического ПО планирования.

Разработанный подход, VLMFP, успешно справляется с задачами 2D и 3D планирования, включая взаимодействие нескольких роботов и роботизированную сборку. В будущем планируется расширить возможности системы для обработки более сложных сценариев.

Читайте также

В США создали квантовый датчик, потребляющий всего 5 милливатт

В США создали квантовый датчик, потребляющий всего 5 милливатт

Anthropic заблокировала пять случаев использования Claude для потенциально опасных биологических исследований

Anthropic заблокировала пять случаев использования Claude для потенциально опасных биологических исследований

ИИ-агенты OpenAI тайно общались через сторонние сайты

ИИ-агенты OpenAI тайно общались через сторонние сайты

ИИ научился различать мысленно произнесенные слова с точностью 78%

ИИ научился различать мысленно произнесенные слова с точностью 78%

ИИ и квантовые технологии объединили для анализа МРТ-снимков головного мозга

ИИ и квантовые технологии объединили для анализа МРТ-снимков головного мозга

OpenAI использовала 10 000 ИИ-агентов для решения задачи тысячелетия

OpenAI использовала 10 000 ИИ-агентов для решения задачи тысячелетия

Умное покрытие спасет сверхпроводники от перегорания

Умное покрытие спасет сверхпроводники от перегорания

Астрофизические алгоритмы применили для моделирования земной аэродинамики

Астрофизические алгоритмы применили для моделирования земной аэродинамики

15 технологий древности, которыми человечество пользуется до сих пор

15 технологий древности, которыми человечество пользуется до сих пор

Состоялся запуск новейшего космического телескопа NASA

Состоялся запуск новейшего космического телескопа NASA

Семь самых больших машин в истории: гиганты весом в тысячи тонн и длиной в километры

Семь самых больших машин в истории: гиганты весом в тысячи тонн и длиной в километры

20 лет назад Плутон перестал быть планетой — почему с этим до сих пор не все согласны?

20 лет назад Плутон перестал быть планетой — почему с этим до сих пор не все согласны?

Два частных спутника сблизились на расстояние всего 200 метров на орбите

Два частных спутника сблизились на расстояние всего 200 метров на орбите

Солнце могло поглотить суперземлю в несколько раз массивнее Земли

Солнце могло поглотить суперземлю в несколько раз массивнее Земли

Ученых шокировала змея, охотящаяся с помощью фальшивого паука на хвосте

Ученых шокировала змея, охотящаяся с помощью фальшивого паука на хвосте

Открыт новый вид льда, способный объяснить тайны Нептуна и Урана

Открыт новый вид льда, способный объяснить тайны Нептуна и Урана