Ученые МФТИ представили «Нейропарсер» для аналитики видеопотока БПЛА

Специалисты Московского физико-технического института создали бортовой интеллектуальный модуль «Нейропарсер». Эта разработка призвана кардинально изменить принципы анализа данных, получаемых с беспилотных летательных аппаратов. В отличие от стандартных систем, которые обрабатывают видеопоток как набор разрозненных кадров, новый нейромодуль формирует целостную и непрерывную картину происходящего.

Ученые МФТИ представили «Нейропарсер» для аналитики видеопотока БПЛА

Ключевое новшество заключается в создании так называемой объектовой памяти. Каждый зафиксированный камерой БПЛА элемент – будь то человек, транспортное средство или деталь конструкции – получает свой цифровой паспорт. В него заносятся тип объекта, его визуальная маска на изображении, уникальный идентификатор трека для отслеживания во времени, точные геокоординаты и специальный математический вектор эмбеддинг. Этот вектор позволяет системе находить данный объект снова, даже если он частично скрыт, изменился ракурс съемки или освещение.

Как пояснил архитектор проекта Иван Фаркатов, ценность технологии рождается из синергии всех ее компонентов: сегментации, трекинга, реидентификации, геопривязки и единой памяти. Система перестает отвечать на простой вопрос: «Что находится в кадре?». Вместо этого она способна решать сложные аналитические задачи: сколько времени наблюдался конкретный объект, по какому маршруту он перемещался, где именно он находился на карте местности в определенный момент и насколько достоверен результат распознавания.

Ученые МФТИ представили «Нейропарсер» для аналитики видеопотока БПЛА
Кадр, координаты БПЛА, параметры камеры и эталон цели преобразуются в объектовую сцену и автоматический отчет

Архитектура модуля построена по гибридному принципу. Координаты самого аппарата поступают от навигационных модулей GNSS и INS, а нейросетевые алгоритмы отвечают исключительно за обработку изображения и анализ объектов. Такой подход исключает ошибки при попытке одной нейросети одновременно угадать и геометрию сцены, и содержимое кадра, что делает систему более надежной и проверяемой.

Технология уже сейчас рассматривается как ключевой инструмент для инспекции протяженной инфраструктуры, поиска пропавших людей и оперативного анализа последствий техногенных аварий. В перспективе «Нейропарсер» позволит трансформировать дрон из пассивной «летающей камеры» в активного автономного аналитика, способного не просто видеть, но и запоминать, сопоставлять факты и предоставлять оператору готовый структурированный отчет о наблюдаемой сцене.

Читать TechDigest в Google

Читайте также

Робот впервые самостоятельно собрал конструкцию в космосе

Робот впервые самостоятельно собрал конструкцию в космосе

В Китае передали данные со скоростью 64 Тбит/с по оптоволокну длиной 1000 км

В Китае передали данные со скоростью 64 Тбит/с по оптоволокну длиной 1000 км

В Китае роботов заставили работать в магазине 24 часа — двое не справились

В Китае роботов заставили работать в магазине 24 часа — двое не справились

Главу Nvidia заподозрили в связях с предполагаемой китайской шпионкой

Главу Nvidia заподозрили в связях с предполагаемой китайской шпионкой

Учёные нашли способ создавать сверхплотную память с ячейками меньше нанометра

Учёные нашли способ создавать сверхплотную память с ячейками меньше нанометра

Claude научили «видеть сны», чтобы исправлять ошибки и лучше запоминать информацию

Claude научили «видеть сны», чтобы исправлять ошибки и лучше запоминать информацию

Claude научился анализировать банковские счета и следить за личными расходами

Claude научился анализировать банковские счета и следить за личными расходами

В Китае представили роботов-телеведущих с искусственным интеллектом и реалистичной кожей

В Китае представили роботов-телеведущих с искусственным интеллектом и реалистичной кожей

Комета Галлея возвращается: почему её появление в 1986 году разочаровало миллионы людей и чего ждать в 2061-м

Комета Галлея возвращается: почему её появление в 1986 году разочаровало миллионы людей и чего ждать в 2061-м

«Черный ящик»: как устроен главный свидетель авиакатастроф и почему его нельзя заменить облаком

«Черный ящик»: как устроен главный свидетель авиакатастроф и почему его нельзя заменить облаком

Starlink и Starshield: чем отличаются две спутниковые сети SpaceX

Starlink и Starshield: чем отличаются две спутниковые сети SpaceX

Что происходит со спутником, когда у него заканчивается топливо: почему он не падает на Землю?

Что происходит со спутником, когда у него заканчивается топливо: почему он не падает на Землю?

Huawei представила MateBook Fold S — складной ноутбук с необычным внешним экраном

Huawei представила MateBook Fold S — складной ноутбук с необычным внешним экраном

Хакеры научились открывать и заводить автомобили по всему миру — всё из-за ошибок в приложениях

Хакеры научились открывать и заводить автомобили по всему миру — всё из-за ошибок в приложениях

Они услышали крики из космоса: тайна советских космонавтов, исчезнувших до Гагарина

Они услышали крики из космоса: тайна советских космонавтов, исчезнувших до Гагарина

Корпуса iPhone 18 и iPhone Air 2 показали на первых изображениях — Apple готовит изменения

Корпуса iPhone 18 и iPhone Air 2 показали на первых изображениях — Apple готовит изменения