Собираем проектную команду

Внимание!

Готовый кейс программы «Сириус. Лето: начни свой проект» и наставник ищут свою команду.

Тема кейса: Разработка мультимодальной интеллектуальной системы, обеспечивающей автоматическое преобразование данных, получаемых от автономных средств наблюдения БПЛА, в ситуационную модель объекта и формализованные задачи для последующего автоматического обследования, контроля или выполнения технологических операций

Заказчик: ФГБОУ ВО «Брянский государственный технический университет (БГТУ)»

Наставник проекта:

Ерёмин Игорь Андреевич, студент ФГБОУ ВО «Брянский государственный технический университет (БГТУ)»

 

Актуальность проекта.

Современные задачи мониторинга природных, производственных, транспортных, складских и иных объектов требуют обработки больших объёмов разнородных данных, получаемых с камер, беспилотных летательных аппаратов, спектральных и тепловизионных датчиков, сканеров, геоинформационных систем и других средств наблюдения.

В настоящее время такие данные зачастую используются преимущественно для визуального контроля или отдельного автоматического распознавания объектов. При этом между обнаружением события и выполнением конкретного действия сохраняется значительный объём ручной работы: специалист должен интерпретировать полученные данные, определить необходимость дополнительного обследования или воздействия, сформулировать задачу и передать её соответствующему исполнителю.

Актуальной является разработка универсального интеллектуального контура, в котором данные различных типов автоматически объединяются и интерпретируются с учётом контекста, после чего система формирует формализованную задачу для человека, БПЛА, роботизированного устройства или другой автоматизированной системы.

Такой подход позволяет использовать единую технологическую основу в различных предметных областях. Например, в агротехнологиях система может выявлять признаки изменения состояния растений и формировать задание на дополнительное обследование участка; в ботанических исследованиях — определять участки, требующие повторного наблюдения; на складе — проводить автоматическую инвентаризацию по визуальным идентификаторам; при мониторинге инфраструктуры — выявлять потенциальные аномалии и формировать задания на проверку.

Что предстоит сделать?

Разработка и апробация прототипа мультимодальной интеллектуальной системы, способной получать данные от автономных средств наблюдения, распознавать объекты и события, формировать ситуационную модель и автоматически создавать формализованные задачи для последующего обследования, контроля или выполнения технологических операций.

1. Прототип универсальной интеллектуальной системы должен включать:

модуль получения данных от различных сенсоров;

модуль обработки изображений и видеопотоков;

модуль анализа спектральных и других сенсорных данных;

модуль обнаружения и классификации объектов;

модуль формирования ситуационной модели;

модуль автоматической генерации формализованных задач;

модуль назначения исполнителя;

модуль визуализации результатов;

механизм обратной связи по результатам выполнения задачи.

2. Универсальный формат задачи

В системе будет реализовано структурированное описание задачи, содержащее, в зависимости от сценария:

объект;

тип выявленного события;

состояние объекта;

координаты;

время;

исходные данные;

результаты анализа;

уровень уверенности;

необходимое действие;

параметры выполнения;

исполнитель;

критерии завершения;

результат выполнения.

3. Демонстрационный комплекс

Будет создан демонстрационный комплекс, позволяющий показать работу одной технологической платформы на нескольких сценариях:

инвентаризация;

территориальный мониторинг.

ВАЖНО! Проект можно подать на международный конкурс научно-технологических проектов «Большие вызовы» в направление «Большие данные, искусственный интеллект, автоматизированные системы и информационная безопасность», «Транспортно-логистические системы, морские, авиационные и беспилотные технологии».

 

Успей подать заявку до 2 ноября!!!

Команда работает над задачей в течение учебного года -до 30 апреля 2027.

Регистрация и выбор проектов — через систему «Сириус. Онлайн»  по ссылке  https://siriusleto.ru/

Будет интересно!

Региональный координатор Ширяева Галина Николаевна

Справки по телефону: 77-20-32 (Центр одаренных детей «Огма», проектный отдел)