Рязанский государственный радиотехнический университет (РГРТУ)


 /  Об университете  /  Факультеты и кафедры  /  Факультет автоматики и информационных технологий в управлении  /  Кафедры  /  Кафедра автоматики и информационных технологий в управлении  /  Научная работа  /  Научные проекты, выполняемые в настоящее время

Научные проекты, выполняемые в настоящее время

| Версия для печати |

Технологии анализа видеоинформации для беспилотных летательных аппаратов 



   В рамках ФЦП «Исследования и разработки по приоритетным направлениям развития научно-технологического комплекса России на 2007-2013 годы» научным коллективом кафедры АИТУ под руководством д.т.н., проф. Алпатова Б.А. проводится НИР по теме «Разработка алгоритмов функционирования системы машинного зрения, предназначенной для автономной навигации беспилотного летательного аппарата, и создание на их основе программного комплекса для обработки и анализа видеоданных об объектах местности, наблюдаемых во время полета» (госконтракт № 07.514.11.4034).

    В современном мире одним из наиболее значимых направлений в развитии прикладной науки и техники является создание автономных мобильных роботов, к числу которых можно отнести беспилотные летательные аппараты (БПЛА). В настоящее время они находят широкое применение в таких отраслях народного хозяйства как метеорология, картография, сельское хозяйство, экологический мониторинг, разведка полезных ископаемых и многих других.


searcher2.jpg
БПЛА Searcher Mk II израильской компании Israel Aerospace Industries, предназначенный для поставки Министерству обороны России


    С целью совершенствования БПЛА многие разработчики в последние годы стали уделять особое внимание внедрению новых информационных технологий, например, автоматизации разработки полетных заданий, выполнению полетов в полностью автономном режиме, автоматизированному сбору, обработке и хранению информации. Среди различных аспектов информационного обеспечения полетов ключевую роль играет проблема автономной навигации в сложных условиях полета.

   В практическом плане воздушная навигация может рассматриваться как совокупность двух основных подзадач: во-первых, определение пространственного места летательного аппарата, величины его скорости и направления движения; во-вторых, расчет требуемых параметров для полета по программной траектории. Для определения пространственных координат воздушного судна, его скорости и направления движения предложено множество различных подходов. Существующие способы определения местоположения летательного аппарата включают использование инерциальных, спутниковых и радионавигационных систем, а также применение множества вспомогательных технических средств, измеряющих отдельные параметры полета, таких как, например, высотомеры, магнитные и гиромагнитные компасы. Однако на данный момент все основные навигационные системы имеют ряд существенных недостатков, связанных с их недостаточной точностью и помехозащищенностью, что заставляет искать новые пути решения рассматриваемой задачи.

   Одним из наиболее перспективных представляется способ, основанный на сравнении изображения земной поверхности, получаемого с борта БПЛА, координаты которого требуется определять, с изображением того же участка местности, полученным заранее и привязанным к географической системе координат. Современные видеодатчики обеспечивают формирование изображений высокого пространственного разрешения с большой частотой следования кадров. При наблюдении с борта летательного аппарата оптико-электронными средствами возможно получить разрешение на местности в доли метра, а частота поступления видеокадров может превосходить телевизионный формат (25 Гц), и составлять величину 100 Гц и более.


fg-screen.jpg
Изображение, полученное с борта БПЛА (синтезировано с использованием авиасимулятора FlightGear)


   Анализ видеоданных при полете БПЛА сводится к следующему. На серии полученных заранее воздушных или спутниковых фотоснимков местности человек-оператор осуществляет выбор маршрута полета путем указания некоторого количества контрольных точек. Далее в автоматическом или автоматизированном режиме выполняется прокладка маршрута между контрольными точками и выбор на нем серии опорных участков - выделяющихся по тем или иным признакам объектов местности. Во время полета БПЛА сопоставляет текущие изображения местности, формируемые бортовой видеокамерой, с хранящимися в памяти эталонными изображениями опорных участков. Результаты сопоставления в дальнейшем используются для определения положения и ориентации БПЛА относительно указанных оператором контрольных точек и формирование управляющих воздействий, обеспечивающих движение вдоль заданного маршрута.

    Среди основных особенностей рассматриваемой задачи следует выделить:
  • изменчивость наблюдаемого изображения в зависимости от метеоусловий, времени суток и других факторов;
  • различные виды геометрических преобразований, связывающих текущее и эталонное изображения;
  • большой объём обрабатываемой информации, связанный, в частности, с необходимостью установки видеодатчиков высокого разрешения;
  • ограниченность доступных вычислительных ресурсов, жесткие требования по энергопотреблению аппаратуры и ее массогабаритным показателям.
   Решение рассматриваемой задачи с учетом отмеченных особенностей, представляет собой весьма важную и актуальную научно-техническую проблему.


Формирование изображений при полете БПЛА по заданному маршруту
Формирование изображений при пролете БПЛА по заданному маршруту


Автоматический выбор опорных участков с целью дальнейшей оценки параметров геометрических преобразований изображений
Автоматический выбор опорных участков с целью дальнейшей оценки параметров геометрических преобразований изображений


    Выполнение НИР преследует следующие основные цели:
  1. Получение научно-технического задела в области разработки программного обеспечения, осуществляющего ввод, обработку и анализ видеоданных об объектах местности, получаемых фото и видеокамерами, и сличение их с данными аэрофотосъемки и спутниковой фотосъемки.
  2. Разработка способов анализа видеоданных об объектах местности, наблюдаемых во время полета, и технологии подготовки предполетной информации для определения навигационных параметров беспилотного летательного аппарата: географических координат (широты и долготы), а также истинного курса - позиционными методами в условиях отсутствия, недостаточной точности или ошибок данных GPS, ГЛОНАСС.
  3. Разработка программного инструментария, обеспечивающего возможность исследования работоспособности алгоритмов определения географических координат и истинного курса беспилотного летательного аппарата в различных условиях полета с использованием синтезированных и натурных видеосюжетов.
  4. Оценка возможностей реализации на современной элементной базе бортовой системы машинного зрения для определения навигационных элементов, а именно: географических координат (широты и долготы), а также истинного курса беспилотного летательного аппарата.
    Для достижения поставленных целей планируется разработать:
  • методы и алгоритмы обнаружения, распознавания и прослеживания опорных участков или ориентиров в последовательности изображений местности, инвариантные к изменениям условий видеосъемки;
  • методы и алгоритмы определения географических координат и истинного курса БПЛА по данным текущего видеонаблюдения и эталонного изображения ландшафта Земли;
  • программный комплекс «Навигация», предназначенный для моделирования полетов и оценки эффективности алгоритмов определения навигационных параметров БПЛА;
  • технология подготовки предполетной информации для обеспечения высокоточной навигации БПЛА в условиях отсутствия или недостаточной точности данных от спутников GPS, ГЛОНАСС.

    Ожидается, что результаты НИР будут востребованы в следующих областях:
  • системы навигации летательных аппаратов на основе данных текущего видеонаблюдения местности и эталонного изображения, хранимого в памяти;
  • системы улучшенного и синтезированного видения летательных аппаратов, позволяющие строить трехмерную модель местности на основе цифровой базы данных, содержащей изображения поверхности Земли;
  • существующие и перспективные бесплотные авиационные комплексы, отличающиеся высокой помехозащищенностью, всепогодностью, способностью эффективно выполнять возложенные на них задачи в любое время суток.

   В ходе реализации первого этапа проекта был проведен анализ патентных источников, научно-технической и методической литературы, который свидетельствует об актуальности и практической значимости выполняемых исследований. Предложен общий подход к решению задач обнаружения, распознавания и прослеживания в видеопоследовательности опорных участков, заданных своими изображениями на аэрофотоснимке или спутниковом фотоснимке, новизна которого состоит в использовании инвариантного способа описания опорных участков совокупностью ключевых точек. Обоснована необходимость представления изображений опорных участков местности в виде набора ключевых точек, дескрипторы которых инвариантны к изменению условий видеосъемки рассматриваемых участков. Разработана общая архитектура программного комплекса, позволяющего моделировать различные условия видеосъемки с борта летательного аппарата, рассчитывать навигационные параметры, исследовать эффективность и работоспособность алгоритмов обнаружения, распознавания, прослеживания опорных участков, а также способов определения координат и курса летательного аппарата.
Последнее обновление: 11.11.2011