Материалы 19-й Международной конференции «Современные проблемы дистанционного зондирования Земли из космоса»
Москва, ИКИ РАН, 15–19 ноября 2021 г.

(http://conf.rse.geosmis.ru)

XIX.B.448

Универсальный модуль растеризации продуктов спутниковых данных UNISAT

Руткевич Б.П (1), Балашов И.В. (1), Кашницкий А.В. (1), Прошин А.А. (1)
(1) Институт космических исследований РАН, Москва, Россия
В настоящее время в ИКИ РАН созданы и эксплуатируются целый ряд информационных сервисов дистанционного мониторинга, работающих со сверхбольшими распределенными архивами спутниковых данных. В рамках каждого из сервисов используются специализированные варианты обработки спутниковых данных, и создание создание такого количества систем было бы невозможным без технологии UNISAT (Прошин и др., 2019), обеспечивающей автоматическое ведение сверхбольших архивов и позволяющей описывать и формировать виртуальные продукты обработки спутниковых данных «на лету» по запросам пользователей и систем обработки. До настоящего времени для различных сценариев использования таких продуктов применялсь различные программные блоки, решающие, по сути, одинаковую задачу.
Настоящий доклад посвящен описанию универсального модуля построения продуктов спутниковых данных UNISAT, который будет применен для всех сценариев получения продуктов обработки данных, хранящихся в архивах, включая построение карт, выдачу исходных данных, получение продуктов для задач расчета характеристик объектов. В работе описывается базовый алгоритм получения запрашиваемого продукта по области интереса. Описываются основные этапы обработки запроса на получение данных, включая формирование уточненного запроса с полными путями к данными и правил построения для необходимого продукта. Далее, подробно рассматриваются этапы обработки гео-привязанных данных с использованием библиотеки GDAL, где происходит перепроецирование данных из проекции данных в проекцию карты, обрезка данных по области интереса, формирование данных запрашиваемого размера и этап вычислений продукта, происходящий над числовыми массивами.
В докладе описываются основные задачи и проблемы, возникающие при обработке численных данных в соответствии с требованиями (правилами) для отдельных продуктов, включая задачи обработки различных сценариев работы, такие как попадание области интереса на несколько файлов с данными, необходимые вычисления для каждого канала в соответствии с выбранным продуктом, перенормировку данных, подготовку выходных данных при различных типах формируемого продукта.
В заключении приводится обзор основных нюансов, возникших при реализации модуля для различных версий программного пакета GDAL и языка программирования Python, а так же, результаты опыта экплуатации в сценарии построения карт для картографических интерфейсов сервисов спутникового мониторинга.
Работа выполнена в рамках темы "Большие данные в космических исследованиях: астрофизика, солнечная система, геосфера" (госрегистрация №0024-2019-0014), c использованием ресурсов ЦКП «ИКИ-Мониторинг» (Лупян и др., 2015, 2019).

Ключевые слова: ДЗЗ, UNISAT, продукты обработки, GDAL, Python
Литература:
  1. Лупян Е.А., Прошин А.А., Бурцев М.А., Балашов И.В., Барталев С.А., Ефремов В.Ю., Кашницкий А.В., Мазуров А.А., Матвеев А.М., Суднева О.А., Сычугов И.Г., Толпин В.А., Уваров И.А. Центр коллективного пользования системами архивации, обработки и анализа спутниковых данных ИКИ РАН для решения задач изучения и мониторинга окружающей среды // Современные проблемы дистанционного зондирования Земли из космоса. 2015. Т. 12. № 5. С. 263-284.
  2. Лупян Е.А., Прошин А.А., Бурцев М.А., Кашницкий А.В., Балашов И.В., Барталев С.А., Константинова А.М., Кобец Д.А., Мазуров А.А., Марченков В.В., Матвеев А.М., Радченко М.В., Сычугов И.Г., Толпин В.А., Уваров И.А. Опыт эксплуатации и развития центра коллективного пользования системами архивации, обработки и анализа спутниковых данных (ЦКП «ИКИ-Мониторинг») // Современные проблемы дистанционного зондирования Земли из космоса. 2019. Т. 16. № 3. С. 151-170. DOI: 10.21046/2070-7401-2019-16-3-151-170.
  3. Прошин А.А., Лупян Е.А., Кашницкий А.В., Балашов И.В. UNISAT. Технология построения унифицированных систем ведения сверхбольших распределенных архивов разнородных спутниковых данных // Обработка пространственных данных в задачах мониторинга природных и антропогенных про-цессов (SDM-2019) (Электронный ресурс): Сборник трудов всероссийской конференции (26-30 авгу-ста 2019 г., г. Бердск). Новосибирск: ИВТ СО РАН, 2019. С. 153-158.

Презентация доклада



Ссылка для цитирования: Руткевич Б.П., Балашов И.В., Кашницкий А.В., Прошин А.А. Универсальный модуль растеризации продуктов спутниковых данных UNISAT // Материалы 19-й Международной конференции «Современные проблемы дистанционного зондирования Земли из космоса». Москва: ИКИ РАН, 2021. C. 109. DOI 10.21046/19DZZconf-2021a

Технологии и методы использования спутниковых данных в системах мониторинга

109