ВСЕРОССИЙСКИЕ ОТКРЫТЫЕ ЕЖЕГОДНЫЕ КОНФЕРЕНЦИИ
"СОВРЕМЕННЫЕ ПРОБЛЕМЫ ДИСТАНЦИОННОГО
ЗОНДИРОВАНИЯ ЗЕМЛИ ИЗ КОСМОСА"
Физические основы, методы и технологии мониторинга окружающей среды, природных и антропогенных объектов
English
Электронный сборник статей 16-й конференции (12-16 ноября 2018 г., Москва, Россия)
Методы и инструменты выявления задержек в процессе автоматизированной потоковой обработки спутниковых данных
А.А. Прошин, М.А. Бурцев, Д.А. Кобец, И.Г. Сычугов
Институт космических исследований РАН, Москва, Россия
Ilya.Sychugov@gmail.com
DOI 10.21046/rorse2018.295
Доклад посвящѐн описанию методов и инструментов выявления задержек в процессе автоматизированной потоковой обработки спутниковых данных, которые были разработаны за последние несколько лет в ИКИ РАН. Своевременное детектирование задержек в процессе обработки данных их анализ и устранение позволяют повысить оперативность поступления новых данных в информационные системы, предоставляющие доступ к продуктам, получаемых на основе данных дистанционного зондирования Земли. Благодаря решению этих задач повышается эффективность работы информационных систем и достигается большая их отказоустойчивость. В докладе обосновывается необходимость создания специализированных инструментов для детектирования задержек при проведении отдельных этапов обработки спутниковых данных. Описываются наиболее распространенные причины возникновения необоснованных задержек в процессе обработки спутниковых данных и способы их детектирования. Приводятся краткие сведения о реализованных на основе BI-аналитики инструментах для визуального анализа получаемой контрольной информации.
Ключевые слова: дистанционное зондирование, спутниковые данные, потоковая обработка спутниковых данных, технологии работы с данными, анализ задержек получения и обработки данных, контроль ошибок, BI, OLAP
Литература: - [1] Loupian E.A., Proshin A.A., Burtsev M.A., Balashov I.V., Bartalev S.A., Efremov V.Yu., Kashnitskiy A.V., Mazurov A.A., Matveev A.M., Sudneva O.A., Sychugov I.G., Tolpin V.A., Uvarov I.A. IKI RAS Center of collective use of systems for archiving, processing and analyzing satellite data for solving problems of studying and monitoring the environment, Sovremennye problemy distantsionnogo zondirovaniya Zemli iz kosmosa, 2015, Vol. 12, No 5, pp. 263-284.
- [2] Moss L.T., Atre S.. Business Intelligence Roadmap: The Complete Project Lifecycle for Decision-Support Applications. Addision-Wesley, 2003. 576 p.
- [3] Kobets D.A., Balashov I.V., Sychugov I.G., Tolpin V.A. Organization of control and analysis of performance of automated satellite data processing systems using BI-technologies, Sovremennye problemy distantsionnogo zondirovaniya Zemli iz kosmosa, 2017, vol. 14(3). pp. 92-103. DOI: 10.21046/2070-7401-2017-14-3-92-103.
- [4] Proshin A.A., Burtsev M.A., Kobets D.A., Sychugov I.G. Methods and tools for determining delays in the process of automated stream processing of satellite data, 16-th All-Russian open conference "Sovremennye problemy distantsionnogo zondirovaniya Zemli iz kosmosa". 2018, November, 12-16. IKI RAS, Moscow. Abstracts, 2018. p. 108. DOI: 10.21046/2070-16DZZconf-2018a.
- [5] Loupian E.A., Balashov I.V., Burtsev M.A., Efremov V.Yu., Kashnitskiy A.V., Kobets D.A., Krasheninnikova Yu.S., Mazurov A.A., Nazirov R.R., Proshin A.A., Sychugov I.G., Tolpin V.A., Uvarov I.A., Flitman E.V. Creating technologies of construction information systems for remote
- sensing, Sovremennye problemy distantsionnogo zondirovaniya Zemli iz kosmosa, 2015, Vol. 12, No 5, pp. 53-75.
- [6] Proshin A.A., Matveev A.M., Kobets D.A., Radchenko M.V., Sychugov I.G. Support of troubleproof work of complex distibuted systems for satellite data collection, processing, archiving and access, 15-th All-Russian open conference "Sovremennye problemy distantsionnogo zondirovaniya Zemli iz kosmosa". 2017, November , 13–17. IKI RAS, Moscow. Abstracts, 2017. p. 106.
- [7] Kobets D.A., Matveev A.M., Mazurov A.A., Proshin A.A. Organization of automated multistream processing of satellite information in remote sensing systems, Sovremennye problemy distantsionnogo zondirovaniya Zemli iz kosmosa, 2015, Vol. 12, No 1, pp. 145-155
- [8] Andreev M.V., Galeev A.A., Efremov V.Yu., Ilyin V.O., Krasheninnikova Yu.S., Loupian E.A., Mazurov A.A., Nazirov R.R., Proshin A.A., Flitman E.V. Construction of automated systems for collection, storage, processing and representation of satellite data for solving problems of environmental monitoring, Solar-Terrestrial Physics, 2004, Issue 5, pp. 8-11.
Скачать pdf
Программные решения для обработки данных дистанционного мониторинга
295-300