XX.B.374
Построение инструментов онлайн-анализа временных серий данных сверхбольших распределенных архивов
Балашов И.В. (1), Лупян Е.А. (1), Марченков В.В. (1), Прошин А.А. (1), Руткевич Б.П (1), Уваров И.А. (1)
(1) Институт космических исследований РАН, Москва, Россия
Постоянный рост количества космических аппаратов, увеличение объемов и качества формируемых по их данным информационных продуктов является характерным следствием стремительного развития средств ДЗЗ в последние десятилетия. Одним из примеров сверхбольших архивов, накопленных в результате регулярного сбора информации ДЗЗ из различных источников является ЦКП «ИКИ-Мониторинг» (Лупян и др, 2019). Архивы ЦКП в настоящее время покрывают данными всю территории РФ и сопредельных государств, при этом протяженность истории наблюдений отдельными продуктами составляет более 30 лет.
Опыт построения и эксплуатации сервисов для работы с данными ЦКП «ИКИ Мониторинг» показал востребованность и эффективность при решении отдельных задач мониторинга инструмента анализа данных, представляющих протяженные серии из большого количества элементов данных в виде графиков. Однако, существующие в настоящее время инструменты анализа спутниковых данных ориентированы на работу либо с отдельными наблюдениями (фрагментами спутниковой съемки или композитами) или данными протяженных наблюдений, учтенных в границах объектов мониторинга в офлайн-режиме (Константинова и др., 2021). Существующие инструменты, таким образом, не позволяют пользователям эффективно получать в онлайн-режиме ряды наблюдений в интересующих их точках на территории, покрытой данными архивов.
В настоящей статье проводится обзор требований к инструментам, позволяющим проводить онлайн-анализ временных серий по данным сверхбольших распределенных архивов. Описываются решения, принятые при разработке специализированных сервисов и инструментов, ориентированных на быструю обработку запросов пользователей и формирование рядов данных, включая их визуализацию, позволяющих «на лету» получать и анализировать значения необходимых продуктов по любой точке поверхности в границах покрытия архивов. Отдельно обсуждаются аспекты оптимизации, необходимые для быстрого извлечения массивов данных (временных серий) из сверхбольших распределенных архивов спутниковых данных. В заключении статьи приводятся примеры использования возможностей созданных инструментов для анализа разновременных наблюдений геостационарных аппаратов и многолетних данных вегетационных индексов.
Работы по созданию инструментов выполняются в рамках темы Минобрнауки РФ «Большие данные в космических исследованиях: астрофизика, солнечная система, геосфера» (№122042500019-6) с использованием возможностей ЦКП «ИКИ-Мониторинг» (http://ckp.geosmis.ru/).
Ключевые слова: ДЗЗ, спутниковый мониторинг, анализ временных серий, сверхбольшие архивы данныхЛитература:
- Лупян Е.А., Прошин А.А., Бурцев М.А., Кашницкий А.В., Балашов И.В., Барталев С.А., Константинова А.М., Кобец Д.А., Мазуров А.А., Марченков В.В., Матвеев А.М., Радченко М.В., Сычугов И.Г., Толпин В.А., Уваров И.А. Опыт эксплуатации и развития центра коллективного пользования системами архивации, обработки и анализа спутниковых данных (ЦКП «ИКИ-Мониторинг») // Современные проблемы дистанционного зондирования Земли из космоса. 2019. Т. 16. № 3. С. 151-170. DOI: 10.21046/2070-7401-2019-16-3-151-170.
- Константинова А.М., Балашов И.В., Кашницкий А.В., Лупян Е.А. Унифицированная технология дистанционного мониторинга природных и антропогенных объектов // Современные проблемы дистанционного зондирования Земли из космоса. 2021. Т. 18. № 4. С. 41-52. DOI: 10.21046/2070-7401-2021-18-4-41-52.
Презентация доклада
Ссылка для цитирования: Балашов И.В., Лупян Е.А., Марченков В.В., Прошин А.А., Руткевич Б.П., Уваров И.А. Построение инструментов онлайн-анализа временных серий данных сверхбольших распределенных архивов // Материалы 20-й Международной конференции «Современные проблемы дистанционного зондирования Земли из космоса». Москва: ИКИ РАН, 2022. C. 77. DOI 10.21046/20DZZconf-2022aТехнологии и методы использования спутниковых данных в системах мониторинга
77