Разработка распределенной информационно-вычислительной системы обработки радарных данных
Семинар: Информационно-вычислительные технологии, Кемеровский филиал ИВТ СО РАН (КФ ИВТ СО РАН)
Начало заседания: 11:00
Дата выступления: 20 Декабрь 2017
Организация: ИВТ СО РАН (Кемерово)
Авторы: Костылев Михаил Александрович
В работе рассматривается процесс разработки распределенной информационно-вычислительной системы на базе массово-параллельной архитектуры для потоковой обработки радарных снимков и расчета моделей смещений земной поверхности. Разработанный прототип системы ориентирован на использование в кластерных средах экосистемы Apache Hadoop (Spark). Показана реализация собственных расчетных модулей в интеграции со сторонними программными решениями на базе изолированных контейнеров объектов JavaVM. Представлена программная реализация, содержащая многофункциональный веб-интерфейс, позволяющий пользователю взаимодействовать с кластером, получая доступ к распределенной файловой системе HDFS, взаимодействовать с открытыми ресурсами космоснимков посредством RESTful API, создавать и исполнять существующие задания ориентируясь на схемы полного цикла процессинга интерферометрических данных.