Распределенный метод сопоставления астрономических каталогов на платформе Apache Spark
Мещеряков Александр Валерьевич
Институт космических исследований РАН
Авторы: Евгений Глотов (ВМиК МГУ), Сергей Герасимов ((ВМиК МГУ), Александр Мещеряков (ИКИ РАН)
В работе предложен горизонтально-масштабируемый алгоритм сопоставления астрономических каталогов, реализованный на платформе распределенных вычислений Apache Spark. Метод обеспечивает необходимую точность сопоставления каталогов и хорошую производительность в сравнении с лучшими реализациями подобных систем, доступными в астрономическом сообществе. Горизонтальная масштабируемость предложенного метода была подтверждена с помощью экспериментов на кластере, развёрнутом в облаке Microsoft Azure. Работа поддержана Российским фондом фундаментальных исследований (грант РФФИ №15-29-07085 офи_м).\r\n\r\nСсылка на публикацию: Глотов Е. С., Герасимов С. В., Мещеряков А. В. Распределенный метод сопоставления астрономических каталогов на платформе apache spark // Современные информационные технологии и ИТ-образование. — 2016. — Т. 12, № 1. — С. 153–162.