Разработка ETL-сервиса для загрузки и обработки больших радиоастрономических данных и дальнейшим поиском новых астрономических объектов

ФИО студента: Жиляков Михаил Михайлович

Руководитель: Самодуров Владимир Алексеевич

Программа: Системы больших данных (Магистратура)

Год защиты: 2021

Данная работа посвящена созданию автоматизированного ETL-сервиса для обработки радио астрономических данных с целью найти новые астрономические объекты (в частности, пульсары). Работа разделена на 3 главы, каждая из которых затрагивает различные аспекты работы с Big Data. Первая глава посвящена теоретической части: построение начальной гипотезы об архитектуре будущего ETL-сервиса, анализ литературных источников в области поиска пульсаров и выбора архитектуры DWH. Во второй главе обозреваются различные технологические инструменты, с помощью которых будет реализован ETL-сервиса. Каждому компоненту ETL-сервиса будет представлено несколько возможных способов реализации, с целью выбрать один из них. Третья глава посвящена обзору особенностей обрабатываемых данных и практическим аспектам работы: созданию и администрированию инфраструктуры ETL-сервиса, программированию ETL-процессов, аналитике данных и интерпретации полученных результатов.

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ