Приложение для мониторинга ресурсов в pyspark

ФИО студента: Ашихмин Павел Александрович

Руководитель: Брейман Александр Давидович

Кампус/факультет: Факультет компьютерных наук

Программа: Программная инженерия (Бакалавриат)

Год защиты: 2021

Эта работа может помочь отделам эксплуатации, занимающимся поддержкой распределенной системы Apache Spark, запущенной на Apache Yarn кластере. Проект представляет собой инструмент для мониторинга необходимых метрик и отображения степени утилизации ресурсов Spark-приложения. Вряд ли серьезный технический проект может существовать без системы мониторинга. Для распределенных вычислений на кластере такая система - ключ к ускорению вычислений, следовательно, и к более быстрому получению необходимой информации и конкурентного преимущества. Интеграция этого решения на работающий Apache Spark кластер должна сделать процесс настройки приложения проще, чем при использовании встроенных инструментов мониторинга Apache Spark

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ