Разработка аналитического онлайн-сервиса с возможностями модульного расширения

ФИО студента: Папава Илона Элгуджаевна

Руководитель: Яворский Ростислав Эдуардович

Кампус/факультет: Факультет компьютерных наук

Программа: Прикладная математика и информатика (Бакалавриат)

Оценка: 8

Год защиты: 2017

В данной работе разработан аналитический сервис для построения интернет-портретов регионов России. Первая часть работы посвящена обзору существующей литературы и обозначению актуальности данной темы. Во второй части работы рассказано о системе сбора и хранения данных, в частности, о модуле обработки Яндекс-новостей и объявлений Авито. Наконец, третья часть работы посвящена автоматизации анализа собранных данных: выделение топ-10 ключевых событий, произошедших в регионе, и статистический анализ новостей. Также описаны кластеризация и выделение тематик объявлений по корпусу данных, то есть создание обучающей выборки, с помощью которой предсказываются тематики для рассматриваемых объявлений в будущих отчетах. Результатами работы является веб-приложение, позволяющее пользователю при помощи всего одного клика сгенерировать кастомизированный отчет, в котором можно указать регион, временной промежуток, язык выполнения отчета и выбрать источники данных. Ключевые слова: обработка текстов на естественном языке, анализ данных, разработка на Django, веб-программирование, базы данных, статистический анализ данных, облако слов, классификация текстовых данных, кластеризация текстовых данных

Текст работы (работа добавлена 28 мая 2017 г.)

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ