Выявления сарказма в текстах с помощью методов обработки естественного языка.

ФИО студента: Пивторак Юрий Владимирович

Руководитель: Нагорный Олег Станиславович

Кампус/факультет: Санкт-Петербургская школа физико-математических и компьютерных наук

Программа: Анализ больших данных в бизнесе, экономике и обществе (Магистратура)

Год защиты: 2019

Выпускная квалификационная работа посвящена созданию модели машинного обучения, способной классифицировать тексты на английском языке как саркастические и несаркастические. Модель создавалась с помощью языка программирования "Python" и библиотека для написания нейронных сетей "Keras", а для ее обучения использовалась выборка из более миллиона размеченных текстов с сайта "Reddit.com" с 2009 по 2017 года. Результатом работы является нейронная сеть, использующая Управляемые рекуррентные блоки (Gated Recurrent Units - GRU) и репрезентацию слов через Word Embeddings, способная выявлять, являются ли текстовые документы саркастическими. Точность оценки данного классификатора по метрике F1 score 77.3 %.

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ