Анализ и фильтрация пользовательского текстового контента при разработке интернет-сайта с элементами user-generated content

ФИО студента: Смирнова Владислава Константиновна

Кампус/факультет: Факультет гуманитарных наук

Программа: Компьютерная лингвистика (Магистратура)

Оценка: 10

Год защиты: 2021

Работа посвящена решению трех задач анализа и фильтрации пользовательского текстового контента: определению наличия обсценных слов, определению рекламы и определению токсичности в тексте. В рамках предварительного исследования были проанализированы современные подходы к решению этих задач. Были проведены эксперименты с реализацией и оценкой классических алгоритмов машинного обучения и нейронных сетей. Все реализованные нейронные модели не только превзошли алгоритмы неглубокого обучения по f-мере и accuracy, но и достигли, а в одном случае превысили state-of-the-art значения f-меры по каждой из задач. Итогом работы стало создание и размещение в открытом доступе библиотеки для анализа и фильтрации пользовательских текстов.

Текст работы (работа добавлена 31 мая 2021 г.)

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ