• A
  • A
  • A
  • АБВ
  • АБВ
  • АБВ
  • А
  • А
  • А
  • А
  • А
Обычная версия сайта
ФИО студента
Название работы
Руководитель
Факультет
Программа
Оценка
Год защиты
Садов Михаил Александрович
Исследование методов классификации текстов для несбалансированных данных
10
2016
В ходе данного исследования были проанализированы методы классификации для несбалансированных данных, а также определён и реализован наиболее эффективный из них с учётом текстовой специфики русского языка. Было установлено, что при работе с несбалансированными данными эффективнее работать с изменением порога решений и весами ошибок разного рода, чем пытаться изменить распределение обучающего набора данных случайным образом или синтетически. В связи с этим наиболее эффективным подходом был признан метод с распределением весов.

Для эмпирической проверки теоретических выводов была выбрана задача бинарной классификации высказываний на русском языке в зависимости от того, корректны ли они или содержат какую-либо оскорбительную информацию. В результате анализа результатов было выяснено, что использование методов с распределением весов не помогло улучшить результат классификации текстов по сравнению с обучением на умеренно несбалансированных данных для данной задачи. Однако после проведения подобного испытания на сильно несбалансированных данных, было установлено, что использование взвешенных моделей действительно приводит к улучшению результата классификации по сравнению с обучением на несбалансированных данных.
Текст работы (работа добавлена 23 мая 2016г.)

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Расширенный поиск ВКР