Эмпирическое исследование архитектуры Трансформер в задачах символьной математики

ФИО студента: Гельван Кирилл Павлович

Руководитель: Чиркова Надежда Александровна

Кампус/факультет: Факультет компьютерных наук

Программа: Прикладная математика и информатика (Бакалавриат)

Год защиты: 2021

Архитектура трансформер, разработанная для обработки естественного языка, широко используется со всеми видами последовательностей, включая математические выражения. Получив последовательность токенов, модель способна решать сложные математические задачи, такие как нахождение производной или интеграла. В данной работе мы исследуем, улучшает ли качество трансформера добавление в него структуры данных на задачах интегрирования и решения обыкновенных дифференциальных уравнений. Мы изучаем недавно разработанные модификации модели основанные на деревьях и сравниваем их. Мы обнаружили, что использование этих изменений не дает преимуществ по сравнению с базовой моделью. Мы предполагаем, что это связано со слишком большим объемом данных.

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ