• A
  • A
  • A
  • АБВ
  • АБВ
  • АБВ
  • А
  • А
  • А
  • А
  • А
Обычная версия сайта
ФИО студента
Название работы
Руководитель
Факультет
Программа
Оценка
Год защиты
Досов Санжар Музаффарович
Исследование параметрических функций активации в нейронных сетях
2019
Целями данной работы являются изучение разницы в практическом применении между параметрическими и непараметрическими функциями активации в нейронных сетях и определение влияния параметров в функциях активаций на точность и ошибку в искусственных нейронных сетях. Существует большое количество методов сравнения непараметрических функций активаций с параметрическими функциями активации. Для проведения сравнительного анализа разных типов функций активаций были использованы две идентичные модели сверточных нейронных сетей, но с разными функциями активации. Для того, чтобы получить более точные результаты после сравнительного анализа, в одной модели нейронной сети использовалась непараметрическая функция активации Rectified Linear Unit (ReLU), а в другой модели ее аналог с обучаемым параметром Parametric Rectified Linear Unit (PReLU). Опираясь на информацию, изученную в научных статьях, связанных с данной темой, можно сделать вывод, что функция PReLU улучшает модель, накладывая практически нулевую сложность вычислений и небольшой риск переобучения, которого можно избежать при помощи регуляризации. Обе модели в данной работе были обучены на наборе данных CIFAR-10, который был создан Канадским Институтом Передовых Исследований. Набор данных CIFAT-10 разделен на 10 различных классов, где в каждом из классов 6.000 картинок формой 32х32х3 [1]. Ожидаемые результаты сравнения – получить более высокую точность в модели нейронной сети с параметрической функцией активации.

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Расширенный поиск ВКР