• A
  • A
  • A
  • АБB
  • АБB
  • АБB
  • А
  • А
  • А
  • А
  • А
Обычная версия сайта

Глубокое обучение с подкреплением в игре "Три в ряд"

ФИО студента: Камальдинов Ильдар Рафаэлевич

Руководитель: Макаров Илья Андреевич

Кампус/факультет: Факультет компьютерных наук

Программа: Финансовые технологии и анализ данных (Магистратура)

Оценка: 10

Год защиты: 2019

Количество алгоритмов в области глубокого обучения с подкреплением непрерывно растёт, однако количество окружений в которых они тестируются весьма ограничено, поэтому у исследователей не всегда есть возможность разносторонне оценить результативность своих алгоритмов. Эта работа ставит своей целью создание нового окружения, которое можно расширять с помощью новых уровней. В работе представлено окружение, которое воспроизводит популярный жанр мобильных игр "Три в ряд", также описаны ключевые концепции обучения с подкреплением в контексте данной игры. Одним из важнейших элементов окружения являются уровни, именно в них заложена расширяемость и вариабельность окружения. Помимо важности уровней для окружения они имеют большое значение для реальных игровых проектов так как сильно влияют на их результативность, а в крупнейших игровых студиях существуют так называемые "отделы наигрывания", которые пытаются оценить сложность уровня до его официального выпуска. Помимо самого окружения описаны различные сценарии тестирования агентов, в качестве базовых метрик приведены результаты для DQN, PPO, A3C и случайного агента.

Текст работы (работа добавлена 7 июня 2019 г.)

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ