• A
  • A
  • A
  • АБB
  • АБB
  • АБB
  • А
  • А
  • А
  • А
  • А
Обычная версия сайта

Сравнение генеративных нейронных сетей как моделей движений глаз

ФИО студента: Жуликов Георгий Александрович

Руководитель: Макиннес Уильям Джозеф

Кампус/факультет: Факультет компьютерных наук

Программа: Математические методы оптимизации и стохастики (Магистратура)

Год защиты: 2018

В психологии и компьютерном зрении салиентность - это мера того, насколько каждая отдельная точка изображения притягивает внимание человека. Её можно измерить с помощью движений глаз, используя айтрекеры: сначала сохраняются фиксации взгляда человека на отдельных точках, а затем они собираются в одно изображение в оттенках серого и сглаживаются гауссовым ядром. Существует много моделей, генерирующих карты салиентности, принимая в качестве входных данных только изображение. На данный момент в сравнении Массачусетского технологического института участвуют 83 модели, от биологически правдоподобных до жертвующих правдоподобностью ради высокой точности предсказания. Задачу генерации карт салиентности можно сформулировать как задачу перевода изображений одного домена в другой, считая первым доменом изображения сцен окружающего мира, а вторым доменом - карты салиентности, соответствущие данным сценам. У этой задачи есть общие решения, и исследования в данном направлении активно ведутся. Модель "pix2pix" была предложена как решение этой общей проблемы, и в дальнейшем она использовалась как основа в решении похожих и производных задач, например, синтезирования фотографических изображений. В данной работе оценивается pix2pix как модель генерации карт салиентности и производится сравнение разных генеративных моделей, основанных на нейросетях, как решений данной задачи.

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ