• A
  • A
  • A
  • АБB
  • АБB
  • АБB
  • А
  • А
  • А
  • А
  • А
Обычная версия сайта

Разработка методов и алгоритмов нейросимвольного представления сцен в мультимодальных задачахMethods and algorithms of neuro-symbolic scene representation in multimodal tasks

Соискатель:
Ковалёв Алексей Константинович
Руководитель:
Панов Александр Игоревич (др. работы под рук-вом)
Члены комитета:
Кузнецов Сергей Олегович (Национальный исследовательский университет «Высшая школа экономики», доктор физико-математических наук, председатель комитета), Алахакун Дамминда (Университет Ла Троба (Австралия), PhD, член комитета), Борисов Вадим Владимирович (Национальный исследовательский университет «МЭИ» (Смоленский филиал), доктор технических наук, член комитета), Потапов Алексей Сергеевич (ООО «Сигнулярити Лаб», доктор технических наук, член комитета), Самсонович Алексей Владимирович (Национальный исследовательский ядерный университет «МИФИ», PhD, член комитета)
Диссертация принята к предварительному рассмотрению:
7/8/2022
Диссертация принята к защите:
7/22/2022 (Протокол №13)
Дисс. совет:
Совет по компьютерным наукам
Дата защиты:
9/28/2022
Диссертация посвящена разработке методов и алгоритмов нейросимвольного представления сцен в мультимодальных задачах. Для построения такого представления используется векторная семиотическая модель, которая представляет собой объединение векторной символьной архитектуры и семиотического подхода. Нейросимвольное представление позволяет кодировать сцену на объектном уровне в вектор высокой размерности, сохраняя при этом информацию о свойствах отдельных объектов. В дальнейшем эта информация используется для решения мультимодальных задач. Исследования, проведенный в рамках данной диссертационной работы, сконцентрированы в основном на задачах, сочетающих модальности текста и изображения, таких как ответы на вопросы по изображению и диалог по изображению. Кроме того, в диссертации приводятся результаты использования предложенного нейросимвольного представления сцены в задаче распознавания места.
Диссертация [*.pdf, 3.18 Мб] (дата размещения 7/11/2022)
Резюме [*.pdf, 1.79 Мб] (дата размещения 7/11/2022)
Summary [*.pdf, 1.80 Мб] (дата размещения 7/11/2022)

Публикации, в которых излагаются основные результаты диссертации



Отзывы
Отзыв научного руководителя
Сведения о результатах защиты:
Комитет по диссертации рекомендовал присудить ученую степень кандидата наук (протокол № 2 от 28.09.2022). Решением диссертационного совета (протокол № 18 от 12.10.2022) присуждена ученая степень кандидата компьютерных наук.