Бакалавриат
2025/2026
Глубинное обучение 2
ID 974242
Лучший по критерию «Новизна полученных знаний»
Статус:
Курс обязательный (Компьютерные науки и анализ данных)
Где читается:
Факультет компьютерных наук
Когда читается:
4-й курс, 1, 2 модуль
Охват аудитории:
для своего кампуса
Язык:
русский
Кредиты:
5
Контактные часы:
56
Программа дисциплины
Аннотация
В последние годы методы глубинного обучения (нейросети) позволили достигнуть впечатляющих успехов в решении прикладных задач из таких областей как компьтерное зрение, обработка естественного языка, обработка аудио. В рамках данного курса мы рассмотрим основные нейросетевые модели, а также способы их применения и обучения. Студенты получат навыки использования этих технологий в стандартных задачах, а также разработки и модификации методов для новых задач.
Цель освоения дисциплины
- Знать основные принципы построения моделей на основе нейросетей.
- Знать стандартные алгоритмы обучения и регуляризации нейросетей.
- Уметь обучать нейросетевые модели на новых наборах данных.
- Уметь подбирать наиболее подходящий набор алгоритмов.
- Уметь распознавать задачи, которые потенциально можно решить при помощи методов глубинного обучения.
Планируемые результаты обучения
- владеть навыками работы с библиотекой pytorch и ее документацией
- владеть навыками реализации систем для обучения и использования нейросетей
- владеть навыками тестирования и отладки существующих систем
- знать виды задач, которые уместно решать при помощи методов глубинного обучения
- знать наиболее часто используемые стандартные архитектуры и области их применимости
Содержание учебной дисциплины
- Введение. Организация DL экспериментов
- Компьютерное зрение. Архитектуры
- Компьютерное зрение. Сегментация
- Компьютерное зрение. Детекция
- Компьютерное зрение. 3D, NeRF, implicit representations
- Трансформеры часть 1, Эффективные трансформеры, архитектурные модификации
- Трансформеры часть 2, Большые языковые модели, Prompting, Interpretability
- Генеративные модели часть 1
- Генеративные модели часть 2
- Графовые нейронные сети
- Нейронные сети на табличных данных
- Теории и эмпирическая наука про обучение нейронных сетей
- Lifelong Learning
Элементы контроля
- Домашнее задание 1
- Домашнее задание 2
- Домашнее задание 3
- Домашнее задание 4
- Домашнее задание 5
Список литературы
Рекомендуемая основная литература
- Глубокое обучение - Гудфеллоу Я., Бенджио И., Курвилль А. - Издательство "ДМК Пресс" - 978-5-97060-618-6 - 2018 - русский - https://e.lanbook.com/book/107901 - ЛАНЬ - 107901
Рекомендуемая дополнительная литература
- Глубокое обучение без математики. Т. 1: Основы - Гласснер Э. - Издательство "ДМК Пресс" - 978-5-97060-701-5 - 2019 - русский - https://e.lanbook.com/book/131696 - ЛАНЬ - 131696
- Глубокое обучение без математики. Том 2. Практика - Гласснер Э. - Издательство "ДМК Пресс" - 978-5-97060-767-1 - 2020 - русский - https://e.lanbook.com/book/131710 - ЛАНЬ - 131710