Магистратура
2026/2027





Речевые технологии
ID 1231853
Статус:
Курс по выбору (Умные устройства: аппаратная разработка)
Где читается:
Факультет компьютерных наук
Когда читается:
1-й курс, 3, 4 модуль
Охват аудитории:
для своего кампуса
Язык:
русский
Кредиты:
6
Контактные часы:
80
Программа дисциплины
Аннотация
Курс будет посвящен современным речевым технологиям, их устройству и применению. В рамках курса вы научитесь работать с сырыми речевыми данными, изменять, распознавать, а также генерировать голос.
Цель освоения дисциплины
- сформировать у студентов понимание устройства современных систем обработки, распознавания и синтеза речи и практические навыки работы с сырыми речевыми данными, необходимые для разработки и внедрения речевых технологий в продукты, в том числе в умные устройства.
Планируемые результаты обучения
- загружает, анализирует и визуализирует речевые сигналы, вычисляет спектрограммы и мел-кепстральные признаки;
- реализует обнаружение речевой активности и распознавание ключевых слов для устройств с ограниченными ресурсами;
- применяет методы шумоподавления, улучшения речи и аугментации речевых данных;
- обучает и дообучает модели автоматического распознавания речи и оценивает их качество по метрике WER;
- строит систему синтеза речи из акустической модели и вокодера и оценивает качество синтеза;
- применяет модели преобразования и клонирования голоса и объясняет связанные с ними риски;
- выбирает архитектуру речевого решения с учётом задержки, потоковой обработки и вычислительных ограничений продукта.
Содержание учебной дисциплины
- Цифровой звук и речевой сигнал
- Признаки речи и классические методы
- Изменение речевого сигнала
- Автоматическое распознавание речи
- Синтез речи
- Генерация и преобразование голоса
- Речевые технологии в продуктах
Элементы контроля
- Домашнее задание 1Практическое задание на обработку и изменение сырых речевых данных: вычисление признаков, обнаружение речи, шумоподавление. Планируемые результаты: Студент обрабатывает сырые речевые данные и изменяет речевой сигнал.
- Домашнее задание 2Практическое задание на автоматическое распознавание речи. Планируемые результаты: Студент обучает модель распознавания речи и оценивает её качество.
- Домашнее задание 3Практическое задание на синтез и генерацию голоса. Планируемые результаты: Студент строит систему синтеза речи.
- ЭкзаменУстный экзамен по темам курса. Планируемые результаты: Студент объясняет устройство систем распознавания и синтеза речи и выбирает решение под продукт.
Промежуточная аттестация
- 2026/2027 4th module0.25 * Домашнее задание 2 + 0.2 * Домашнее задание 1 + 0.25 * Домашнее задание 3 + 0.3 * Экзамен
Список литературы
Рекомендуемая основная литература
- Проектирование цифрового устройства обработки аудиосигнала : учебно-методическое пособие - Недашковский В. М., Сакулин С. А. - Москва: МГТУ им. Н.Э. Баумана - 978-5-7038-5395-5 - 2020 - русский - https://ibooks.ru/product/337644 - iBOOKS - 337644
- Цифровая обработка речевых сигналов, Рабинер, Л. Р., 1981
Рекомендуемая дополнительная литература
- Speech and language processing : an introduction to natural language processing, computational linguistics, and speech recognition, Jurafsky, D., 2009