• A
  • A
  • A
  • АБB
  • АБB
  • АБB
  • А
  • А
  • А
  • А
  • А
Обычная версия сайта
Магистратура 2026/2027

Речевые технологии

ID 1231853

Когда читается: 1-й курс, 3, 4 модуль
Охват аудитории: для своего кампуса
Язык: русский
Кредиты: 6
Контактные часы: 80

Программа дисциплины

Аннотация

Курс будет посвящен современным речевым технологиям, их устройству и применению. В рамках курса вы научитесь работать с сырыми речевыми данными, изменять, распознавать, а также генерировать голос.
Цель освоения дисциплины

Цель освоения дисциплины

  • сформировать у студентов понимание устройства современных систем обработки, распознавания и синтеза речи и практические навыки работы с сырыми речевыми данными, необходимые для разработки и внедрения речевых технологий в продукты, в том числе в умные устройства.
Планируемые результаты обучения

Планируемые результаты обучения

  • загружает, анализирует и визуализирует речевые сигналы, вычисляет спектрограммы и мел-кепстральные признаки;
  • реализует обнаружение речевой активности и распознавание ключевых слов для устройств с ограниченными ресурсами;
  • применяет методы шумоподавления, улучшения речи и аугментации речевых данных;
  • обучает и дообучает модели автоматического распознавания речи и оценивает их качество по метрике WER;
  • строит систему синтеза речи из акустической модели и вокодера и оценивает качество синтеза;
  • применяет модели преобразования и клонирования голоса и объясняет связанные с ними риски;
  • выбирает архитектуру речевого решения с учётом задержки, потоковой обработки и вычислительных ограничений продукта.
Содержание учебной дисциплины

Содержание учебной дисциплины

  • Цифровой звук и речевой сигнал
  • Признаки речи и классические методы
  • Изменение речевого сигнала
  • Автоматическое распознавание речи
  • Синтез речи
  • Генерация и преобразование голоса
  • Речевые технологии в продуктах
Элементы контроля

Элементы контроля

  • неблокирующий Домашнее задание 1
    Практическое задание на обработку и изменение сырых речевых данных: вычисление признаков, обнаружение речи, шумоподавление. Планируемые результаты: Студент обрабатывает сырые речевые данные и изменяет речевой сигнал.
  • неблокирующий Домашнее задание 2
    Практическое задание на автоматическое распознавание речи. Планируемые результаты: Студент обучает модель распознавания речи и оценивает её качество.
  • неблокирующий Домашнее задание 3
    Практическое задание на синтез и генерацию голоса. Планируемые результаты: Студент строит систему синтеза речи.
  • неблокирующий Экзамен
    Устный экзамен по темам курса. Планируемые результаты: Студент объясняет устройство систем распознавания и синтеза речи и выбирает решение под продукт.
Промежуточная аттестация

Промежуточная аттестация

  • 2026/2027 4th module
    0.25 * Домашнее задание 2 + 0.2 * Домашнее задание 1 + 0.25 * Домашнее задание 3 + 0.3 * Экзамен
Список литературы

Список литературы

Рекомендуемая основная литература

  • Проектирование цифрового устройства обработки аудиосигнала : учебно-методическое пособие - Недашковский В. М., Сакулин С. А. - Москва: МГТУ им. Н.Э. Баумана - 978-5-7038-5395-5 - 2020 - русский - https://ibooks.ru/product/337644 - iBOOKS - 337644
  • Цифровая обработка речевых сигналов, Рабинер, Л. Р., 1981

Рекомендуемая дополнительная литература

  • Speech and language processing : an introduction to natural language processing, computational linguistics, and speech recognition, Jurafsky, D., 2009

Авторы

  • Фисенко Анна Сергеевна
  • Яковлева Илона Александровна