Семинар наставника

2026/2027

Учебный год

RUS

Обучение ведется на русском языке

9

Кредиты

Кто читает:

Департамент больших данных и информационного поиска

Статус:

Курс обязательный

Когда читается:

1-й курс, 1-4 модуль

Преподаватели

Масленников Даниил Игоревич

Шевченко Владислав Дмитриевич

Программа дисциплины

Аннотация

Дисциплина направлена на знакомство студентов с современными практиками инженерии данных и их применением в профессиональной деятельности. В рамках дисциплины студенты познакомятся с основными подходами к организации инфраструктуры и процессов обработки данных, облачными и распределёнными технологиями, пакетной и потоковой обработкой, а также вопросами качества и надёжности данных. На примерах практических задач студенты рассмотрят взаимодействие различных компонентов систем обработки данных и применение современных инструментов инженерии данных. Отдельное внимание уделяется знакомству с рынком труда в области Data Engineering, требованиям к начинающим специалистам и подготовке к прохождению практики и первым этапам профессионального отбора.

Цель освоения дисциплины

• Сформировать представление о современных практиках и инструментах инженерии данных, принципах организации инфраструктуры и процессов обработки данных, а также подготовить студентов к применению полученных знаний в практических задачах и началу профессиональной деятельности в области Data Engineering.

Планируемые результаты обучения

• Студент объясняет назначение основных технологий и инструментов инженерии данных. Определяет их место в процессах работы с данными.
• Студент описывает основные компоненты инфраструктуры обработки данных и их взаимодействие. Различает основные подходы к организации и обработке данных.
• Студент анализирует практические задачи инженерии данных. Определяет подходящие подходы и инструменты для их решения.
• Студент анализирует требования рынка к начинающим специалистам. Представляет свой учебный и проектный опыт. Описывает основные этапы профессионального отбора и способы подготовки к ним.

Содержание учебной дисциплины

• Тема 1. Современные технологии инженерии данных (модуль 3-4)
• Тема 2. Инфраструктура и процессы обработки данных (модуль 3-4)
• Тема 3. Практика инженерии данных (модуль 3-4)
• Тема 4. Профессиональное развитие инженера данных (модуль 3-4)

Элементы контроля

• Задания с проверкой преподавателем
  В рамках дисциплины студенты выполняют практические задания, направленные на применение изученных подходов и инструментов инженерии данных. Задания могут включать работу с технологиями инженерии данных, анализ практических кейсов и обоснование выбранных решений. Результаты выполнения заданий загружаются в ЛМС ВШЭ и проверяются преподавателем.
• Итоговый тест
  Итоговый тест направлен на проверку освоения содержания дисциплины. Тест включает вопросы по основным темам курса и проводится в ЛМС ВШЭ.
• Портфолио
  В течение семестра студент формирует профессиональное портфолио, отражающее его учебный и проектный опыт. Портфолио включает: - резюме; - описание учебных и проектных работ; - описание решаемых задач, использованных технологий, роли студента и полученных результатов. Результат выполнения задания загружается в ЛМС ВШЭ.

Промежуточная аттестация

• 2026/2027 2nd module
  Итоговую формулу см. в промежуточной аттестации 4 модуля 2026/2027.
• 2026/2027 4th module
  Формула итоговой оценки: 0,5 × Задания с проверкой преподавателем + 0,3 × Итоговый тест + 0,2 × Портфолио. Оценка за дисциплину формируется как сумма оценок с учетом коэффициентов каждого элемента контроля. Все элементы контроля оцениваются по десятибалльной шкале.
• 2027/2028 2nd module
  Итоговую формулу см. в промежуточной аттестации 4 модуля 2026/2027.
• 2027/2028 3rd module
  Итоговую формулу см. в промежуточной аттестации 4 модуля 2026/2027.

Список литературы

Рекомендуемая основная литература

• Apache Airflow и конвейеры обработки данных - Харенслак Б., де Руйтер Дж. - Издательство "ДМК Пресс" - 978-5-97060-970-5 - 2022 - русский - https://e.lanbook.com/book/241133 - ЛАНЬ - 241133

Рекомендуемая дополнительная литература

• Docker на практике - Сейерс Э. Х. , Милл А. - Издательство "ДМК Пресс" - 978-5-97060-772-5 - 2020 - русский - https://e.lanbook.com/book/131719 - ЛАНЬ - 131719
• Kubernetes изнутри - Вьяс Дж., Лав К. - Издательство "ДМК Пресс" - 978-5-93700-153-5 - 2023 - русский - https://e.lanbook.com/book/314942 - ЛАНЬ - 314942