2026/2027



Автоматизированный сбор больших данных в экономико-социологических исследованиях
ID 1245224
Статус:
Маго-лего
Где читается:
Факультет компьютерных наук
Онлайн-часы:
50
Охват аудитории:
для всех кампусов НИУ ВШЭ
Преподаватели:
Морева Юлия Евгеньевна
Язык:
русский
Кредиты:
6
Контактные часы:
60
Программа дисциплины
Аннотация
Стремительный рост технологий привел к тому, что в данный момент исследователи имеют доступ к данными о самых разных аспектах жизни людей и о происходящих экономических и социальных процессах. Подобные данные отличаются большими объемами, разной степенью структурированности, многомерностью и специфическими формами хранения и доступа, и требуют от исследователя дополнительных навыков по сбору и обработке подобных данных. Курс направлен на знакомство с особенностями сбора и анализа больших данных в экономико-социологических исследованиях. Первая часть курса посвящена основам работы в среде R: элементы синтаксиса, объекты и структуры данных, манипуляции с данными. Вторая часть курса посвящена импорту и препроцессингу данных из разных источников - файловые базы данных разных форматов (в том числе *.sav), удаленные базы данных. Отдельное внимание уделено скрапингу данных веб-страниц, работе с открытыми API, в том числе с API социальных сетей (в частности, Vkontakte). В третьей части курса рассмотрены методы и принципы визуализации данных (статичные и интерактивные графики).
Цель освоения дисциплины
- Дать студентам представление об основных задачах и инструментах, стоящих перед аналитиками в современных бизнес-компаниях.
- Показать студентам возможные перспективы профессионального развития и заложить необходимые базовые навыки.
Планируемые результаты обучения
- Знать виды источников данных. Уметь импортировать xlsx, sav, csv-файлы.
- Знать основы синтаксиса R. Уметь делать базовые манипуляции с данными - семплинг, изменение строк и колонок, слияние таблиц, решейпинг, агрегации.
- Знать общие концепции организации сети Интернет. Понимать и писать xpath-запросы и собирать данные с web-страниц. Уметь писать запросы к API Vkontakte.
- Уметь визуализировать данные в основных типах графиков (линии, гистограммы, боксплоты). Знать правила корректных визуализаций.
Содержание учебной дисциплины
- Введение в большие данные - идеи, технологии, методы и области применения.
- Визуализация данных
- Методы сбора удаленных данных. Скрапинг.
- Виды источников данных
Список литературы
Рекомендуемая основная литература
- Визуализация данных с помощью ggplot2 - Мастицкий С.Э. - Издательство "ДМК Пресс" - 978-5-97060-470-0 - 2017 - русский - https://e.lanbook.com/book/107895 - ЛАНЬ - 107895
Рекомендуемая дополнительная литература
- Статистический анализ и визуализация данных с помощью R - Мастицкий С.Э., Шитиков В.К. - Издательство "ДМК Пресс" - 978-5-97060-301-7 - 2015 - русский - https://e.lanbook.com/book/73072 - ЛАНЬ - 73072