Студенты магистратуры побывали на мастер-классе по тематическому моделированию
Участники мастер-класса узнали, как качественно извлечь из огромного массива текстов проблемные темы, связанные с различными этносами.
В пятницу 17 марта студенты магистерской программы «Компьютерная лингвистика» приняли участие в мастер-классе по тематическому моделированию. На нём слушатели узнали как о простейших традиционных моделях (LSA/LDA), так и о более сложных современных решениях, основанных на регуляризации.
Также спикер Мурат Апишев рассказал аудитории об open-source библиотеке тематического моделирования больших текстовых коллекций BigARTM и её интерфейсах для языков программирования Python и C++ . На примере BigARTM были показаны разработки из реального проекта по извлечению тем, связанных с т.н. «этно-проблемами».
В качестве входных данных выступали записи в LiveJournal, а также словарь этнонимов и иных слов, указывающих на этническую принадлежность. С помощью BigARTM в текстах были выделены темы, связанные с различными этносами.
Автор мастер-класса Мурат Апишев — один из разработчиков библиотеки BigARTM, сотрудник Группы алгоритмов антиспама компании «Яндекс».