Обучение с подкреплением в графическом трехмерном окружении

В период стремительного развития искусственного интеллекта требуются все больше людей, знакомых с машинным обучением, и в частности, с разделом обучения с подкреплением. Начать самостоятельное знакомство с этой областью может быть затруднительно без специально подготовленных ресурсов. Однако многие из существующих платформ для экспериментов в обучении с подкреплением разработаны для программистов и исследователей, хорошо знакомых с методами и алгоритмами машинного обучения. В этой работе мы описываем создание платформы для экспериментов в области обучения с подкреплением на базе приложения CoSpaces. Основная цель работы — разработать визуальную среду с удобным интерфейсом для проведения экспериментов как для новичков в этой области, так и для тех, кому требуется тестировать свои собственные алгоритмы. Платформа дает возможность применять различные обучающие стратегии, решить задачи произвольной сложности, визуализировать результаты и исследовать статистику обучения. Разработанный фреймворк позволяет легко создавать новые задачи, содержит реализации алгоритмов обучения с подкреплением и предоставляет возможность работы с пользовательскими алгоритмами. В следующих разделах будут описаны поставленные в процессе работы задачи и разобраны детали их решения.