Создание отказоустойчивого проекта добровольных распределенных вычислений

Добровольные распределенные вычисления – это один из подходов выполнять ресурсоемкие задачи, не используя дорогостоящие компьютерные кластеры или суперкомпьютеры. Данные вычисления основаны на грид-системе - множестве слабосвязанных вычислительных устройств, соединенных между собой в единую систему для решения сложных вычислительных задач. Каждая задача может быть разделена на несколько независимых подзадач, распределяемых по узлам и решаемых независимо. Если вычислительные устройства предоставляются пользователями безвозмездно для решения конкретных задач, то такие системы называются добровольными. Одна из самых популярных платформ для организации добровольных распределенных вычислений является BOINC. Она была разработана более 20 лет назад в университете Беркли. Современные реалии, увеличивающееся количество пользователей и устройств приводят к ошибкам, зависаниям и отказам серверной части проектов BOINC. Поэтому необходимо улучшить платформу, сделать её отказоустойчивой и масштабируемой, а также способной выдерживать большие нагрузки. Данные цели можно достичь, используя методы горизонтального масштабирования, репликации базы данных, использования микросервисной архитектуры и балансировки нагрузки. В работе используется такое программное обеспечение, как балансировщик нагрузки Haproxy, средство развертывания и управления контейнерами Docker, веб-сервер Apache и средство сбора, хранения и анализа данных Elastic Stack.