Исследование и разработка методов распознавания образов для синхронного перевода с языка жестов

Целью данной работы является исследование существующих методов распознавания образов, их применение и адаптация для распознавания языка жестов глухонемых. В соответствии с данными Всемирной организации здравоохранения в мире 360 млн. слабослышащих и глухих людей. Несмотря на быстрое развитие коммуникационных технологий проблема коммуникации с внешним миром и социальной интеграции глухонемых людей по-прежнему актуальна. В связи с этим, создание продукта, позволяющего с использованием современных средств коммуникации осуществлять распознавание языка жестов и его перевод в письменную или разговорную речь является весьма актуальным. В ходе выполнении данной работы проведен анализ предметной области, рассмотрены понятия машинного зрения и распознавания образов, рассмотрены существующие разработки в области распознавания жестов глухонемых, основные требования и ограничения при решении поставленной задачи. В работе исследованы методы распознавания образов применительно к задаче распознавания языка жестов. Описаны основные этапы работы системы по распознаванию языка жестов, в том числе этапы предварительной обработки изображений, а также этапы обучения системы. Проведенные исследования позволили сделать вывод об эффективности использования контурного анализа в частности использования оператора Кэнни с предварительной сегментацией и удалением фона. Для анализа эффективности предложенного решения был создан прототип приложения и осуществлено тестирование. В рамках разработки прототипа были рассмотрены существующие на данный момент инструменты (методы и библиотеки), позволяющие реализовать поставленную задачу. Проведенная работа создает предпосылки для дальнейшей разработки приложения по распознаванию языка жестов глухонемых с использованием предложенных методов. Структура работы представлена введением, тремя главами, заключением, списком литературы. Работа содержит 1 таблицу, 17 рисунков, 42 источник литературы. Общее количество страниц 71.