Интеграция глубокого обучения в обучение дактильной русской азбуке: Разработка приложения для детей с нарушениями слуха и речи

В данном дипломе исследованы и разработаны методы эффективного обучения дактилологии и жестовому языку для русского языка. Проведен анализ существующих решений, выявлены их недостатки и предложены улучшения с использованием современных алгоритмов машинного и глубокого обучения. Сбор данных осуществлялся с помощью разработанного Telegram-бота, что обеспечило высокую вариативность и качество данных. Реализованы и протестированы различные алгоритмы, такие как 2D-CNN, 1D-CNN и традиционные методы машинного обучения, что позволило создать многофункциональное интерактивное приложение на базе Tkinter для обучения дактилологии. Приложение включает модули обучения, распознавания, тестирования и экзаменов, способствуя эффективному и увлекательному обучению. Проведенные эксперименты подтвердили высокую эффективность предложенных методов и алгоритмов. Работа закладывает основы для дальнейших исследований и разработок в области распознавания жестового языка и создания образовательных инструментов для глухих и слабослышащих людей.