Система речевой реабилитации — это приложение, которое умеет распознавать нарушения звукопроизношения.
Пациент, занимаясь самостоятельно с этим приложением, будет всегда знать наверняка, все ли он делает правильно.
Вячеслав Утёмов
Руководитель проекта
Приложение может быть запущено с любого устройства, оборудованного камерой и микрофоном, будь то телефон, планшет, стационарный компьютер или ноутбук
Программа позволяет провести диагностику и определить какие группы звуков нарушены.
На основе полученных данных, либо автоматически на основе алгоритмов, заложенных в программу, либо логопедом составляется программа коррекционного воздействия.
Речевая реабилитация без «Логопеда будущего»
Для устранения дефектов речи люди обращаются к специалистам — логопедам. В ходе очных занятий логопеды демонстрируют своим пациентам правильные образцы звуков и положений языка и губ.
Когда пациент пытается повторить звук и положение органов речевого аппарата по образцам, специалист контролирует и оценивает правильность действий.
Светлана Башмакова
Научный руководитель проекта
На самостоятельных занятиях пациент тренируется в выполнении отдельных действий языком и губами. Путём многократных выполнений, старается довести их до идеальной правильности. Контролирует свои действия перед зеркалом и через тактильные и кинестетические ощущения.
Но большая часть работы по восстановлению речи выполняется пациентами самостоятельно. Проблема заключается в том, что люди с дефектами речи не всегда сами могут объективно оценить правильность выполняемых ими действий.
Речевая реабилитация с «Логопедом будущего»
Приложение способно выполнять сразу несколько функций логопеда. Пациент в телефоне может посмотреть образец выполнения действий языка и губ определённого звука.
Система фиксирует с помощью фотографии выполнение пациентом упражнения и оценивает правильность. Может осуществляться и демонстрироваться сравнение правильного и выполненного действия.
Определяется количество и качество повторных действий. При необходимости проводится дополнительное обучение правильной артикуляции.
Светлана Башмакова
Научный руководитель проекта
Занятия с системой искусственного интеллекта увеличивают интенсивность реабилитационных занятий
На таких занятиях пациент застрахован от ошибок и отрабатывает только правильные позы и действия.
Эффективность
В основе «Логопеда будущего»
15
Нейросетей, обученных на нормативных и ненормативных образцах
3279
Нормативных вариантов образцов артикуляционных поз
3197
Ненормативных вариантов образцов артикуляционных поз
Именно с этими образцами приложение сравнивает фото поз органов речевого аппарата пациента и оценивает их правильность.
Наша система различает
15
Нормативных вариантов артикуляции звуков русского язык
9
Артикуляторных поз положения губ
6
Артикуляторных поз положения язык
Станислав Лялин
Технический руководитель проекта
Каждая нейронная сеть отвечает за одну из 15 поз губ и языка и обучена на тысячах фотографий. Именно это позволяет системе «Логопеда будущего» без ошибок диагностировать нарушения речи
На тестировании программа показала 90% чувствительности, то есть система способна распознавать ошибки в произношении в 90% случаев
В 5 раз
Сократится время восстановления речи больных с неврологической и челюстно-лицевой патологией при использовании «Логопеда будущего»
На 20%
Повысится качество восстановительного обучения по сравнению только с очными занятиями с логопедом
Вячеслав Утёмов
Руководитель проекта
Приложение способно самостоятельно изменять коррекционную программу, анализируя результаты конкретного пациента, до полного устранения дефектов речи
Проект выполнен при поддержке Фонда содействия инновациям в рамках договора (соглашения) о предоставлении гранта на проведение научно-исследовательских и опытно-конструкторских работ