Ученицы Назарбаев Интеллектуальной школы Кызылорды разработали веб-платформу QOLDAU AI, которая с помощью искусственного интеллекта распознает жесты и преобразует их в текст и речь в режиме реального времени. Система предназначена для облегчения общения людей с нарушениями слуха с окружающими. Авторами проекта стали школьницы Айшабиби Ерланкызы и Гайнижамал Бериккызы. Их разработка ориентирована на распознавание жестов казахского жестового языка.
Как работает QOLDAU AI
Для использования платформы достаточно обычной веб-камеры и подключения к интернету. Устанавливать дополнительные программы или приобретать специальное оборудование не требуется.
Камера фиксирует движения пользователя, после чего система на основе искусственного интеллекта распознает жесты и преобразует их в текстовый и голосовой форматы.
Таким образом, человек, использующий жестовый язык, может передавать информацию собеседнику, который им не владеет.
Платформу протестировали в школе для детей с нарушениями слуха
Первую апробацию QOLDAU AI разработчицы провели в специализированной школе-интернате № 6 для детей с нарушениями слуха в Кызылорде.
Воспитанники учреждения опробовали платформу, а педагоги оценили ее возможности и предложили направления для дальнейшего развития.
В частности, специалисты рекомендовали расширить базу распознаваемых жестов и дополнить систему обучающими материалами. Также они отметили, что технология может быть полезна для развития навыков письменной речи.
— Благодарю девочек за создание полезной платформы, которая может стать хорошим помощником для специалистов и родителей. Некоторые элементы жестового языка еще требуют уточнения, однако их можно доработать. В дальнейшем хотелось бы увидеть больше обучающих материалов и видеоуроков, — отметила специалист по жестовому языку Зухра Калжанова.
Разработчики продолжат совершенствовать ИИ-систему
Работа над QOLDAU AI продолжается под руководством учителя физики Айнур Куракбаевой и заместителя директора по научно-методической работе NIS Кызылорды Мадины Рашитовой.
Полученные во время тестирования отзывы планируется использовать для улучшения точности распознавания жестов и расширения возможностей платформы.
Проект QOLDAU AI демонстрирует возможности применения искусственного интеллекта в инклюзивном образовании. При дальнейшем развитии такая технология может стать дополнительным инструментом общения для людей с нарушениями слуха, их родственников и педагогов.
