AI-словник для жестової мови: школяр з Покровська створив унікальний освітній інструмент
Десятикласник Микита Теличко, учень Покровської школи №9, вразив журі конкурсу Малої академії наук своїм інноваційним проєктом — інтерактивним словником жестової мови.
Його розробка, що допомагає швидко та ефективно вивчати жести, отримала золоту відзнаку на науковому конкурсі «InventorUA» у номінації «Стійкий життєвий простір».
Суть проєкту — розпізнавання жестів за допомогою штучного інтелекту. Система аналізує рухи користувача через вебкамеру, порівнює їх з еталонними жестами та оцінює точність виконання. Якщо збіг 100%, то жести виконані ідеально, а якщо 20-30% — система підкаже, що варто покращити.
Ідея інтерактивного словника народилася з особистого досвіду. Молодший брат Микити, 12-річний Макар, має порушення слуху та користується слуховими апаратами. Спостерігаючи за тим, як складно йому вивчати жестову мову, Микита вирішив створити щось помічне.
Він дослідив проблему і зрозумів, що більшість наявних рішень не дають миттєвого зворотного зв’язку — тобто ви можете подивитися, як показати слово, але не знаєте, чи робите це правильно.
Я хотів розробити систему, яка б перевіряла жести в реальному часі. Так навчання стає швидшим та ефективнішим.
Для втілення свого проєкту Микита використав Python, MediaPipe та інтегрував відкриту базу WLASL для зручності інтерфейсу.
Його наставниками стали викладачка інформатики Дар’я Литвин та науковий керівник Гліб Ступак. Разом вони допомогли Микиті вдосконалити алгоритм і довести ідею до реального прототипу.
До слова, словник жестів уже пройшов тестування в Асоціації глухих у Великій Британії. Відгуки користувачів надихнули Микиту розширити проєкт — він планує додати підтримку нових мов, зокрема англійської жестової мови.
Наразі він доступний лише в одному екземплярі — у мене на комп'ютері. Я хочу зробити так, щоб отримати доступ міг будь-хто в інтернеті, просто як зайти на вебсайт.
Наразі молодий дослідник працює над удосконаленням свого AI-словника та підготовкою технічної документації англійською мовою.
Він прагне представити Україну на міжнародних конкурсах, щоб зробити свій винахід доступним для ширшої аудиторії та допомогти ще більшій кількості людей освоювати жестову мову.
Фото: pokrowsk24.news
