Десятикласник з Покровська створив винахід, який допомагає опанувати жестову мову: що відомо про розробку

Десятикласник Микита Теличко з Покровської школи №9, який нині проживає у Британії, розробив словник з елементами ШІ для вивчення жестової мови. Така розробка допомагає опанувати жестову мову та порозумітися з людьми, що мають порушення слуху.

Відео дня

Цю роботу школяр представив на конкурсі інноваційних проєктів Малої академії наук і отримав за неї золоту відзнаку. "Суспільному" Микита розповів, що на розробку його надихнув брат, який користується слуховим апаратом.

Микита – переселенець з Донецька, після окупації проживав з родиною у Вугледарі, а поті переїхав до Британії.

Проєкт з опанування жестової мови він створив ще у вересні 2024 року. Це – інтерактивний словник з використанням комп'ютерного зору і відкритих баз. Зробити корисний девайс для вивчення жестової мови його надихнув 12-річний брат Макар, який має порушення слуху.

Школяр використав для своєї розробки саме американську жестову мову, бо вона є найпоширенішою. За його словами, можна зайти на певний сайт, де за допомогою відео можна побачити, як показувати певне слово чи речення.

"Тобто ти просто намагаєшся повторити, але не розумієш, чи правильно показуєш. Мій проєкт допомагає саме перевірити, чи зможуть тебе зрозуміти, чи правильно ти показуєш. А ще її так швидше вивчити, бо коли ти сам показуєш, то краще запам'ятовуєш", – пояснив Теличко.

Як розповіла учителька інформатики Покровської школи №9 Дар'я Литвин, основними компонентами у проєкті є використання Python та MediaPipe для розпізнавання жестів, інтеграція бази даних WLASL та розробка інтуїтивного користувацького інтерфейсу. Прототип словника має систему розпізнавання жестів через вебкамеру, функцію порівняння з еталонними зразками та візуальне відображення схожості виконаного жесту з еталонним.

Школяр зробив це таким чином, щоб за допомогою штучного інтелекту розпізнавати рухи — камера зчитує рухи, співставляє з оригінальним зображенням та виводить на екран кількість відсотків співпадіння. 100% – це ідеальний збіг, 90-95% – вже молодець. Якщо ж показує 20-30% – треба повторювати, щоб підвищити свій рівень", – розповіла педагогиня.

Винахід Микити протестували в Асоціації глухих в одному з міст Великої Британії. Тепер він планує вдосконалювати свій винахід і додати у розробку більше мов.

Раніше OBOZ.UA розповідав, що 8-річний школяр зі Львівщини увійшов до Книги рекордів України за унікальні на свій вік знання.

Тільки перевірена інформація в нас у Telegram-каналі OBOZ.UA та Viber. Не ведіться на фейки!