Учень Покровської школи розробив словник для вивчення жестової мови. Роботу він презентував на конкурсі інноваційних проєктів Малої академії наук і здобув золоту відзнаку. Винахід допомагає швидко опанувати жестову мову та порозумітися з людьми, що мають порушення слуху. За словами юнака, на розробку його надихнув рідний брат, який користується слуховим апаратом.
Як працює винахід та у який спосіб Микита планує його вдосконалити — юнак розповів Суспільне Донбас.
Учень Покровської школи №9, десятикласник Микита Теличко родом з Донецька. Після окупації міста його родина переїхала до Вугледара. Нині вони — у Великій Британії. Юнак вчиться не лише за місцевою програмою освіти, а й продовжує опановувати — українську.
"У нас складніше. Мені більш цікаво в українській школі. Що подобається у Великій Британії — ти вибираєш предмет, який будеш вчити, тобто не вчиш все підряд. Тут я в 12 класі, бо вони до школи йдуть раніше — так я вчуся з однолітками", — розповідає школяр.
Програма для розпізнавання та вивчення жестової мови
Інтерактивний словник з використанням комп'ютерного зору і відкритих баз — цей проєкт Микита створив до конкурсу Малої академії наук України.
Торік у фінальному етапі Всеукраїнського конкурсу молодіжних науково-технічних проєктів "InventorUA" він виборов перше місце в номінації "Стійкий життєвий простір".
Микита розповідає: ще у 7-8 років почав захоплюватися робототехнікою, айті-технологіями. Зробити корисний девайс для вивчення жестової мови його надихнув молодший брат, який має порушення слуху. Почав свій проєкт ще торік у вересні, нині працює над його вдосконаленням.
"Мій молодший брат Макар, якому 12 років, має особливості — він не чує дуже високих частот і тому використовує слухові апарати. Я подумав: як можна допомогти таким людям, як Макар. Проаналізував і зрозумів, що дуже складно вивчати жестові мови", — розказує Микита.
Як пояснив винахідник, коли він заглибився в тему, з'ясував, що жестових мов багато. Він використав для власної розробки американську. Аргументував це тим, що вона найбільш поширена. Саме її тестував і брат Макар.
"Захотілося вивчити жестову мову, наприклад, чи треба — які є зараз рішення. Ти просто заходиш на сайт, пишеш слово, знаходиш відео — як це слово показати. І ти, намагаєшся його відтворити, але ніякого зворотного зв'язку не отримуєш. Тобто ти просто намагаєшся повторити, але не розумієш, чи правильно показуєш. Мій проєкт допомагає саме перевірити, чи зможуть тебе зрозуміти, чи правильно ти показуєш. А ще її так швидше вивчити, бо коли ти сам показуєш, то краще запам'ятовуєш", — пояснює Микита Теличко.
"Робота з обдарованим дітьми завжди дивовижна"
Ключовими компонентами рішення в його проєкті є використання Python та MediaPipe для розпізнавання жестів, інтеграція бази даних WLASL та розробка інтуїтивного користувацького інтерфейсу. Прототип словника учня має систему розпізнавання жестів через вебкамеру, функцію порівняння з еталонними зразками та візуальне відображення схожості виконаного жесту з еталонним, розповідає учителька інформатики Покровської школи №9 Дар'я Литвин.
Вона спільно зі старшим викладачем кафедри автоматики і телекомунікацій Донецького національного технічного університету Глібом Ступаком були науковими керівниками Микити Теличка в цьому проєкті.
"Микита зробив це таким чином, щоб за допомогою штучного інтелекту розпізнавати рухи — камера зчитує рухи, співставляє з оригінальним зображенням та виводить на екран кількість відсотків співпадіння. 100% — це ідеальний збіг, 90-95% — вже молодець. Якщо ж показує 20-30% — треба повторювати, щоб підвищити свій рівень", — розповіла Дар'я Литвин.
Вона зазначає, що, з Микитою працює перший рік. Коли школяр озвучив тему, одразу підтримала його ідею.
"Робота з обдарованим дітьми завжди дивовижна, захоплива і складна водночас. Тобто ти не можеш наперед знати, що дитина вигадає. Всі проєкти, які були представлені на всеукраїнському рівні, є абсолютно авторськими — дитячими розробками. Саме тому вони такі унікальні й круті. У Микити вже були невеличкі напрацювання, тобто він вже давно замислився над цією темою — ми вислухали його і підтримали", — ділиться педагогиня.
"Математичну модель, яка вимірює відстань між фалангами пальців і не залежить від відстані до екрана — розробляв він сам".
Як винахідник планує удосконалити свій стартап
Винахід юнака протестували в Асоціації глухих в одному з міст Великої Британії. За їхніми відгуками, каже Микита, він замислився над тим, щоб у свою розробку додати більше мов.
"Сказали проєкт цікавий. Хочу додати більше мов, зокрема британську. Американська і британська жестові мови сильно відрізняються, тобто прям кардинально", — зазначає Микита.
За словами Дар'ї Литвин, Микиту Теличка запросили в національну збірну представляти Україну на міжнародних конкурсах.
"Це вже стартап, там є, що доробляти, але великий обсяг роботи зроблений і він вже запланував, що вдосконалюватиме. Тільки-но з'явиться якась міжнародна виставка або конкурс і Микитин проєкт підпадатиме під цю категорію — хлопець буде брати участь. Він наразі готує всю специфікацію, технічну документацію англійською мовою, він дуже добре володіє нею", — розповіла педагогиня.
"Треба удосконалити алгоритм перевірки жестів. Потім ще повністю переробити інтерфейс. Наразі він доступний лише в одному екземплярі — у мене на комп'ютері. Я хочу зробити так, щоб отримати доступ міг будь-хто в інтернеті, просто як зайти на вебсайт", — додав Микита.
Своє майбутнє юнак хоче пов'язати з технологіями та з вивченням штучного інтелекту.
Читайте всі новини Донбасу в Telegram, WhatsApp, Facebook, YouTube та Instagram
