Розробники застосунку зі штучним інтелектом ConnectAbility, який навчає людей із порушенням слуху мові жестів, планують додати підтримку англійської мови та озвучення перекладу, пише Успіх in UA.
Експерти ліцею Київського політехнічного інституту ім. Ігоря Сікорського, які створили застосунок, розповіли, як програма зможе перекладати мову жестів у звуковий формат. Це буде можливо, зокрема, через камеру смартфона, повідомляє fin.informator.ua.
За словами ментора команди Івана Комарова, в ході дослідження експерти виявили, що в нашій державі є чимало людей з порушенням слуху. У результаті фахівці вирішили розробити мобільний застосунок, який зміг би перекладати мову жестів у звуковий формат за допомогою камери смартфону. Для цього використовується штучний інтелект із розділом вивчення мови жестів у ньому.
“За допомогою mediapipe виявляються ключові точки на руках людини. Координати цих точок зберігаються у вигляді векторів. На основі цих точок виконується аналіз за допомогою нашої моделі ШІ. Нейронна мережа написана на Tensorflow та використовує алгоритм класифікації”, – пояснив Іван Комаров.
Експерти хочуть продовжити розвиток цього проєкту. Вони планують збільшити підвищення точності розпізнавання жестів та додати озвучку під час перекладу. Крім того, експерти хочуть додати можливість вивчення не тільки через українську мову, але й через англійську та інші мови світу.
Читайте також: Штучний інтелект оживив твори Тараса Шевченка
На думку ментора команди, цей проєкт зможе “допомогти людям подолати бар’єри в спілкуванні”. Комаров зауважив, що на цей проєкт, на його думку, звернуть увагу соціальні служби та відповідні державні органи, які допоможуть втілити розробку.
Залишити відповідь