Бездротова і гнучка: Нова рукавичка переводить жести в мову в реальному часі

Бездротова і гнучка: Нова рукавичка переводить жести в мову в реальному часі
Вчені розробили легку і гнучку рукавичку, яка працює як перекладач з мови жестів на звичайну мову. Система може зробити набагато більш комфортним життя людей, які з тих чи інших причин не можуть говорити.

Досягнення описано в науковій статті, опублікованій в журналі Nature Electronics.

У новому винаході інженерів гнучкі датчики, вбудовані в тонкі і зручні рукавички, відстежують рух кожного з десяти пальців. Також в систему "перекладу" входять дві наклейки на обличчя: одна розташовується між бровами і одна - збоку від рота. Справа в тому, що міміка є частиною американської мови жестів (амслена).

Дані про рухи "мовця" відправляються на чіпи розміром близько 2,5 сантиметра (по одному на кожній рукавичці). Той передає їх по бездротовому зв'язку на звичайний смартфон, на якому встановлено спеціальний додаток зі штучним інтелектом. В результаті Жестова мова перетворюється в звукову в режимі реального часу.

У випробуваннях брали участь чотири глухих добровольця. Вони використовували 660 жестів, що означають всі букви латинського алфавіту, цифри від 0 до 9, а також цілі слова і фрази. Пристрій перекладав цю промову на звичайну американську англійську мову. Як з'ясувалося, програма правильно інтерпретувала жести в 99% випадків, витрачаючи на розшифровку кожного з них менше секунди.

Інженери вважають, що 660 знаків - це тільки початок. Комерційні моделі пристрою будуть мати куди більш солідний "словниковий запас".

Розробники також & nbsp; підкреслюють, що нова система дуже легка і зручна в носінні. Цим вона відрізняється від більш громіздких аналогів.

Крім того, наголошується, що матеріали, з яких виготовлені рукавички і наклейки, довговічні і дешеві у виготовленні.

Новинка може серйозно полегшити життя людям, які з тих чи інших причин не можуть користуватися звуковою мовою. Адже співрозмовнику не потрібно буде знати мову жестів, щоб зрозуміти, що йому хоче сказати носій диво-рукавичок.

Правда, в світі досить багато людей, які не можуть не тільки говорити, а й чути. Їм подібна розробка допоможе лише частково, адже залишається питання, як їм самим зрозуміти співрозмовника, який не володіє жестовою мовою. Втім, значна частина глухих і слабочуючих людей вміє читати по губах. Ця навичка в поєднанні з новими рукавичками може забезпечити повноцінний діалог з людиною, яка не вміє спілкуватися жестами.

З іншого боку, пристрій можна використовувати і для навчання нормально чує людини мови жестів. Система буде в реальному часі повідомляти учня, чи говорить він на цій мові саме те, що хоче сказати. Це дозволить всім бажаючим ефективно тренуватися при мінімальній участі людини-інструктора. А чим більше в світі буде людей, що володіють мовою жестів, тим комфортніше він буде для тих з нас, хто може спілкуватися тільки на цій мові.

Відзначимо, що на даний момент система переводить тільки амслен на американський звуковий Англійська. Адаптація до інших мов зажадає як мінімум навчання штучного інтелекту на новому масиві даних (а підготовка такого масиву - це, як правило, дуже трудомісткий процес). Може трапитися і так, що доведеться переписувати код програми. Але у всякому разі" залізо " напевно залишиться незмінним, а це вже півсправи.

Переглядів: 2665
Коментувати:
Введіть цифри


tesla_pochala_perevoTesla почала переводити автопілот на самонавчальні нейромережі
09:51 05.12.2023
lyudstvo_mozhe_znajtЛюдство може знайти безсмертя до 2029 року — передумови вже є
11:06 19.10.2023
paralizovana_zhinka_Паралізована жінка "заговорила" завдяки інноваційному імпланту
16:43 28.08.2023
predstavleni_shtuchnПредставлені штучні м'язи змінної жорсткості з чутливістю
08:46 18.07.2023
uspishno_viprobuvanaУспішно випробувана технологія дистанційної підзарядки дрона лазером
12:23 13.01.2023
paralizovani_zmozhutПаралізовані зможуть говорити до 100 слів на хвилину - мозкові хвилі уже дешифрують у слова
16:10 01.11.2022
uzhe_1_listopada_evrУже 1 листопада Європа змінить інтернет назавжди
15:22 01.11.2022
velikobritaniya_mae_Великобританія має намір масово впровадити робомобілі до 2025 року
11:41 30.08.2022
yak_viduchiti_sebe_vЯк відучити себе витрачати час даремно і перемогти прокрастинацію
12:39 29.07.2022
czukor_shkidlivij_alЦукор шкідливий, але чому його додають майже в усі продукти харчування
12:33 17.07.2022

Ми в соцмережах:

♥ В "Закладки"
Популярне

























QRcode Наш Топ-100
Новини тижня (стрічка новин)
Смачні рецепти страв
Корисні штуки
Музика для відпочинку:
 
Архив
Інтереcно - (С) 2020 Всі права збережено
Використання будь-яких матеріалів, розміщених на сайті, дозволяється за умови посилання на Інтереcно обов'язково.