Комп'ютерний зір на смартфоні дозволив сліпим займатися бігом

Розробники з компанії Google створили додаток для смартфона, що дозволяє сліпим займатися бігом без поводиря. Воно розпізнає смугу на дорозі і намагається тримати людину на ній, даючи звукові підказки, розповідають розробники в блозі компанії.


Смартфони на Android і iOS адаптовані для використання людьми з частковою або повною втратою зору. У них є функції озвучування елементів інтерфейсу, тексту і навіть зображень (система розповідає, що зображено на фотографіях), а також голосовий ввід. Крім того, оскільки сучасні смартфони за потужністю співставні з комп'ютерами, в останні два-три роки розробники все частіше починають використовувати алгоритми комп'ютерного зору, що дозволяє смартфонам розповідати сліпій людині про те, які об'єкти знаходяться перед камерою або які емоції відчуває співрозмовник.

Розробники з Google створили новий додаток, який так само використовує комп'ютерний зір, але для динамічного завдання - бігу по дорозі. Для його роботи необхідний смартфон з досить потужним процесором, тому що він використовує алгоритми машинного навчання, що працюють на самому пристрої без необхідності в інтернеті. Крім того, додаток працює тільки з розміченими дорогами, на яких є яскрава лінія посередині.

Для початку бігу потрібно закріпити смартфон на поясі так, щоб камера дивилася на дорогу перед людиною, і підключити до нього навушники. Після цього додаток починає працювати приблизно так само, як система утримання в смузі в автомобілях: воно підказує звуковим сигналом, що людина зміщується від центру вбік. Сигнал при цьому звучить не в обох вухах, а з того боку, в який людина зміщується. Крім того, його інтенсивність залежить від того, наскільки сильно змістилася людина.

Спочатку розробники розмітили смугу на закритій біговій трасі і зібрали з неї безліч записів бігу, щоб навчити алгоритм розпізнавати зміщення. Після цього вони спочатку тестували роботу програми на закритій трасі, а потім перейшли до тестів у лісі. Розробники відзначають, що на закритій круговій трасі їх доброволець з повною втратою зору зміг самостійно пробігти вісім кіл. Компанія планує розвивати проект і домовитися з іншими організаціями і владою, щоб створити смуги для бігу в інших місцях.

На початку року нідерландська компанія Envision разом з Google представила модифіковані окуляри Google Glass з додатком для допомоги сліпим. Окуляри можуть зачитувати текст, дізнаватися людей перед користувачем і описувати навколишню обстановку.