Очки смешанной реальности работают как глаза для слепых

Очки HoloLens могут выполнять функцию визуального протеза для людей с плохим зрением, не передавая визуальные данные напрямую, а переводя их в режиме реального времени в помощью звуковые сигналы и инструкции.

На сегодняшний день восстановление зрения технически невозможно, но для взаимодействия с окружающей действительностью видеть не обязательно. Ведь если известно, где стоит стул, нам не нужно зрение, чтобы его обойти. Как сообщает TechCrunch, в число функций HoloLens входит обработка визуальных данных и построение карт, включающих стены, двери, различные препятствия. Команда исследователей построила свою систему вокруг звуков: очки сообщают о каждом объекте поблизости от человека голосом или соответствующим шумом.

Чтобы проверить возможности системы на практике, исследователи пригласили 7 слепых людей. Их вкратце ввели в курс дела (но не обучали пользованию системой), после чего дали ряд заданий. С помощью аудиоподсказок участники легко находили предметы и указывали на них, достаточно быстро обнаруживали стул в комнате и уверенно избегали столкновения с препятствиями. Они также с первого раза смогли пройти от входа в дом в комнату на втором этаже, следуя звуковому руководству системы.

Компания Microsoft, создавшая очки, озвучивала похожую много лет назад, но на тот момент не существовало подходящего аппаратного обеспечения. С появлением HoloLens ситуация изменилась. Несмотря на то, что девайс предназначен для зрячих людей, исследователи сумели раскрыть потенциал его использования в качестве зрительного протеза.

Пока речь идёт только о прототипе, но разработчики уверены в его перспективности. Очки смешанной реальности становятся легче и производительнее. Это позволит в скором будущем вывести подобные системы за рамки лабораторных исследований и сделать их привычными помощниками людей со слабым зрением в магазинах, гостиницах и других общественных местах.