Исследователи Калифорнийского технологического института рассказали о разработанной ими системе Cognitive Augmented Reality Assistant (CARA), которая позволит слепым людям слышать окружающие их предметы. Она работает на основе AR-хэдсета HoloLens от компании Microsoft.
CARA использует расположенные на устройстве камеры и датчики, благодаря которым она видит все объекты, расположенные неподалёку от человека, а затем определяет их и произносит в слух точное название. При этом используется технология пространственного звука – слово «стул» прозвучит именно с той стороны, с которой он в данный момент стоит. Отдалённость же объекта от оператора определяется частотой звука, на которой произнесено слово – чем выше звук, тем ближе находится объект.
