Tai nghe AR này được gọi là CARA, viết tắt của Cognitive Augmented Reality Assistant, ứng dụng công nghệ nhận dạng vật thể được sử dụng trong HoloLens của Microsoft kết hợp với các thuật toán phân tích hình ảnh.
Bằng cách dùng âm thanh hoặc giọng nói được bản địa hóa, thiết bị sẽ cảnh báo người dùng về một đối tượng cụ thể đang ở đâu, chuyển hình ảnh thu nhận được thành âm thanh.
CARA còn được lập trình với ba chế độ: chế độ tiêu điểm, chế độ quét và chế độ mục tiêu. Chế độ tiêu điểm sẽ đọc tên các tên đối tượng mà người dùng hướng ánh mắt đến.
Chế độ quét liệt kê tất cả các đối tượng trong môi trường xung quanh mà tai nghe có thể nhận dạng từ trái sang phải.
Chế độ mục tiêu cho phép người dùng chọn một đối tượng duy nhất để dùng làm mốc hoặc làm hướng dẫn cho mình.
Hiện CARA đã được thử nghiệm trên người mù và và người khiếm thị tại nhiều khu vực, đã điều hướng thành công trên nhiều tuyến đường ngay trong lần thử đầu tiên.
Nhóm nghiên cứu rất mong đợi khả năng tai nghe AR này sẽ sớm được sử dụng tại các ngân hàng, khách sạn và trung tâm thương mại.
Tai nghe CARA ứng dụng AR có thể biến hình ảnh thành giọng nói
