Để tạo ra một hệ thống hỗ trợ tốt hơn cho người khiếm thị, nhóm đã thiết kế một hệ thống AI đặt trong ba lô và đeo cho một người mù để giúp họ định hướng và cảm nhận tốt hơn về môi trường xung quanh.
Mô tả thực tế người mù sử dụng ba lô dẫn đường của hãng Intel. Nguồn Tech xplore |
Ba lô chứa hệ thống AI thông minh chạy trên máy tính xách tay và được trang bị camera OAK-D (ngoài việc cung cấp thông tin về chướng ngại vật, còn có thể cung cấp thông tin về độ sâu) được giấu trong áo và cả trong túi đeo (có chứa pin hệ thống). Máy ảnh chạy Movidius VPU của Intel và được lập trình bằng bộ công cụ OpenVINO. Hệ thống AI được cài đặt để nhận ra các vật thể mà người đi bộ có thể nhận biết được khi di chuyển trong không gian công cộng: ô tô, xe đạp, người bộ hành xung quanh, thậm chí là những cành cây nhô ra ven đường.
Mô tả hoạt động của ba lô dẫn đường. Ảnh: Tech xplore |
Hệ thống cũng có thể nhận biết địa hình như: vỉa hè, cỏ, lề đường và mặt đường, các biển báo. Thậm chí có thể đọc các từ và chuyển đổi chúng thành tin nhắn cho người dùng. Ngoài ra còn có một thiết bị GPS và một bộ thu được kết nối với micrô để người dùng có thể nói chuyện với hệ thống. Người dùng nhận tin nhắn thoại từ hệ thống qua tai nghe Bluetooth.
Khi đeo ba lô chỉ đường này, hệ thống AI sẽ cảnh báo giúp họ nhận biết các chướng ngại vật như lề đường, băng ghế, chậu cây và người xung quanh. Đồng thời cung cấp cho họ cảnh báo trước về các đoạn đường sắp qua, về độ nghiêng và dốc của đoạn đường phía trước.
Những năm gần đây, thiết bị hỗ trợ người khiếm thị ra mắt khá nhiều nhưng theo nhóm nghiên cứu, là vẫn chưa tương xứng với các công nghệ có sẵn.