Giới thiệu Đề tài
Nghiên cứu này trình bày dự án See Color, một nỗ lực đa ngành nhằm phát triển phương tiện hỗ trợ di chuyển không xâm lấn cho người khiếm thị. Dự án sử dụng tín hiệu âm thanh để tái hiện cảnh ảnh theo thời gian thực, giúp người dùng có thể cảm nhận và định hướng trong không gian.
Ngành Nghiên cứu
- Computer Vision
- Audio Processing
- Pattern Recognition
Tóm tắt Nội dung Tài liệu
Dự án See Color tập trung vào việc chuyển đổi thông tin thị giác thành tín hiệu âm thanh để hỗ trợ người khiếm thị. Nghiên cứu đi sâu vào hai phương pháp xử lý ảnh chính: đơn giản hóa ảnh thông qua phân đoạn và hướng sự chú ý bằng cách tính toán độ nổi bật thị giác. Hai nguyên mẫu đã được phát triển: một xử lý ảnh tĩnh trên máy tính và một sử dụng camera lập thể để ước tính độ sâu. Pixel màu được mã hóa thành các nốt nhạc cụ với âm sắc, cao độ và cường độ được xác định bởi sắc độ, độ bão hòa và độ sáng của màu sắc. Độ sâu được mã hóa bằng thời lượng âm thanh. Các thử nghiệm sơ bộ cho thấy kết quả khả quan, đặc biệt là khả năng nhận dạng vật thể thông qua mã hóa âm thanh.
Mục lục Chi tiết
- 1. Giới thiệu: Mục tiêu và ý nghĩa của dự án See Color.
- 2. Nguyên mẫu điều hướng thời gian thực cho người mù: Tổng quan hệ thống và nguyên mẫu.
- 3. Đơn giản hóa ảnh và Độ nổi bật: Các phương pháp xử lý ảnh.
- 3.1. Đơn giản hóa ảnh: Chi tiết thuật toán phân đoạn và phân tích kết quả.
- 3.2. Tiêu điểm chú ý: Cơ chế hướng sự chú ý và sử dụng thuật toán SURF cho màu sắc.
- 4. Mã hóa âm thanh phẳng: Chuyển đổi màu sắc thành âm thanh không định vị 3D.
- 5. Định vị âm thanh 3D: Tạo môi trường âm thanh chân thực với định vị không gian.
- 6. Nguyên mẫu và Thử nghiệm: Mô tả nguyên mẫu và kết quả thử nghiệm.
- 6.1. Thử nghiệm với máy tính bảng.
- 6.2. Thử nghiệm sơ bộ với camera lập thể.
- 6.3. Thảo luận.
- 7. Kết luận và Công việc Tương lai: Tổng kết và đề xuất hướng nghiên cứu.