Ứng dụng kỹ thuật stereo vision cho robot, báo cáo hay về thiết ké robot, Ứng dụng kỹ thuật stereo vision cho robot Ứng dụng kỹ thuật stereo vision cho robot Ứng dụng kỹ thuật stereo vision cho robot Ứng dụng kỹ thuật stereo vision cho robot Ứng dụng kỹ thuật stereo vision cho robot
Trang 3Giới thiệu
Các phương pháp phát hiện vật cản
Trang 4Giới thiệu
Các phương pháp phát hiện vật cản
Phương pháp optical flow
Trang 5Giới thiệu
Các phương pháp phát hiện vật cản
Phương pháp dò biên (Edge detection)
Trang 6Giới thiệu
Các phương pháp phát hiện vật cản
Phương pháp dò nền
Trang 7Giới thiệu
Các phương pháp phát hiện vật cản
Phương pháp Stereo Vision
Trang 8Hệ thống Stereo Vision
Lấy ý tưởng từ hoạt động thị giác của người
Trang 9Hệ thống Stereo Vision
Sơ đồ khối
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Xử lý bản đồ độ chênh lệch
Điều khiển ứng dụng
Trái
Phải
Phải * Trái *
Trang 10Hệ thống Stereo Vision
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Xử lý bản đồ độ chênh lệch
Điều khiển ứng dụng
Trái
Phải
Phải * Trái *
Khối thu hình
Trang 11Hệ thống Stereo Vision
r l
r l
x x
fT Z
Z
T f
Z
x x
Trang 12Hệ thống Stereo Vision
Khối hiệu chỉnh camera
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Điều khiển ứng dụng
Trang 13Khối hiệu chỉnh camera
1 Đặc tính của camera (Camera Model)
q = M * Q
Trang 14Đặc tính của camera (Camera Model)
Trang 17Radial distorsions :
Tangential distorsions :
Trang 18Khối hiệu chỉnh camera
2 Hiệu chỉnh
Mục đích chính của hiệu chỉnh camera là tìm ra ma trận cần thiết E (Essential matrix) và ma trận cơ sở F
(Fundamental matrix)
Trang 19Hệ thống Stereo Vision
Khối hiệu chỉnh ảnh
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Xử lý bản đồ độ chênh lệch
Điều khiển ứng dụng
Trái
Phải
Phải * Trái *
Trang 21Tìm đường epipolar
Trang 22Canh ảnh
Trang 23Hệ thống Stereo Vision
Khối tính toán bản đồ độ chênh lệch
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Xử lý bản đồ độ chênh lệch
Điều khiển ứng dụng
Trái
Phải
Phải * Trái *
Trang 24Tính toán bản đồ độ chênh lệch
Trang 25Tìm điểm tương quan
d
fT x
Trang 26Thuật toán SAD
[ Max I c I I cap I cap ]
han tren gioi
tri Gia : cap I
tam trung pixel
sang do
cuong tri
Gia : c I
so cua binh trung
sang do tri Gia :
I
Trang 27Thuật toán SAD
Trang 30Hệ thống Stereo Vision
Khối xử lý bản đồ độ chênh lệch
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Xử lý bản đồ độ chênh lệch
Điều khiển ứng dụng
Trái
Phải
Phải * Trái *
Trang 31Xử lý bản đồ độ chênh lệch
Trang 32Hệ thống Stereo Vision
Khối điều khiển ứng dụng
Thu hình
Hiệu chỉnh ảnh
Hiệu chỉnh Camera
Tính toán bản đồ độ chênh lệch
Xử lý bản đồ độ chênh lệch
Điều khiển ứng dụng
Trái
Phải
Phải * Trái *
Trang 33Kết quả đạt được
Trang 35Đạt được
Đưa được ra bản đồ độ chênh lệch với chất lượng chấp nhận được
Kết quả về khoảng cách sai số không đáng kể trong phạm vi 70 - 90 cm
Trang 36Hướng phát triển
Tìm hiểu các kỹ thuật trong điều khiển di chuyển
Thiết kế mô hình Mobile robot di chuyển bằng bánh xe
Tiến hành lập kế hoạch đường đi và tránh vật cản trên mô hình robot thực kết hợp với kỹ thuật stereo vision