Đề tài nghiên cứu nhằm tìm hiểu ngôn ngữ ký hiệu tiếng Việt và các nghiên cứu về nhận dạng; nghiên cứu cải tiến các giải pháp, thuật toán cho việc nhận dạng ngôn ngữ cử chỉ sử dụng Kinect; ứng dụng nhận dạng ngôn ngữ ký hiệu trong giao tiếp ở người khiếm thính. | BỘ GIÁO DỤC VÀ ĐÀO TẠO ĐẠI HỌC ĐÀ NẴNG TÓM TẮT BÁO CÁO TỔNG KẾT ĐỀ TÀI KHOA HỌC VÀ CÔNG NGHỆ CẤP ĐẠI HỌC ĐÀ NẴNG NGHIÊN CỨU VÀ CẢI TIẾN KỸ THUẬT NHẬN DẠNG NGÔN NGỮ CỬ CHỈ SỬ DỤNG KINECT Mã số: D2015-02-118 Chủ nhiệm đề tài: ThS. VÕ ĐỨC HOÀNG Đà Nẵng, 3/2016 BỘ GIÁO DỤC VÀ ĐÀO TẠO ĐẠI HỌC ĐÀ NẴNG TÓM TẮT BÁO CÁO TỔNG KẾT ĐỀ TÀI KHOA HỌC VÀ CÔNG NGHỆ CẤP ĐẠI HỌC ĐÀ NẴNG NGHIÊN CỨU VÀ CẢI TIẾN KỸ THUẬT NHẬN DẠNG NGÔN NGỮ CỬ CHỈ SỬ DỤNG KINECT Mã số: D2015-02-118 Xác nhận của cơ quan chủ trì đề tài (ký, họ và tên, đóng dấu) Chủ nhiệm đề tài (ký, họ và tên) ThS. Võ Đức Hoàng Đà Nẵng, 3/2016 1 MỞ ĐẦU 1. Tính cấp thiết của đề tài Ngôn ngữ ký hiệu là ngôn ngữ cử chỉ tay với dấu hiệu truyền trực quan bằng tay sử dụng hình dạng của bàn tay, hướng và sự di chuyển của bàn tay, cánh tay hoặc cơ thể, nét mặt và miệng để truyền đạt ý nghĩa từ thay vì sử dụng âm thanh. Ngôn ngữ ký hiệu là ngôn ngữ hoàn toàn khác biệt và độc lập với ngôn ngữ nói hay ngôn ngữ viết. Ngôn ngữ này được sử dụng phổ biến trong cộng đồng người khiếm thính bao gồm: thông dịch viên, bàn bè, gia đình của người điếc cũng như trong cộng đồng người có khuyết tật về nghe. Tuy nhiên có rất nhiều trở ngại lớn để tạo ra sự giao tiếp giữa người khiếm thính và người bình thường bởi vì người bình thường không thể hiểu được ngôn ngữ cử chỉ. Nhận dạng ngôn ngữ cử chỉ là thực sự cần thiết để tạo ra một hệ thống tương tác giữa người bình thường và người khiếm thính hay sự giao tiếp giữa người và máy. Hiện nay các hệ thống nhận dạng ngôn ngữ cử chỉ thường sử dụng hai phương pháp sau: Dựa trên dữ liệu cảm biến: phương pháp này được thực hiện bằng cách sử dụng hàng loạt các cảm biến được tích hợp trên một găng tay để phát hiện các chuyển động khi thao tác cử chỉ. Dựa trên tầm nhìn máy tính: máy tính được gắn máy máy với chức năng là đầu vào của dữ liệu (ảnh, phim). Các tập tin được lưu trữ và xử lý phương phương pháp xử lý hình ảnh và xuất các thông tin, ý nghĩa về ký hiệu của ngôn ngữ ra thiết bị bên
