tailieunhanh - Nhận dạng ngôn ngữ ký hiệu tiếng Việt với cử chỉ động dựa trên hệ tọa độ cầu

Bài viết đề xuất phương pháp nhận dạng ngôn ngữ ký hiệu tiếng Việt cử chỉ động với dữ liệu được thu từ camera Kinect phiên bản 2. Việc xác định mức độ tương đồng giữa hai cử chỉ được thực hiện bởi thuật toán Dynamic Time Warping (DTW) và kết quả phân lớp được đưa ra bởi Nearest Neighbor (NN). Việc thực nghiệm trên 10 từ tiếng Việt mang lại hiệu quả nhận dạng trung bình lên đến 92%, đồng thời hệ thống có thể xử lý theo thời gian thực nhằm phù hợp với ứng dụng thực tế. Mời các bạn cùng tham khảo! | HộiHội ThảoThảo Quốc Quốc Gia Gia 2015vềvềĐiện 2015 ĐiệnTử Tử Truyền TruyềnThông Thông và và Công CôngNghệ NghệThông ThôngTinTin ECIT 2015 ECIT 2015 Nhận dạng ngôn ngữ ký hiệu tiếng Việt với cử chỉ động dựa trên hệ tọa độ cầu Võ Đức Hoàng Huỳnh Hữu Hưng Nguyễn Hồng Sang Jean Meunier Trung tâm DATIC Trường Đại học Bách Khoa Đại học Đà Nẵng. DIRO Đại học Montreal Canada. Email hhhung @ sangnguyenhong@ Email meunier@ Abstract Ngôn ngữ ký hiệu là phương tiện giao tiếp được sử Sự ra đời của camera Kinect là một bước ngoặc lớn trong dụng phổ biến trong cộng đồng người khiếm thính. Ngôn ngữ ký xử lý ngôn ngữ cử chỉ. hiệu có những đặc trưng riêng với các quốc gia khác nhau được biểu diễn thông qua các cử chỉ và hình dạng bàn tay khuỷu tay hay khuôn mặt. Trong bài báo này chúng tôi đề xuất phương pháp nhận dạng ngôn ngữ ký hiệu tiếng Việt cử chỉ động với dữ liệu được thu từ camera Kinect phiên bản 2. Việc xác định mức độ tương đồng giữa hai cử chỉ được thực hiện bởi thuật toán Dynamic Time Warping DTW và kết quả phân lớp được đưa ra bởi Nearest Neighbor NN . Việc thực nghiệm trên 10 từ tiếng Việt mang lại hiệu quả nhận dạng trung bình lên đến 92 đồng thời hệ thống có thể xử lý theo thời gian thực nhằm phù hợp với Hình 1. Camera đa năng Kinect ứng dụng thực tế. Năm 2010 Microsoft cho ra mắt phiên bản camera Kinect Keywords- Vietnamese sign language Kinect Dynamic Time XBOX hình 1 với nhiều tính năng thú vị như camera hồng Warping Nearest Neighbor so khớp mẫu khung xương. ngoại camera chiều sâu camera màu nhận dạng giọng nói Đặc biệt ta có thể sử dụng những cảm biến của camera thông I. GIỚI THIỆU qua các API được hỗ trợ trong bộ SDK dành cho Kinect Ngày nay hệ thống thị giác máy tính được áp dụng nhiều XBOX. Với những ưu điểm vượt trội trong tiền xử lý dữ liệu trong các lĩnh vực như giám sát điều khiển công nghiệp giao nhiều bài báo khoa học sử dụng Kinect XBOX như một thiết bị tiếp người và máy truyền thông điều khiển rô bốt.