ĐẠI HC THÁI NGUYÊN
TRƯNG
ĐẠI HC CÔNG NGH THÔNG TIN VÀ TRUYN THÔNG
NGUYN CÔNG THÀNH
NGHIÊN CU H THNG NHN DNG
NGÔN NG KÝ HIU VIT NAM
LUN VĂN THC SĨ KHOA HC Y NH
THÁI NGUYÊN -
2017
ĐẠI HC THÁI NGUYÊN
TRƯNG
ĐẠI HC CÔNG NGH THÔNG TIN
TRUYN T
NG
NGUYN CÔNG THÀNH
NGHIÊN CU H THNG NHN DNG
NGÔN NG KÝ HIU VIT NAM
Chuyên ngành: Khoa hc máy tính
Mã s: 60.48.01.01
THÁI NGUYÊN -
2017
MC LC
CHƯƠNG 1 TỔNG QUAN V NGÔN NG KÍ HIU VIT NAM........ 3
1.1. Khái nim và vai trò ca ngôn ng ký hiu ............................................ 3
1.2. Đặc điểm ngôn ng hc ca ngôn ng ký hiu ...................................... 6
1.3. Ngôn ng ký hiu Vit Nam ................................................................... 8
1.4. Các phương pháp nhận biết ngôn ng kí hiu ........................................ 9
1.4.1. Nhn biết bng phân tích hình nh ................................................... 9
1.4.2. Nhn biết bng cm biến ................................................................ 10
CHƯƠNG 2 GĂNG TAY CẢM BIN ........................................................ 12
2.1. Cm biến cong ...................................................................................... 12
2.2. Cm biến gia tc ................................................................................... 18
2.4. Mô hình găng tay cm biến. .................................................................. 32
CHƯƠNG 3 PHƯƠNG PHÁP NHẬN DNG NGÔN NG KÍ HIU
VIỆT NAM DÙNG GĂNG TAY CẢM BIN VÀ NG DNG .............. 35
3.1. Tp d liu nhn dng. .......................................................................... 35
3.2. Thut toán phân lp và nhn dng ........................................................ 37
3.2.1. Chương trình thu thập d liu ......................................................... 37
3.2.2. X lý d liu ................................................................................... 40
3.2.3. Gii thiu v WPF .......................................................................... 52
3.2.4. Áp dng WPF mô phng bàn tay ................................................... 53
3.3. Kết qu nhn dạng và đánh giá ............................................................. 54
KT LUN .................................................................................................... 57
TÀI LIU THAM KHO ............................................................................ 59
DANH MC HÌNH V VÀ BNG BIU
Hình 1.1: Ngôn ng kí hiu trong h thng Arthrological ............................... 5
Hình 1.2. Mô hình h thng nhn dng bàn tay .............................................. 10
Hình 2.1.Cm biến độ cong ............................................................................. 12
Hình 2.2.Các v trí ca cm biến độ cong ....................................................... 13
Hình 2.3. Mô hình các cm biến gắn trên găng tay ........................................ 13
Hình 2.4. Mch ghép ni cm biến cong ........................................................ 14
Hình 2.5. Mch flash ADC vi 4 b so sánh. ................................................. 16
Hình 2.6. Analog và digital ca hàm sin. ........................................................ 17
Hình 2.7. Cm biến gia tc ADXL345 ........................................................... 18
Hình 2.8. Gia tốc tĩnh theo trục z .................................................................... 19
Hình 2.9. H trc ta độ trên cm biến và bàn tay .......................................... 20
Hình 2.10. Cách xác định cac goc Proper Euler ............................................. 22
Hình 2.11. Hình chiếu trc Z lên h trc chun .............................................. 22
Hình 2.12. Hình chiếu trc Y lên h trc chun ............................................. 23
Hình 2.13. Góc Tait-Bryan (đường cơ sở y’ được kí hiu màu vàng) ............ 24
Hình 2.14. ng dng Góc Tait- Bryan trong hàng không .............................. 25
Hình 2.15. Hiện ợng Gimbal khi Pitch = 90 độ ........................................... 25
Hình 2.16. Cac goc Yaw, Pitch va Roll .......................................................... 26
Hình 2.17. Sư thay đôi tra
ng thai ư
ng vơi cac goc. ........................................ 27
Hình 2.18.Tính toán góc nghiêng t accelerometer ........................................ 28
Hình 2.19. Sơ đồ chân Atmega32 ................................................................... 29
Hình 2.20. Mô hình h thng thu thp d liu ................................................ 33
Hình 3.1. Bng hiu bàn tay tiếng vit........................................................ 36
Hình 3.2 Các du thanh trong ngôn ng kí hiu Vit Nam ............................ 37
Hình 3. 1.Tư tưởng ca thut toán DTW ........................................................ 41
Hình 3.2. Các đường wraping. ........................................................................ 42
Hình 3.3. Các yêu cu với đường wraping. .................................................... 46
Hình 3.4. Các đường wraping có th. ............................................................. 47
Hình 3.5 : Thut toán nhn dng ngôn ng kí hiu Vit Nam ........................ 49
Hình 3.5. Phân nhóm d liệu đầu vào da trên Ax ......................................... 50
Hình 3.6. .NET Framework 3.0 ...................................................................... 52
Hình 3.7. Mô hình ba chiu ca bàn tay. ........................................................ 53
Bng 1: Kết qu nhn dng ngôn ng kí hiu Vit Nam ................................ 56