BỘ CÔNG THƯƠNG
TRƯỜNG ĐẠI HỌC CÔNG NGHIỆP HÀ NỘI
NGUYỄN QUY TÔN
NÂNG CAO HIỆU QUẢ BẢO MẬT CỦA MẠNG TRUYỀN TIN
UAV ỨNG DỤNG HỌC TĂNG CƯỜNG
ĐỀ ÁN TỐT NGHIỆP THẠC SĨ HỆ THỐNG THÔNG TIN
Hà Nội – 2024
ii
MỤC LỤC
LỜI CAM ĐOAN ............................................................................................. i
MỤC LỤC ........................................................................................................ ii
DANH MỤC CÁC KÝ HIỆU, CHỮ VIẾT TẮT ......................................... v
DANH MỤC BẢNG BIỂU ............................................................................ vi
DANH MỤC HÌNH ẢNH ............................................................................. vii
MỞ ĐẦU .......................................................................................................... 1
CHƯƠNG 1 - TỔNG QUAN BÀI TOÁN ..................................................... 6
1.1 TỔNG QUAN VỀ HỆ THỐNG MẠNG TRUYỀN DẪN UAV ......... 6
1.1.1 Giới thiệu về UAV ........................................................................... 6
1.1.2 Giới thiệu về mạng truyền thông di động ........................................ 8
1.1.2 Giới thiệu về mạng truyền tin sử dụng UAV ................................. 11
1.2 XÁC ĐỊNH VẤN ĐỀ HIỆU SUẤT BẢO MẬT CỦA MẠNG
TRUYỀN TIN UAV ................................................................................... 13
1.2.1 Tình hình nghiên cứu trong nước ................................................... 13
1.2.2 Tình hình nghiên cứu nước ngoài .................................................. 16
1.3 KẾT LUẬN CHƯƠNG ...................................................................... 18
CHƯƠNG 2 – GIẢI PHÁP NÂNG CAO HIỆU QUẢ BẢO MẬT CỦA
MẠNG TRUYỀN TIN UAV ........................................................................ 19
2.1 MÔ HÌNH HỆ THỐNG MẠNG TRUYỀN TIN UAV ..................... 19
2.2.1 Mô hình hệ thống ........................................................................... 19
2.2.1 Mô hình truyền dẫn tín hiệu ........................................................... 20
iii
2.2 CÁC KỸ THUẬT HỌC MÁY ........................................................... 28
2.2.1 Học tăng cường .............................................................................. 28
2.2.2 Markov Decision Process ............................................................... 30
2.2.3 Q-Learning ..................................................................................... 35
2.2.4 Deep Q-Networks........................................................................... 39
2.3 KẾT LUẬN CHƯƠNG......................................................................... 44
CHƯƠNG 3 – THỰC NGHIỆM VÀ ĐÁNH GIÁ ..................................... 45
3.1 TỔNG QUAN VỀ PHƯƠNG PHÁP THỰC HIỆN ............................. 45
3.1.1 Giới thiệu phương pháp mô phỏng ................................................ 45
3.1.2 Ưu điểm của phương pháp mô phỏng ............................................ 46
3.1.3 Nhược điểm của phương pháp mô phỏng ...................................... 47
3.2 KỊCH BẢN THỰC NGHIỆM .............................................................. 48
3.2.1 Thiết kế môi trường ........................................................................ 48
3.2.2 Thiết lập phần thưởng .................................................................... 49
3.2.3 Tham số mô phỏng ......................................................................... 49
3.2.4 Giả định .......................................................................................... 51
3.3 QUY TRÌNH THỰC NGHIỆM ............................................................ 51
3.3.1 Khởi tạo tham số hệ thống ............................................................. 51
3.3.2 Xây dựng thuật toán ....................................................................... 53
3.3.3 Đánh giá và phân tích kết quả ........................................................ 58
3.3 KẾT QUẢ THỰC NGHIỆM ................................................................ 59
3.3.1 Tính hội tụ của thuật toán .............................................................. 60