Bài viết này trình bày kết quả nghiên cứu về ứng dụng của học tăng cường cho các giao thức định tuyến trong mạng FANET. Một thuật toán định tuyến dựa trên vị trí (VAQR) được đề xuất với ý tưởng xây dựng một hàm phần thưởng sử dụng hai độ đo vận tốc tương đối và góc, bảng định tuyến của mỗi nút được cập nhật sử dụng thuật toán Q-learning với hàm phần thưởng được đề xuất. | Kỷ yếu Hội nghị Khoa học công nghệ Quốc gia lần thứ XV về Nghiên cứu cơ bản và ứng dụng Công nghệ thông tin FAIR Hà Nội ngày 03-04 11 2022 DOI VAQR MỘT TIẾP CẬN HỌC TĂNG CƯỜNG TRONG ĐỊNH TUYẾN FANET Mai Cường Thọ1 2 Nguyễn Thị Hương Lý1 Lê Hữu Bình2 Võ Thanh Tú2 1 Khoa Công nghệ thông tin Trường Đại học Nha Trang 3 Khoa Công nghệ thông tin Trường Đại học khoa học Đại học Huế mctho@ lynth@ lhbinh@ vttu@ TÓM TẮT Bài báo này trình bày kết quả nghiên cứu về ứng dụng của học tăng cường cho các giao thức định tuyến trong mạng FANET. Một thuật toán định tuyến dựa trên vị trí VAQR được đề xuất với ý tưởng xây dựng một hàm phần thưởng sử dụng hai độ đo vận tốc tương đối và góc bảng định tuyến của mỗi nút được cập nhật sử dụng thuật toán Q-learning với hàm phần thưởng được đề xuất. Kết quả mô phỏng trên OMNeT cho thấy rằng thuật toán được đề xuất đạt được hiệu năng cao về mặt tỉ lệ chuyển gói thành công và thông lượng so với giao thức GPSR với trễ truyền tải trung bình cao hơn trong phạm vi chấp nhận được. Từ khóa FANET routing Q-routing GPSR. I. GIỚI THIỆU Trong thời gian gần đây phương tiện bay không người lái UAV- Unmanned Aerial Vehicle với kích thước nhỏ và khả năng bay đã nổi lên như một kỹ thuật đầy hứa hẹn trong các ứng dụng quân sự và dân sự bao gồm trinh sát quân sự tìm kiếm và cứu hộ giám sát thiên tai an ninh đô thị . 1-3 . So với việc sử dụng một UAV đơn lẻ các hệ thống nhiều UAV hiệu quả hơn nhiều với khả năng đa nhiệm nhanh hơn thời gian sử dụng mạng lâu hơn và khả năng mở rộng cao hơn. Tuy nhiên chúng cũng mang lại nhiều vấn đề thách thức do các đặc tính riêng biệt của UAV ví dụ vận tốc di chuyển cao và triển khai thưa thớt . Một trong những vấn đề cơ bản quan trọng nhất là liên lạc hợp tác giữa các UAV. Một giao thức liên lạc hoặc định tuyến hiệu quả giữa các UAV đóng một vai trò quan trọng trong việc truyền dữ liệu và các ứng dụng thực tế khác nhau. Để truyền các gói một cách hiệu quả
