Luận văn Thạc sĩ Hệ thống thông tin: Điều khiển tắc nghẽn mạng internet bằng deep reinforcement learning

Luận văn "Điều khiển tắc nghẽn mạng internet bằng deep reinforcement learning" được chia làm các phần sau: Chương 1 sẽ nói khái quát về cấu trúc mạng internet; điều khiển tắc nghẽn và các các cơ chế điều khiển tắc nghẽn; học tăng cường và học tăng cường sâu; Chương 2 sẽ giới thiệu các nghiên cứu liên quan về 2 hướng tiếp cận rule-based và ML-based. Chương 3 sẽ đề xuất giải pháp và đánh giá hiệu năng.
Nội dung trích xuất từ tài liệu:
Luận văn Thạc sĩ Hệ thống thông tin: Điều khiển tắc nghẽn mạng internet bằng deep reinforcement learning UBND TỈNH BÌNH DƯƠNG TRƯỜNG ĐẠI HỌC THỦ DẦU MỘT LÊ HUY TÊN ĐỀ TÀIĐIỀU KHIỂN TẮC NGHẼN MẠNG INTERNET BẰNG DEEP REINFORCEMENT LEARNING CHUYÊN NGÀNH: HỆ THỐNG THÔNG TIN MÃ SỐ: 8480104 LUẬN VĂN THẠC SỸ BÌNH DƯƠNG, năm 2020 UBND TỈNH BÌNH DƯƠNG TRƯỜNG ĐẠI HỌC THỦ DẦU MỘT LÊ HUY TÊN ĐỀ TÀIĐIỀU KHIỂN TẮC NGHẼN MẠNG INTERNET BẰNG DEEP REINFORCEMENT LEARNING. CHUYÊN NGÀNH: HỆ THỐNG THÔNG TIN MÃ SỐ: 8480104 LUẬN VĂN THẠC SỸNGƯỜI HƯỚNG DẪN KHOA HỌC: PGS.TS. LÊ TUẤN ANH BÌNH DƯƠNG, năm 2020 LỜI CAM ĐOAN Tôi xin cam đoan đây là công trình nghiên cứu của riêng tôi. Các số liệu, kếtquả nêu trong Luận văn là trung thực và chưa từng được ai công bố trong bất kỳcông trình nào khác. Tôi xin cam đoan rằng mọi sự giúp đỡ cho việc thực hiện Luận văn này đãđược cảm ơn và các thông tin trích dẫn trong Luận văn đã được chỉ rõ nguồn gốc. Học viên thực hiện đề tài i LỜI CẢM ƠN Để hoàn thành được bài luận văn thạc sĩ này, tôi xin bày tỏ sự cảm kích đặcbiệt tới thầy hướng dẫn khoa học của tôi, Phó Giáo sư Tiến sĩ Lê Tuấn Anh - Ngườiđã định hướng, trực tiếp dẫn dắt và cố vấn cho tôi trong suốt thời gian thực hiệnluận văn. Xin chân thành cảm ơn những bài giảng và bài báo khoa học của thầygiới thiệu đã giúp cho tôi mở mang thêm nhiều kiến thức hữu ích về điều khiển tắcnghẽn mạng internet. Đồng thời, thầy cũng là người luôn cho tôi những lời khuyênvô cùng quý giá về cả kiến thức chuyên môn cũng như định hướng phát triển sựnghiệp. Một lần nữa, tôi xin gửi lời cảm ơn đến thầy bằng tất cả tấm lòng và sựbiết ơn của mình. Tôi cũng xin gửi lời cảm ơn chân thành đến Viện Đào tạo Sau Đại học, trườngđại học Thủ Dầu Một, đã giảng dạy và đã hỗ trợ tôi trong suốt quá trình học và quátrình làm luận văn thạc sĩ này. Sau cùng, tôi xin tỏ lòng biết ơn đến cha mẹ, người thân và bạn bè đã luôn bêncạnh ủng hộ, động viên tôi trong cuộc sống cũng như trong thời gian hoàn thànhluận văn thạc sĩ. Học viên thực hiện đề tài ii MỤC LỤCLỜI CAM ĐOAN .............................................................................................................. iLỜI CẢM ƠN ................................................................................................................... iiMỤC LỤC ....................................................................................................................... iiiDANH MỤC BẢNG ....................................................................................................... ivDANH MỤC HÌNH, ĐỒ THỊ .......................................................................................... vDANH MỤC CHỮ VIẾT TẮT ....................................................................................... viMỞ ĐẦU .......................................................................................................................... 1Chương 1. TỔNG QUAN ................................................................................................. 3 1.1 Giao thức TCP/IP .................................................................................... 3 1.2 TCP và cơ chế điều khiển tắc nghẽn ....................................................... 5 1.2.1 Quá trình slow-start và congestion avoidance .............................................. 5 1.2.2 Quá trình Fast-Retransmit............................................................................. 5 1.2.3 Quá trình Fast-Recovery ............................................................................... 5 1.3 Học tăng cường ....................................................................................... 6 1.3.1 Các khái niệm cơ bản.................................................................................... 6 1.3.2 Quy trình quyết định Markov (Markov Decision Process – MDP) .............. 7 1.3.3 Q – Learning ................................................................................................. 8 1.3.4 Học tăng cường sâu (Deep Q – Learning) .................................................... 9Chương 2. CÁC NGHIÊN CỨU LIÊN QUAN.............................................................. 11 2.1 Kỹ thuật điề ...