Timtailieu.net 
Phân tích tư tưởng của nhân dân qua đoạn thơ: Những người vợ nhớ chồng… Những cuộc đời đã hóa sông núi ta trong Đất nước của Nguyễn Khoa Điềm
3403
1
0
9 trang
Bài giảng Một số thuật toán phân loại văn bản giới thiệu bài toán phân loại văn bản, các mô hình xác suất, một số mô hình phân loại (mô hình Bayes đơn giản, mô hình Bernoulli, mô hình TF-IDF), thiết kế. Mời các bạn tham khảo.
Nội dung trích xuất từ tài liệu:
Bài giảng Một số thuật toán phân loại văn bảnmột số thuật toán phân loại văn bảnLê Hồng PhươngĐại học Quốc gia Hà NộiTrường Đại học Khoa học Tự nhiênViện Nghiên cứu Công nghệ FPT6/2013Lê Hồng Phương(HUS, VNU)Một số thuật toán phân loại văn bản6/20131 / 29Nội dung1Giới thiệuBài toán phân loại văn bảnCác mô hình xác suất2Một số mô hình phân loạiMô hình Bayes đơn giảnMô hình BernoulliMô hình TF-IDF3Thiết kếLê Hồng Phương(HUS, VNU)Một số thuật toán phân loại văn bản6/20132 / 29Nội dung1Giới thiệuBài toán phân loại văn bảnCác mô hình xác suất2Một số mô hình phân loạiMô hình Bayes đơn giảnMô hình BernoulliMô hình TF-IDF3Thiết kếLê Hồng Phương(HUS, VNU)Một số thuật toán phân loại văn bản6/20133 / 29Nội dung1Giới thiệuBài toán phân loại văn bảnCác mô hình xác suất2Một số mô hình phân loạiMô hình Bayes đơn giảnMô hình BernoulliMô hình TF-IDF3Thiết kếLê Hồng Phương(HUS, VNU)Một số thuật toán phân loại văn bản6/20134 / 29Bài toán phân loại văn bảnBài toánCho x là một văn bản. Biết x thuộc một trong các loạiy ∈ {1, 2, . . . , K}. Hãy tìm loại văn bản đúng nhất của x.Ví dụ:Giả sử x là một bài báo do phóng viên viết, gửi đăng trên trangtin điện tử vnExpress. Biên tập viên cần quyết định xem x thuộcthể loại nào là thích hợp nhất: “chính trị – xã hội ”, “quốc tế ”, “thểthao”. . .Giả sử x là một văn bản ngắn có mục tiêu điều khiển tivi. Mỗi thểloại tương ứng với một hành động điều khiển: “tắt”, “bật”, “chuyểnkênh”,. . . :x = “hãy bật tivi” ⇒ y = “bật ”x = “chuyển sang kênh HBO ” ⇒ y = “chuyển kênh”Lê Hồng Phương(HUS, VNU)Một số thuật toán phân loại văn bản6/20135 / 29
