Nội dung

BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC DÂN LẬP HẢI PHÒNG -------o0o------- ĐỒ ÁN TỐT NGHIỆP NGHÀNH CÔNG NGHỆ THÔNG TIN HẢI PHÒNG 2016 BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC DÂN LẬP HẢI PHÒNG -------o0o------- PHÁT HIỆN TỪ QUAN ĐIỂM MỚI CHO PHÂN TÍCH CẢM XÚC ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC HỆ CHÍNH QUY Nghành : Công Nghệ Thông Tin Hải Phòng 2016 BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC DÂN LẬP HẢI PHÒNG -------o0o------- PHÁT HIỆN TỪ QUAN ĐIỂM MỚI CHO PHÂN TÍCH CẢM XÚC ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC HỆ CHÍNH QUY Nghành : Công Nghệ Thông Tin Sinh viên thực hiện : Nguyễn Danh Long Giáo viên hướng dẫn : Ths. Nguyễn Thị Xuân Hương Mã số sinh viên : 1413101003 BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC DÂN LẬP HẢI PHÒNG -------o0o------- CỘNG HÒA XÃ HỘI CHỦ NGHĨA VIỆT NAM Độc lập – Tự do – Hạnh phúc NHIỆM VỤ THIẾT KẾ TỐT NGHIỆP Sinh viên : Nguyễn Danh Long Mã số : 1413101003 Lớp: CLT 801 Nghành: Công Nghệ Thông Tin Tên đề tài : Phát hiện từ quan điểm mới cho phân tích cảm xúc NHIÊM VỤ ĐỀ TÀI 1. Nội dung và các yêu cầu cần giải quyết trong nhiệm vụ đề tài tốt nghiệp a. Nội dung b. Các yêu cầu cần giải quyết 2. Các số liệu cần thiết để thiết kế , tình toán 3. Địa điểm thực tập CÁN BỘ HƯỚNG DẪN ĐỀ TÀI TỐT NGHIỆP Người hướng dẫn thứ nhất: Họ và tên:.................................................................................................................... Học hàm, học vị:......................................................................................................... Cơ quan công tác:....................................................................................................... Nội dung hướng dẫn: ………………………………………………………………… ………………………………………………………………………………………… ………………………………………………………………………………………… ………………………………………………………………………………………… ………………………………………………………………………………………… Người hướng dẫn thứ hai: Họ và tên: …………………………………………………………………………… Học hàm, học vị……………………………………………………………………… Cơ quan công tác: …………………………………………………………………… Nội dung hướng dẫn: ……………………..................................................................... ………………………………………………………………………………………… ………………………………………………………………………………………… ………………………………………………………………………………………… ………………………………………………………………………………………… Đề tài tốt nghiệp được giao ngày 18 tháng 04năm 2016 Yêu cầu phải hoàn thành trước ngày 9 tháng 07 năm 2016 Đã nhận nhiệm vụ: Đ.T.T.N Sinh viên Đã nhận nhiệm vụ: Đ.T.T.N Cán bộ hướng dẫn Đ.T.T.N Hải Phòng, ngày ............tháng.........năm 2016 HIỆU TRƯỞNG GS.TS.NGƯT Trần Hữu Nghị PHẦN NHẬN XÉT TÓM TẮT CỦA CÁN BỘ HƯỚNG DẪN 1. Tinh thần thái độ của sinh viên trong quá trình làm đề tài tốt nghiệp: ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... 2. Đánh giá chất lượng của đề tài tốt nghiệp (so với nội dung yêu cầu đã đề ra trong nhiệm vụ đề tài tốt nghiệp) ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... ................................................................................................................... 3. Cho điểm của cán bộ hướng dẫn: ( Điểm ghi bằng số và chữ ) ................................................................................................................... ................................................................................................................... Ngày.......tháng.........năm 2016 Cán bộ hướng dẫn chính ( Ký, ghi rõ họ tên ) 7 PHẦN NHẬN XÉT ĐÁNH GIÁ CỦA CÁN BỘ CHẤM PHẢN BIỆN ĐỀ TÀI TỐT NGHIỆP 1. Đánh giá chất lượng đề tài tốt nghiệp (về các mặt như cơ sở lý luận, thuyết minh chương trình, giá trị thực tế, ...) 2. Cho điểm của cán bộ phản biện ( Điểm ghi bằng số và chữ ) .............................................................................................................. .............................................................................................................. Ngày.......tháng.........năm 2016 Cán bộ chấm phản biện ( Ký, ghi rõ họ tên ) 8 MỤC LỤC DANH MỤC BẢNG.......................................................................................... 11 LỜI CẢM ƠN .................................................................................................... 12 LỜI NÓI ĐẦU..................................................................................................... 13 CHƯƠNG 1 : TỔNG QUAN VỀ PHÂN TÍCH QUAN ĐIỂM .................. 15 1.1 Nhu cầu về thông tin quan điểm và nhận xét ..................................... 15 1.2 Lịch sử của phân tích quan điểm và khai thác quan điểm ................. 17 1.3 Một số nghiên cứu trong phân tích quan điểm................................... 18 1.3.1 Xác định cụm từ, quan điểm ....................................................... 18 1.3.2 Sử dụng tính từ và phó từ ........................................................... 19 1.3.3 Sử dụng các động từ ................................................................... 20 1.3.4 Xác định chiều hướng, cụm từ, quan điểm ................................. 21 1.4. Nhiệm vụ của phân tích quan điểm ................................................... 21 1.5. Bài toán phân lớp quan điểm............................................................. 21 1.5.1 Phân cực quan điểm và mức độ phân cực .................................. 22 1.5.2 Nhiệm vụ của bài toán phân lớp quan điểm ............................... 23 CHƯƠNG 2 : PHÁT HIỆN TỪ MỚI CHO PHÂN TÍCH QUAN ĐIỂM . 25 2.1. Giới thiệu phương pháp .................................................................... 25 2.2 Phương pháp....................................................................................... 28 2.2.1. Các định nghĩa ........................................................................... 28 2.2.2. Tổng quan thuật toán ................................................................. 28 2.2.3. Độ đo tính hữu ích của một mẫu ............................................... 29 2.3 Độ đo khả năng để là các từ mới. ....................................................... 31 2.3.1. Kiểm tra tỷ lệ thích hợp (LRT) .................................................. 31 2.3.2. Entropy mẫu bên trái (Left pattern Entropy) ............................. 32 2.3.3. Xác xuất của một từ mới ............................................................ 32 2.3.4. Các độ đo nguyên tắc không cấu thành. .................................... 33 9 2.3.5 Cấu hình để kết hợp các yếu tố khác nhau ................................. 34 2.4. Thực nghiệm ..................................................................................... 35 2.4.1 Chuẩn bị dữ liệu .......................................................................... 35 2.4.2. Các độ đo ................................................................................... 35 2.4.3. Đánh giá các độ đo và so sánh với các phương pháp có bản .... 36 2.4.4 Điều chỉnh tham số ..................................................................... 37 2.4.5. Dự đoán mức độ cảm xúc của các từ quan điểm mới. ............... 37 2.4.6. Ứng dụng của các từ quan điểm mới cho phân tích cảm xúc. ... 38 CHƯƠNG 3 : ỨNG DỤNG TÌM TỪ QUAN ĐIỂM MỚI CHO DỮ LIỆU TIẾNG VIỆT ................................................................................................................... 40 3.1. Đặt vấn đề ......................................................................................... 40 3.2. Phương pháp...................................................................................... 41 3.3. Thực nghiệm ..................................................................................... 44 3.3.1. Dữ liệu ....................................................................................... 44 3.3.2. Xử lý dữ liệu .............................................................................. 45 KẾT LUẬN ......................................................................................................... 49 PHỤ LỤC............................................................................................................. 50 TÀI LIỆU THAM KHẢO ................................................................................. 55 10