Luận văn Thạc sĩ Khoa học máy tính: Các phương pháp phân đoạn tiếng Việt và ứng dụng

Nhiệm vụ nghiên cứu của đề tài là tìm hiểu những kiến thức tổng quan về tiếng Việt. Tìm hiểu phương pháp phân đoạn tiếng Việt, phương pháp khử nhập nhằng. Cài đặt hệ thống phân đoạn văn bản tiếng Việt. Xây dựng kho ngữ liệu thử nghiệm và đánh giá. Mời các bạn cùng tham khảo! | i ĐẠI HỌC THÁI NGUYÊN TRƢỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TIN VÀ TRUYỀN THÔNG VŨ THỊ HẰNG CÁC PHƢƠNG PHÁP PHÂN ĐOẠN TIẾNG VIỆT VÀ ỨNG DỤNG LUẬN VĂN THẠC SĨ KHOA HỌC MÁY TÍNH Thái Nguyên - Năm 2015 Số hóa bởi Trung tâm Học liệu ĐHTN http i ĐẠI HOẠC THÁI NGUYÊN TRƢỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TIN VÀ TRUYỀN THÔNG VŨ THỊ HẰNG CÁC PHƢƠNG PHÁP PHÂN ĐOẠN TIẾNG VIỆT VÀ ỨNG DỤNG Chuyên ngành KHOA HỌC MÁY TÍNH Mã số LUẬN VĂN THẠC SĨ KHOA HỌC MÁY TÍNH NGƢỜI HƢỚNG DẪN KHOA HỌC TS. BÙI VĂN THANH Thái Nguyên - Năm 2015 Số hóa bởi Trung tâm Học liệu ĐHTN http ii MỤC LỤC Trang LỜI CẢM ƠN . v LỜI CAM ĐOAN . vi DANH MỤC CÁC KÝ HIỆU VÀ CHỮ VIẾT TẮT . vii DANH MỤC BẢNG . viii DANH MỤC HÌNH . ix MỞ ĐẦU . 1 Chƣơng 1. TỔNG QUAN . 6 . KHÁI QUÁT VỀ TIẾNG VIỆT . 6 . Đặc điểm từ tiếng Việt . 6 . Các từ loại tiếng Việt . 7 . VẤN ĐỀ PHÂN ĐOẠN TIẾNG VIỆT . 10 . Từ vựng tiếng Việt . 10 . Tiếng đơn vị cấu tạo lên từ . 11 . Cấu tạo từ . 13 . PHÂN ĐOẠN TỪ TIẾNG VIỆT BẰNG MÁY TÍNH . 17 . TỔNG KẾT CHƢƠNG . 18 Chƣơng 2. MỘT SỐ PHƢƠNG PHÁP PHÂN ĐOẠN VĂN BẢN TIẾNG VIỆT . 19 . MÔ HÌNH LRMM . 19 . Thuật toán Maximum Matching đơn giản . 19 Số hóa bởi Trung tâm Học liệu ĐHTN http iii . Thuật toán Maximum Matching phức tạp . 19 . PHƢƠNG PHÁP WFST Weighted Finite-State Transducer . 20 . MÔ HÌNH HỌC MÁY CRF . 23 . Định nghĩa CRF . 23 . Hàm tiềm năng của các mô hình CRF . 26 . Conditional Random Fields . 26 . TỔNG KẾT CHƢƠNG . 28 Chƣơng 3. BÀI TOÁN PHÂN ĐOẠN TIẾNG VIỆT . 29 . PHÁT BIỂU BÀI TOÁN . 29 . Cấu trúc chƣơng trình . 30 . Tiền xử lý số liệu . 32 . Tách câu . 34 . Tách từ . 36 . Khử nhập nhằng . 36 . CÁC LOẠI NHẬP NHẰNG KHI TÁCH TỪ . 36 . Nhập nhằng do so khớp cực đại FMM BMM sinh ra . 37 . Nhập nhằng theo một số loại khác . 37 . CÁCH KHỬ NHẬP NHẰNG . 41 Cải tiến phƣơng pháp so khớp cực đại. 41 Khử nhập nhằng theo .

Không thể tạo bản xem trước, hãy bấm tải xuống
TÀI LIỆU LIÊN QUAN
TỪ KHÓA LIÊN QUAN
TÀI LIỆU MỚI ĐĂNG
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.