Báo cáo tài liệu vi phạm
Giới thiệu
Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Sức khỏe - Y tế
Văn bản luật
Nông Lâm Ngư
Kỹ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
THỊ TRƯỜNG NGÀNH HÀNG
NÔNG NGHIỆP, THỰC PHẨM
Gạo
Rau hoa quả
Nông sản khác
Sữa và sản phẩm
Thịt và sản phẩm
Dầu thực vật
Thủy sản
Thức ăn chăn nuôi, vật tư nông nghiệp
CÔNG NGHIỆP
Dệt may
Dược phẩm, Thiết bị y tế
Máy móc, thiết bị, phụ tùng
Nhựa - Hóa chất
Phân bón
Sản phẩm gỗ, Hàng thủ công mỹ nghệ
Sắt, thép
Ô tô và linh kiện
Xăng dầu
DỊCH VỤ
Logistics
Tài chính-Ngân hàng
NGHIÊN CỨU THỊ TRƯỜNG
Hoa Kỳ
Nhật Bản
Trung Quốc
Hàn Quốc
Châu Âu
ASEAN
BẢN TIN
Bản tin Thị trường hàng ngày
Bản tin Thị trường và dự báo tháng
Bản tin Thị trường giá cả vật tư
Tìm
Danh mục
Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Y tế sức khỏe
Văn bản luật
Nông lâm ngư
Kĩ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
NGÀNH HÀNG
NÔNG NGHIỆP, THỰC PHẨM
Gạo
Rau hoa quả
Nông sản khác
Sữa và sản phẩm
Thịt và sản phẩm
Dầu thực vật
Thủy sản
Thức ăn chăn nuôi, vật tư nông nghiệp
CÔNG NGHIỆP
Dệt may
Dược phẩm, Thiết bị y tế
Máy móc, thiết bị, phụ tùng
Nhựa - Hóa chất
Phân bón
Sản phẩm gỗ, Hàng thủ công mỹ nghệ
Sắt, thép
Ô tô và linh kiện
Xăng dầu
DỊCH VỤ
Logistics
Tài chính-Ngân hàng
NGHIÊN CỨU THỊ TRƯỜNG
Hoa Kỳ
Nhật Bản
Trung Quốc
Hàn Quốc
Châu Âu
ASEAN
BẢN TIN
Bản tin Thị trường hàng ngày
Bản tin Thị trường và dự báo tháng
Bản tin Thị trường giá cả vật tư
Thông tin
Tài liệu Xanh là gì
Điều khoản sử dụng
Chính sách bảo mật
0
Trang chủ
Công Nghệ Thông Tin
Cơ sở dữ liệu
Các tiêu chí ngôn ngữ trong việc xây dựng kho ngữ liệu tiếng Việt
Đang chuẩn bị liên kết để tải về tài liệu:
Các tiêu chí ngôn ngữ trong việc xây dựng kho ngữ liệu tiếng Việt
Hồng Trúc
956
7
pdf
Không đóng trình duyệt đến khi xuất hiện nút TẢI XUỐNG
Tải xuống
Bài viết trình bày các tiêu chí lấy mẫu ngôn ngữ trong việc xây dựng kho ngữ liệu cân bằng bao gồm: Lựa chọn văn bản, tính đại diện, tính cân bằng, chủ đề, kích thước và tính đồng nhất. Chúng tôi áp dụng các tiêu chí này vào việc xây dựng kho ngữ liệu tiếng Việt (Vietnamese Corpus 1.0 – VnC 1.0) với kích thước 100 triệu từ bao gồm 10 % văn bản nói và 90 % văn bản viết được thu thập chủ yếu từ năm 2000 đến nay. | Kỷ yếu Hội nghị KHCN Quốc gia lần thứ XIII về Nghiên cứu cơ bản và ứng dụng Công nghệ thông tin FAIR Nha Trang ngày 8-9 10 2020 DOI 10.15625 vap.2020.00146 CÁC TIÊU CHÍ NGÔN NGỮ TRONG VIỆC XÂY DỰNG KHO NGỮ LIỆU TIẾNG VIỆT Võ Diệp Như Đinh Điền Trung tâm Ngôn ngữ học Tính toán Đại học Khoa học Tự nhiên ĐHQG TP. HCM vodiepnhu@gmail.com ddien@fit.hcmus.edu.vn TÓM TẮT Trong lĩnh vực xử lý ngôn ngữ tự nhiên việc sử dụng các mô hình máy học để phụ vụ giải quyết các bài toán càng chiếm ưu thế. Tuy nhiên để có được kết quả tốt cần có ngữ liệu huấn luyện đạt yêu cầu mang được tính đại diện cho ngôn ngữ. Vì thế kho ngữ liệu cần đảm bảo được tính đại diện tính cân bằng cụ thể là lấy mẫu ngôn ngữ có kích thước phù hợp theo các tiêu chí khi xây dựng kho ngữ liệu. Trong phạm vi bài báo chúng tôi trình bày các tiêu chí lấy mẫu ngôn ngữ trong việc xây dựng kho ngữ liệu cân bằng bao gồm lựa chọn văn bản tính đại diện tính cân bằng chủ đề kích thước và tính đồng nhất. Chúng tôi áp dụng các tiêu chí này vào việc xây dựng kho ngữ liệu tiếng Việt Vietnamese Corpus 1.0 VnC 1.0 với kích thước 100 triệu từ bao gồm 10 văn bản nói và 90 văn bản viết được thu thập chủ yếu từ năm 2000 đến nay. Từ khóa Kho ngữ liệu xây dựng kho ngữ liệu thu thập ngữ liệu ngôn ngữ học ngữ liệu. I. GIỚI THIỆU Việc sử dụng và khai thác các kho ngữ liệu đã mang lại nhiều kết quả ứng dụng hữu ích trong nhiều lĩnh vực từ nghiên cứu ngôn ngữ giảng dạy ngôn ngữ cho đến các lĩnh vực khác như kinh tế thương mại đời sống xã hội hay công tác điều tra . Đặc biệt là phải kể đến ứng dụng trong ngôn ngữ học - máy tính. Việc khai thác các kho ngữ liệu thực tế rút trích các quy luật ngôn ngữ theo nhiều phương pháp thống kê máy học để áp dụng những quy luật này vào các trường hợp tương tự nhằm giải quyết các bài toán trong thực tế. Tuy nhiên để kết quả có thể đạt được độ chính xác như mong muốn thể hiện được đặc trưng sử dụng ngôn ngữ của một cộng đồng người sử dụng trong một khoản thời gian nhất định thì những kho ngữ liệu cần
TÀI LIỆU LIÊN QUAN
Đề xuất các tiêu chí xác định lỗi ngôn ngữ qua khảo sát các bản dịch từ Hán sang Việt của sinh viên ở trình độ sơ cấp
Bảo tồn ngôn ngữ các dân tộc thiểu số ở Việt Nam trước nguy cơ tiêu vong
Thiết lập đề thi trắc nghiệm trực tuyến trên cơ sở các tiêu chí ngôn ngữ của khung tham chiếu năng lực ngoại ngữ chung Châu Âu (CEFR)
Từ trái nghĩa trong các tiêu đề trên báo chí Nga
“Tắt tố” trong các tiêu đề báo chí tiếng Anh và tiếng Việt
Khoá luận tốt nghiệp: Khảo sát các phương tiện tu từ và biện pháp tu từ trong cách đặt tiêu đề, đề dẫn của báo chí
Lô-gô trên măng-séc trang Tạp chí y Tế Công Cộng Phần mềm Tạp chí mở Hướng dẫn Người dùng Bí danh Mật khẩu Ghi nhớ Ngôn ngữ Nội dung Tạp chí Tìm kiếm Duyệt Theo Số tạp chí Theo Tác giả Theo Tiêu đề Các tạp chí khác Cỡ chữ Nhỏ Vừa Lớn Thông tin Cho Bạn đọc Cho Tác giả Cho Thủ thư Trang nhất Giới thiệu Đăng nhập Đăng ký Tìm kiếm Số mới ra Số cũ Trang nhất Số cũ S. 8 (2007) S. 8 (2007) Thö cuûa Toång bieân taäp göûi baïn ño
Một số biện pháp rèn luyện kĩ năng giao tiếp phi ngôn ngữ cho học viên các trường sĩ quan quân đội hiện nay
Giải thích và hướng dẫn áp dụng các nguyên tắc thiết lập tiêu đề cho bộ tiêu đề chủ đề tiếng Việt
Báo cáo " CáC TIÊU CHí ĐáNH GIá Đề CƯƠNG MÔN HọC CủA CHƯƠNG TRìNH ĐàO TạO ĐạI HọC THEO TíN CHỉ ở ĐạI HọC QUốC GIA Hà NộI "
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.