Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Sức khỏe - Y tế
Văn bản luật
Nông Lâm Ngư
Kỹ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Giới thiệu
Đăng ký
Đăng nhập
Tìm
Danh mục
Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Y tế sức khỏe
Văn bản luật
Nông lâm ngư
Kĩ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Thông tin
Điều khoản sử dụng
Quy định bảo mật
Quy chế hoạt động
Chính sách bản quyền
Giới thiệu
Đăng ký
Đăng nhập
0
Trang chủ
Công Nghệ Thông Tin
Cơ sở dữ liệu
Một phương pháp xây dựng ngữ liệu song ngữ Anh-Việt từ nguồn tài nguyên internet
tailieunhanh - Một phương pháp xây dựng ngữ liệu song ngữ Anh-Việt từ nguồn tài nguyên internet
Ngữ liệu song ngữ đóng một vai trò rất quan trọng trong nhiều ứng dụng về xử lý ngôn ngữ tự nhiên, đặc biệt là trong các ứng dụng về dịch máy. Có nhiều phương pháp khác nhau để xây dựng ngữ liệu song ngữ, đa ngữ. Trong bài viết này, chúng tôi đề xuất phương pháp thu thập, xác thực và tiền xử lý một tập lớn các câu song ngữ Anh - Việt từ các nguồn tài nguyên trên internet. | Kỷ yếu Hội nghị KHCN Quốc gia lần thứ XII về Nghiên cứu cơ bản và ứng dụng Công nghệ thông tin FAIR Huế ngày 07-08 6 2019 DOI MỘT PHƯƠNG PHÁP XÂY DỰNG NGỮ LIỆU SONG NGỮ ANH-VIỆT TỪ NGUỒN TÀI NGUYÊN INTERNET Dƣơng Minh Hùng1 Lê Mạnh Thạnh2 Lê Trung Hiếu3 1 Trƣờng Đại học Ngoại ngữ Đại học Huế 57 Nguyễn Khoa Chiêm Tp Huế 2 Khoa CNTT Trƣờng Đại học Khoa học Đại học Huế 77 Nguyễn Huệ Tp Huế 3 Trung tâm CNTT Đại học Huế 02 Lê Lợi Tp Huế dmhung1980@ lmthanh1953@ hieukien82@ TÓM TẮT Ngữ liệu song ngữ đóng một vai trò rất quan trọng trong nhiều ứng dụng về xử lý ngôn ngữ tự nhiên đặc biệt là trong các ứng dụng về dịch máy. Có nhiều phương pháp khác nhau để xây dựng ngữ liệu song ngữ đa ngữ. Trong bài báo này chúng tôi đề xuất phương pháp thu thập xác thực và tiền xử lý một tập lớn các câu song ngữ Anh - Việt từ các nguồn tài nguyên trên internet. Ngoài ra chúng tôi sử dụng các bộ lọc chiều dài câu bộ lọc bao phủ từ và bộ phân lớp Entropy cực đại để rút trích các cặp câu thực sự song song. Từ khóa Ngữ liệu song ngữ Entropy cực đại. I. GIỚI THIỆU Ngữ liệu đa ngữ nói chung và song ngữ nói riêng đóng một vai trò rất quan trọng đối với lĩnh vực xử lý ngôn ngữ tự nhiên đặc biệt là trong lĩnh vực dịch máy Machine Translation - MT nói chung và dịch máy thống kê dịch máy mạng neural nói riêng. Độ chính xác của hệ thống dịch máy phụ thuộc rất lớn vào chất lƣợng của ngữ liệu song ngữ. Vì vậy có rất công trình khoa học nghiên cứu các phƣơng pháp nhằm tạo ra các kho ngữ liệu song ngữ có chất lƣợng tốt làm tài nguyên để phát triển các hệ thống dịch tự động. Trên thế giới ngƣời ta đã xây dựng đƣợc khá nhiều các kho ngữ liệu song ngữ lớn chẳng hạn kho ngữ liệu song ngữ HKUST và PKU863 của cặp Anh - Hoa kho ngữ liệu Europarl đƣợc trích từ văn bản Nghị Viện Châu Âu và văn bản chính phủ của một số nƣớc kho ngữ liệu song ngữ JENAAD cho cặp ngôn ngữ Anh - Nhật Đối với tiếng Việt số lƣợng các bộ ngữ liệu chƣa đƣợc quan tâm nghiên cứu nhiều. .
Ðông Tuyền
58
7
pdf
Báo lỗi
Trùng lắp nội dung
Văn hóa đồi trụy
Phản động
Bản quyền
File lỗi
Khác
Upload
Tải xuống
đang nạp các trang xem trước
Bấm vào đây để xem trước nội dung
Tải xuống
TÀI LIỆU LIÊN QUAN
Báo cáo kỹ thuật: Xây dựng kho ngữ liệu song ngữ Anh - Việt
46
116
2
Đo độ tương tự ngữ nghĩa của cặp ngôn ngữ Anh-Việt theo mô hình phân phối ngữ nghĩa song ngữ
7
69
2
Phương pháp giảng dạy song ngữ ở các trường tiểu học vùng dân tộc thiểu số
70
130
0
Xây dựng tự động từ điển Việt - Anh và ứng dụng trong lĩnh vực du lịch
9
65
5
Các đặc điểm chính của song ngữ Khmer-Việt vùng Nam Bộ
8
106
1
Truyện cười song ngữ Anh - Việt
154
98
2
Đời sống song ngữ của người Cống và Hà Nhì ở Tây Bắc - Trần Văn Hà
7
85
0
Giáo dục song ngữ: Lựa chọn mô hình của các nước Châu Á
9
60
0
Xây dựng kho ngữ vựng song ngữ Việt-Ê Đê dựa trên mô hình tương tác Việt-Ê Đê
5
49
2
Đời sống song ngữ của người Cống và Hà Nhì ở Tây Bắc
7
79
0
TÀI LIỆU XEM NHIỀU
Một Case Về Hematology (1)
8
461905
55
Giới thiệu :Lập trình mã nguồn mở
14
22832
64
Tiểu luận: Tư tưởng Hồ Chí Minh về xây dựng nhà nước trong sạch vững mạnh
13
10939
531
Câu hỏi và đáp án bài tập tình huống Quản trị học
14
10127
449
Phân tích và làm rõ ý kiến sau: “Bài thơ Tự tình II vừa nói lên bi kịch duyên phận vừa cho thấy khát vọng sống, khát vọng hạnh phúc của Hồ Xuân Hương”
3
9552
104
Ebook Facts and Figures – Basic reading practice: Phần 1 – Đặng Tuấn Anh (Dịch)
249
8321
1127
Tiểu luận: Nội dung tư tưởng Hồ Chí Minh về đạo đức
16
8264
423
Mẫu đơn thông tin ứng viên ngân hàng VIB
8
7879
2222
Đề tài: Dự án kinh doanh thời trang quần áo nữ
17
6748
253
Giáo trình Tư tưởng Hồ Chí Minh - Mạch Quang Thắng (Dành cho bậc ĐH - Không chuyên ngành Lý luận chính trị)
152
5903
1423
TỪ KHÓA LIÊN QUAN
Cơ sở dữ liệu
Ngữ liệu song ngữ
Xây dựng khối ngữ liệu Anh Việt
Entropy cực đại
Xử lý ngôn ngữ tự nhiên
Bài toán rút trích câu song song
Xây dựng kho ngữ liệu song ngữ Anh Việt
Cấu trúc các kho ngữ liệu song ngữ
Mẫu ngữ liệu song ngữ
Song ngữ Anh Việt
Hai kho ngữ liệu câu Anh Việt
Độ tương tự ngữ nghĩa song ngữ
Nhúng từ song ngữ
Mô hình mạng nơron
Không gian vector biểu diễn ngữ nghĩa
Ngữ nghĩa song ngữ Việt Anh
Phương pháp giảng dạy song ngữ
Tài liệu dạy song ngữ
Dạy song ngữ ở trường tiểu học
Giáo dục song ngữ
Song ngữ dân tộc Việt
Kinh nghiệm dạy song ngữ
Từ điển Anh Việt
Từ điển song ngữ
Trích rút cụm từ song ngữ
Xây dựng kho ngữ liệu song ngữ
Kho ngữ liệu song ngữ
Từ điển song ngữ Việt Anh miền du lịch
Song ngữ Khmer Việt
Song ngữ Khmer Việt vùng Nam Bộ
Tâm lí ngôn ngữ cá nhân
Song ngữ bình đẳng
Song ngữ bền vững
Đặc điểm xã hội ngôn ngữ
Truyện cười song ngữ
Song ngữ Anh Việt
Tài liệu thư giãn
Tài liệu giải trí
Tài liệu song ngữ
Truyện song ngữ
Truyện cười tiếng Anh
Truyện cười song ngữ Anh Việt
Đời sống song ngữ
Đời sống song ngữ của người Cống
Đời sống song ngữ của người Hà Nhì
Đặc điểm kinh tế xã hội
Tiếng Việt và tiếng mẹ đẻ
Phạm vi giao tiếp song ngữ
Mô hình giáo dục song ngữ
Giáo dục song ngữ bán phần
Giáo dục song ngữ hai chiều
Ngôn ngữ thứ hai
Xây dựng kho ngữ vựng song ngữ
Ngữ vựng song ngữ Việt Ê Đê
Mô hình tương tác Việt Ê Đê
Kho ngữ vựng
Ngôn ngữ người dân tộc thiểu số
Song ngữ của người Cống
Người Hà Nhì ở Tây Bắc
Người Hà Nhì
Quá trình hình thành song ngữ
Hình thành trạng thái song ngữ
Luận án Tiến sỹ Ngôn ngữ học
Luận án Tiến sỹ
Tình hình song ngữ Khmer Việt
Bối cảnh tiếp xúc ngôn ngữ Khmer Việt
Cộng đồng song ngữ Khmer Việt
Ngôn ngữ học tiếp xúc
Phân loại người Khơ Me song ngữ Việt
Nghiên cứu người song ngữ
Đặc điểm của nhóm người song ngữ
Người Khơ Me song ngữ Việt
Đồng bào Khơ me Nam Bộ
luận văn
công nghệ thông tin
cơ sở dữ liệu song ngữ
song ngữ web
ứng dụng ngôn ngữ tự nhiên
dịch máy thống kê
xây dựng từ điển song ngữ
tìm kiếm đa ngôn ngữ
Tự học tiếng Việt song ngữ Việt Hoa
Sách song ngữ Việt Hoa
Tài liệu Việt Hoa
Tham khảo song ngữ Việt Hoa
Nghiên cứu song ngữ Việt Hoa
Hướng dẫn học tiếng Hoa
Đào tạo song ngữ cấp tiểu học
Mô hình song ngữ
Mô hình giáo dục tại các trường
Ngôn ngữ hỏi
Nghiên cứu đối chiếu song ngữ
Hành vi ngôn ngữ hỏi
Ngữ dụng học
So sánh đối chiếu hành vi ngôn ngữ
Bình diện ngữ nghĩa
Luận văn Thạc sĩ
Ngôn ngữ học
Luận văn Thạc sĩ Ngôn ngữ học
Cảnh huống song ngữ Việt
Ngôn ngữ học xã hội
Trạng thái đa ngữ xã hội
Hướng dẫn dành cho giáo viên mầm non
Rào cản ngôn ngữ trong trường mầm non
Phát triển ngôn ngữ mầm non
Đa ngôn ngữ
Phát triển song ngữ
Sự phát triển song ngữ cân bằng
Bài giảng Tính toán song song
Tính toán song song
Giới thiệu về tính toán song song
Thuật ngữ tính toán song song
Mô hình lập trình song song
200 truyện song ngữ Anh Việt
Truyện song ngữ Anh Việt
Truyện ngắn song ngữ
Tài liệu học tiếng Anh
Kỹ năng đọc hiểu tiếng Anh
Ngữ pháp tiếng Anh
Tóm tắt luận án tiến sĩ kỹ thuật
Ngôn ngữ dân tộc thiểu số
Tiếng Ê Đê
Dạy và học tiếng Ê Đê
Nguồn dữ liệu song ngữ
Xử lý tiếng Ê Đê
Khoa học máy tính
Quản lý ngữ vựng song ngữ
Chương trình tích hợp giáo dục song ngữ
Trẻ mầm non
Chương trình giáo dục song ngữ
Giáo dục mầm non
Giáo dục ngoại ngữ
Nguyên lý ngôn ngữ lập trình
Bài giảng Nguyên lý ngôn ngữ lập trình
Ngôn ngữ lập trình song song
Sub Proprogam level
Cchương trình giám sát
Truyền thông điệp
Tóm tắt Luận văn Thạc sĩ Kỹ thuật
Song ngữ Việt Khmer
Kho ngữ vựng song ngữ Việt Khmer
Xây dựng kho ngữ vựng
Văn hóa Khmer
Văn hóa Việt
TÀI LIỆU MỚI ĐĂNG
THE ANTHROPOLOGY OF ONLINE COMMUNITIES BY Samuel M.Wilson and Leighton C. Peterson
19
154
0
08-05-2024
Lịch sử Đội TNTP Hồ Chí Minh - CHƯƠNG III VÂNG LỜI BÁC DẠY, LÀM NGHÌN VIỆC TỐT, CHỐNG MỸ, CỨU NƯỚC, THIẾU NIÊN SĂN SÀNG
45
140
0
08-05-2024
HƯỚNG DẪN SỬ DỤNG PHẦN MỀM CAITA part 9
18
132
0
08-05-2024
Hệ thống làm lạnh và điều hòa không khí
21
130
0
08-05-2024
Giáo trình kỹ thuật sữa chữa ô tô, máy nổ part 8
47
140
1
08-05-2024
Fecal Incontinence Diagnosis and Treatment - part 8
35
104
0
08-05-2024
Thương hiệu sản phẩm làng nghề: Đã ít, lại thiếu tính cạnh tranh
5
118
0
08-05-2024
Loading Data into a Database - 19
40
101
0
08-05-2024
ĐỀ THI THỬ ĐH NĂM 2011 MÔN VẬT LÍ _ ĐỀ SỐ 101
7
88
0
08-05-2024
Giáo trình báo chí điều tra part 4
44
101
0
08-05-2024
TÀI LIỆU HOT
Mẫu đơn thông tin ứng viên ngân hàng VIB
8
7879
2222
Giáo trình Tư tưởng Hồ Chí Minh - Mạch Quang Thắng (Dành cho bậc ĐH - Không chuyên ngành Lý luận chính trị)
152
5903
1423
Ebook Chào con ba mẹ đã sẵn sàng
112
3776
1243
Ebook Tuyển tập đề bài và bài văn nghị luận xã hội: Phần 1
62
5367
1137
Ebook Facts and Figures – Basic reading practice: Phần 1 – Đặng Tuấn Anh (Dịch)
249
8321
1127
Giáo trình Văn hóa kinh doanh - PGS.TS. Dương Thị Liễu
561
3526
646
Tiểu luận: Tư tưởng Hồ Chí Minh về xây dựng nhà nước trong sạch vững mạnh
13
10939
531
Giáo trình Sinh lí học trẻ em: Phần 1 - TS Lê Thanh Vân
122
3713
525
Giáo trình Pháp luật đại cương: Phần 1 - NXB ĐH Sư Phạm
274
4105
519
Bài tập nhóm quản lý dự án: Dự án xây dựng quán cafe
35
4150
480
crossorigin="anonymous">
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.