Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Sức khỏe - Y tế
Văn bản luật
Nông Lâm Ngư
Kỹ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Giới thiệu
Đăng ký
Đăng nhập
Tìm
Danh mục
Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Y tế sức khỏe
Văn bản luật
Nông lâm ngư
Kĩ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Thông tin
Điều khoản sử dụng
Quy định bảo mật
Quy chế hoạt động
Chính sách bản quyền
Giới thiệu
Đăng ký
Đăng nhập
0
Trang chủ
Luận Văn - Báo Cáo
Báo cáo khoa học
Báo cáo khoa học: "Designing a Task-Based Evaluation Method ology for a Spoken Machine Translation System"
Đang chuẩn bị liên kết để tải về tài liệu:
Báo cáo khoa học: "Designing a Task-Based Evaluation Method ology for a Spoken Machine Translation System"
Mỹ Anh
89
4
pdf
Đang chuẩn bị nút TẢI XUỐNG, xin hãy chờ
Tải xuống
In this paper, I discuss issues pertinent to the design of a task-based evaluation methodology for a spoken machine translation (MT) system processing human to human communication rather than human to machine communication. I claim that system mediated human to human communication requires new evaluation criteria and metrics based on goal complexity and the speaker's prioritization of goals. ystem | Designing a Task-Based Evaluation Methodology for a Spoken Machine Translation System Kavita Thomas Language Technologies Institute Carnegie Mellon University 5000 Forbes Avenue Pittsburgh PA 15213 USA kavita@cs.emu.edu Abstract In this paper I discuss issues pertinent to the design of a task-based evaluation methodology for a spoken machine translation MT system processing human to human communication rather than human to machine communication. I claim that system mediated human to human communication requires new evaluation criteria and metrics based on goal complexity and the speaker s prioritization of goals. 1 Introduction Task-based evaluations for spoken language systems focus on evaluating whether the speaker s task is achieved rather than evaluating utterance translation accuracy or other aspects of system performance. Our MT project focuses on the travel reservation domain and facilitates on-line translation of speech between clients and travel agents arranging travel plans. Our prior evaluations Gates et al. 1996 have focused on end-to-end translation accuracy at the utterance level i.e. fraction of utterances translated perfectly acceptably and unacceptably . While this method of evaluation conveys translation accuracy it does not give any information about how many of the client s travel arrangement goals have been conveyed nor does it take into account the complexity of the speaker s goals and task or the priority that they assign to their goals for example the same end-to-end score for two dialogues may hide the fact that in one dialogue the speakers were able to communicate their most important goals while in the other they were only able to communicate successfully the less important goals. One common approach to evaluating spoken language systems focusing on human-machine dialogue is to compare system responses to cor rect reference answers however as discussed by Walker et al. 1997 the set of reference answers for any particular user query is .
TÀI LIỆU LIÊN QUAN
Báo cáo khoa học: "Designing a Task-Based Evaluation Method ology for a Spoken Machine Translation System"
BÁO CÁO NGHIÊN CỨU KHOA HỌC KỸ THUẬT: STUDYING, DESIGNING, FABRICATING AND TESTING SPIKE TOTH TYPE SUPER FINE GRINDER
báo cáo khoa học: " Designing an experimental HIV/HCV intervention to promote the safe re-use of drug preparation materials by injection drug users in Puerto Rico"
báo cáo khoa học: "The behaviour change wheel: A new method for characterising and designing behaviour change interventions"
báo cáo khoa học: " Designing an automated clinical decision support system to match clinical practice guidelines for opioid therapy for chronic pain"
báo cáo khoa học: "Designing theoretically-informed implementation interventions"
báo cáo khoa học: "Designing theoretically-informed implementation interventions: Fine in theory, but evidence of effectiveness in practice is needed"
báo cáo khoa học: " Designing an automated clinical decision support system to match clinical practice guidelines for opioid therapy for chronic pain"
Báo cáo y học: "Designing an automated clinical decision support system to match clinical practice guidelines for opioid therapy for chronic pain"
báo cáo sinh học:" Designing financial-incentive programmes for return of medical service in underserved areas: seven management functions"
crossorigin="anonymous">
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.