tailieunhanh - Báo cáo khoa học: "A Noisy-Channel Approach to Question Answering"

We introduce a probabilistic noisychannel model for question answering and we show how it can be exploited in the context of an end-to-end QA system. Our noisy-channel system outperforms a stateof-the-art rule-based QA system that uses similar resources. We also show that the model we propose is flexible enough to accommodate within one mathematical framework many QA-specific resources and techniques, which range from the exploitation of WordNet, structured, and semi-structured databases to reasoning, and paraphrasing. impossible) to understand what contributes to the performance of a system and what doesn’t. . | A Noisy-Channel Approach to Question Answering Abdessamad Echihabi and Daniel Marcu Information Sciences Institute Department of Computer Science University of Southern California 4676 Admiralty Way Suite 1001 Marina Del Rey CA 90292 echihabi marcu @ Abstract We introduce a probabilistic noisy-channel model for question answering and we show how it can be exploited in the context of an end-to-end QA system. Our noisy-channel system outperforms a state-of-the-art rule-based QA system that uses similar resources. We also show that the model we propose is flexible enough to accommodate within one mathematical framework many QA-specific resources and techniques which range from the exploitation of WordNet structured and semi-structured databases to reasoning and paraphrasing. 1 Introduction Current state-of-the-art Question Answering QA systems are extremely complex. They contain tens of modules that do everything from information retrieval sentence parsing Ittycheriah and Roukos 2002 Hovy et al. 2001 Moldovan et al 2002 question-type pinpointing Ittycheriah and Roukos 2002 Hovy et al. 2001 Moldovan et al 2002 semantic analysis Xu et al. Hovy et al. 2001 Moldovan et al 2002 and reasoning Moldovan et al 2002 . They access external resources such as the WordNet Hovy et al. 2001 Pasca and Harabagiu 2001 Prager et al. 2001 the web Brill et al. 2001 structured and semistructured databases Katz et al. 2001 Lin 2002 Clarke 2001 . They contain feedback loops ranking and re-ranking modules. Given their complexity it is often difficult and sometimes impossible to understand what contributes to the performance of a system and what doesn t. In this paper we propose a new approach to QA in which the contribution of various resources and components can be easily assessed. The fundamental insight of our approach which departs significantly from the current architectures is that at its core a QA system is a pipeline of only two modules An IR engine that retrieves a set of M .

• Báo cáo khoa học
• A Noisy Channel
• Question Answering
• Abdessamad Echihabi and Daniel Marcu
• báo cáo khoa học
• mô hình ngôn ngữ
• xử lý ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học