tailieunhanh - Báo cáo khoa học: "A Novel Discourse Parser Based on Support Vector Machine Classification"

This paper introduces a new algorithm to parse discourse within the framework of Rhetorical Structure Theory (RST). Our method is based on recent advances in the field of statistical machine learning (multivariate capabilities of Support Vector Machines) and a rich feature space. RST offers a formal framework for hierarchical text organization with strong applications in discourse analysis and text generation. | A Novel Discourse Parser Based on Support Vector Machine Classification David A. duVerle National Institute of Informatics Tokyo Japan Pierre Marie Curie University Paris France dave@ Helmut Prendinger National Institute of Informatics Tokyo Japan helmut@ Abstract This paper introduces a new algorithm to parse discourse within the framework of Rhetorical Structure Theory RST . Our method is based on recent advances in the field of statistical machine learning multivariate capabilities of Support Vector Machines and a rich feature space. RST offers a formal framework for hierarchical text organization with strong applications in discourse analysis and text generation. We demonstrate automated annotation of a text with RST hierarchically organised relations with results comparable to those achieved by specially trained human annotators. Using a rich set of shallow lexical syntactic and structural features from the input text our parser achieves in linear time of professional annotators human agreement F-score. The parser is 5 to 12 more accurate than current state-of-the-art parsers. 1 Introduction According to Mann and Thompson 1988 all well-written text is supported by a hierarchically structured set of coherence relations which reflect the authors intent. The goal of discourse parsing is to extract this high-level rhetorical structure. Dependency parsing and other forms of syntactic analysis provide information on the grammatical structure of text at the sentential level. Discourse parsing on the other hand focuses on a higher-level view of text allowing some flexibility in the choice of formal representation while providing a wide range of applications in both analytical and computational linguistics. Rhetorical Structure Theory Mann and Thompson 1988 provides a framework to analyze and study text coherence by defining and applying a set of structural relations to composing units spans of text. Annotation of a text within the RST formalism

• Báo cáo khoa học
• Novel Discourse Parser
• Support Vector Machine Classification
• báo cáo khoa học
• báo cáo ngôn ngữ
• xử lý ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học