tailieunhanh - Bài giảng Khai phá dữ liệu web (PGS.TS. Hà Quang Thụy) - Chương 5. Phân lớp

Giới thiệu về phân lớp, phân lớp học giám sát, phân lớp học giám sát đến với chương này các bạn có thể nắm rõ các vấn đề mắc thắc cần giải quyết, một số bài tập ví dụ giúp các bạn thành thạo hơn với nội dung chương này. Mời các bạn tham khảo nhé! | BÀI GIẢNG NHẬP MÔN KHAI PHÁ DỮ LIỆU CHƯƠNG 5. PHÂN LỚP PGS. TS. HÀ QUANG THỤY HÀ NỘI 9-2011 TRƯỜNG ĐẠI HỌC CÔNG NGHỆ ĐẠI HỌC QUỐC GIA HÀ NỘI Nội dung Giới thiệu phân lớp Phân lớp học giám sát Phân lớp học bán giám sát Bài toán phân lớp Đầu vào Tập dữ liệu D = {di} Tập các lớp C1, C2, , Ck mỗi dữ liệu d thuộc một lớp Ci Tập ví dụ Dexam = D1+D2+ + Dk với Di={d Dexam: d thuộc Ci} Tập ví dụ Dexam đại diện cho tập D Đầu ra Mô hình phân lớp: ánh xạ từ D sang C Sử dụng mô hình d D \ Dexam : xác định lớp của đối tượng d Phân lớp: Quá trình hai pha Xây dựng mô hình: Tìm mô tả cho tập lớp đã có Cho trước tập lớp C = {C1, C2, , Ck} Cho ánh xạ (chưa biết) từ miền D sang tập lớp C Có tập ví dụ Dexam=D1+D2+ + Dk với Di={d Dexam: d Ci} Dexam được gọi là tập ví dụ mẫu. Xây dựng ánh xạ (mô hình) phân lớp trên: Dạy bộ phân lớp. Mô hình: Luật phân lớp, cây quyết định, công thức toán học Pha 1: Dạy bộ phân lớp Tách Dexam thành Dtrain (2/3) + Dtest (1/3). Dtrain và Dtest “tính đại diện” cho miền ứng dụng Dtrain : xây dựng mô hình phân lớp (xác định tham số mô hình) Dtest : đánh giá mô hình phân lớp (các độ đo hiệu quả) Chọn mô hình có chất lượng nhất Pha 2: Sử dụng bộ phân lớp d D \ Dexam : xác định lớp của d. Ví dụ phân lớp: Bài toán cho vay B Tid Refund Marital Status Taxable Income Cheat 1 No Single 75K No 2 Yes Married 50K No 3 No Single 75K No 4 No Married 150K Yes 5 No Single 40K No 6 No Married 80K Yes 7 No Single 75K No 8 Yes Married 50K No 9 Yes Married 50K No 10 No Married 150K Yes 11 No Single 40K No 12 No Married 150K Yes 13 No Married 80K Yes 14 No Single 40K No 15 No Married 80K Yes Phân lớp: Quá trình hai pha Phân lớp: Quá trình hai pha Các loại phân lớp Phân lớp nhị phân/ đa lớp: |C|=2: phân lớp nhị phân. |C|>2: phân lớp đa lớp. Phân lớp đơn nhãn/ đa nhãn: Đơn nhãn: mỗi tài liệu được gán vào chính xác một lớp. Đa nhãn: một tài liệu có thể được gán nhiều hơn một lớp. Phân cấp: lớp này là cha/con của lớp kia Các vấn đề đánh giá mô | BÀI GIẢNG NHẬP MÔN KHAI PHÁ DỮ LIỆU CHƯƠNG 5. PHÂN LỚP PGS. TS. HÀ QUANG THỤY HÀ NỘI 9-2011 TRƯỜNG ĐẠI HỌC CÔNG NGHỆ ĐẠI HỌC QUỐC GIA HÀ NỘI Nội dung Giới thiệu phân lớp Phân lớp học giám sát Phân lớp học bán giám sát Bài toán phân lớp Đầu vào Tập dữ liệu D = {di} Tập các lớp C1, C2, , Ck mỗi dữ liệu d thuộc một lớp Ci Tập ví dụ Dexam = D1+D2+ + Dk với Di={d Dexam: d thuộc Ci} Tập ví dụ Dexam đại diện cho tập D Đầu ra Mô hình phân lớp: ánh xạ từ D sang C Sử dụng mô hình d D \ Dexam : xác định lớp của đối tượng d Phân lớp: Quá trình hai pha Xây dựng mô hình: Tìm mô tả cho tập lớp đã có Cho trước tập lớp C = {C1, C2, , Ck} Cho ánh xạ (chưa biết) từ miền D sang tập lớp C Có tập ví dụ Dexam=D1+D2+ + Dk với Di={d Dexam: d Ci} Dexam được gọi là tập ví dụ mẫu. Xây dựng ánh xạ (mô hình) phân lớp trên: Dạy bộ phân lớp. Mô hình: Luật phân lớp, cây quyết định, công thức toán học Pha 1: Dạy bộ phân lớp Tách Dexam thành Dtrain (2/3) + Dtest (1/3). Dtrain và Dtest “tính đại