KPDL_C1

BÀI GIẢNG NHẬP MÔN KHAI PHÁ DỮ LIỆU CHƯƠNG GIỚI THIỆU CHUNG VỀ KHAI PHÁ DỮ LIỆU PGS TS HÀ QUANG THỤY HÀ NỘI 09-2013 TRƯỜNG ĐẠI HỌC CÔNG NGHỆ ĐẠI HỌC QUỐC GIA HÀ NỘI Nội dung Nhu cầu khai phá liệu (KPDL) Khái niệm KPDL phát tri thức CSDL KPDL xử lý CSDL truyền thống Kiểu liệu KPDL Kiểu mẫu khai phá Công nghệ KPDL điển hình Một số ứng dụng điển hình Các vấn đề KPDL 2 Nhu cầu khai phá liệu  Sự bùng nổ liệu     Lý công nghệ Lý xã hội Thể Ngành kinh tế định hướng liệu  Kinh tế tri thức  Phát tri thức từ liệu Bùng nổ liệu: Luật Moore  Xuất xứ   Gordon E Moore (1965) Cramming more components onto integrated circuits, Electronics, 38 (8), April 19, 1965 Một quan sát dự báo “Phương ngôn 2x    Số lượng bán dẫn tích hợp chíp tăng gấp đơi sau khoảng hai năm Chi phí sản xuất mạch bán dẫn với tính giảm nửa sau hai năm Phiên 18 tháng: rút ngắn chu kỳ thời gian Luật Moore & công nghiệp điện tử  Dẫn dắt ngành công nghệ bán dẫn  Mơ hình cho ngành cơng nghiệp mạch bán dẫn  “Định luật Moore tạo khả cho phát triển chúng tơi, hiệu lực tốt Intel… Định luật Moore khơng mạch bán dẫn Nó cách sử dụng sáng tạo mạch bán dẫn” Paul S Otellini, Chủ tịch Giám đốc điều hành Tập đoàn Intel  “tồn chu trình thiết kế, phát triển, sản xuất, phân phối bán hàng coi có tính bền vững tuân theo định luật Moore… Nếu đánh bại định luật Moore, thị trường hấp thụ hết sản phẩm mới, kỹ sư bị việc làm Nếu bị tụt sau định luật Moore, khơng có để mua, gánh nặng đè lên đôi vai chuỗi nhà phân phối sản phẩm” Daniel Grupp, Giám đốc PT công nghệ tiên tiến, Acorn Technologies, Inc (http://acorntech.com/)  Thúc đẩy công nghệ xử lý, lưu giữ truyền dẫn liệu  Công nghệ bán dẫn tảng công nghiệp điện tử  Định luật Moore với công nghiệp phần cứng máy tính: xử lý Intel 40 năm qua (trang tiếp theo)  Bùng nổ lực xử lý tính tốn lưu trữ liệu  Tác động tới phát triển công nghệ sở liệu (tổ chức quản lý liệu) công nghệ mạng (truyền dẫn liệu) Luật Moore: Bộ xử lý Intel “Another decade is probably straightforward There is certainly no end to creativity” Gordon Moore, Intel Chairman Emeritus of the Board Speaking of extending Moore’s Law at the International Solid-State Circuits Conference (ISSCC), February 2003 Hệ thống ước bội đơn vị đo Giá trị, cách đọc bội ước điển hình Thiết bị thu thập – lưu trữ liệu  Năng lực số hóa  Thiết bị số hóa đa dạng  Mọi lĩnh vực Quản lý, Thương mại, Khoa học…  Một ví dụ điển hình: SDSS  Sloan Digital Sky Survey  http://www.sdss.org/  Đã tạo đồ 3-chiều có chứa 930.000 thiên hà 120.000 quasar  Kính viễn vọng  Làm việc từ 2000  Vài tuần đầu tiên: thu thập liệu thiên văn học = toàn khứ Sau 10 năm: 140 TB  Kính viễn vọng  Large Synoptic Survey Telescope  Bắt đầu hoạt động 2016 Sau ngày có 140 TB Tiến hóa Cơng nghệ CSDL: năm 2006  Tiến hóa cơng nghệ CSDL [HK0106]: Hệ CSDL mở rộng, KDL & KPDL, Hệ CSDL dựa Web Tiến hóa Cơng nghệ CSDL: năm 2011  Tiến hóa cơng nghệ CSDL [HKP11]: Hệ CSDL mở rộng Phân tích liệu mở rộng (có KPDL) 10