Bài giảng Kho dữ liệu và kinh doanh thông minh - Chương 2: Quy trình phát triển kho dữ liệu

Bài giảng giúp người học có thể xem xét những hoạt động cơ bản trong lập kế hoạch kho dữ liệu, chu trình cho một dự án kho dữ liệu, thảo luận về tổ chức, vai trò và trách nhiệm của nhóm dự án, xem xét các dấu hiệu cảnh báo và nhân tố thành công. Mời các bạn cùng tham khảo.

Data Warehouse and Business Intelligence Chương 2: Qui trình phát triển kho liệu Data Warehouse and Business Intelligence Mục tiêu  Xem xét hoạt động lập kế hoạch kho liệu  Chu trình cho dự án kho liệu  Thảo luận tổ chức, vai trị trách nhiệm nhóm dự án  Xem xét dấu hiệu cảnh báo nhân tố thành công Data Warehouse and Business Intelligence Nội dung Tổng quan Các phương pháp luận phát triển kho liệu Hoạch định kho liệu Business Dimensional Lifecycle Chuyển đổi liệu Quản trị kho liệu Các công cụ kỹ thuật cho kho liệu Data Warehouse and Business Intelligence Tổng quan  Một số câu hỏi quan trọng cần xem xét trước định xây dựng kho liệu :      Theo tiếp cận Top-down hay bottom-up ? Dùng cho mức doanh nghiệp hay phòng ban ? Cái trước - data warehouse hay data mart ? Build pilot or go with a full-fledged implementation? Data mart phục thuộc hay độc lập ? Data Warehouse and Business Intelligence Các phương pháp phát triển KDL Có phương pháp phát triển chính:   Top-Down Bottom-Up Data Warehouse and Business Intelligence 2.1 Top-Down     Cách tiếp cận Bill Inmon Dữ liệu KDL lưu trữ mức “hạt” (granularity) thấp dựa mơ hình liệu chuẩn hóa KDL trung tâm “Xưởng thông tin công ty” (Corporate Information Factory-CIF) cung cấp khung luận lý (logical framework) cho việc chuyển giao kinh doanh thông minh đến doanh nghiệp Các hoạt động kinh doanh cung cấp liệu cho CIF KDL tập trung hóa cung cấp data mart phụ thuộc thiết kế dựa mơ hình liệu có chiều Data Warehouse and Business Intelligence 2.1 Top-Down (tt) Nguồn: A Managers Guide to Data Warehousing Data Warehouse and Business Intelligence 2.1 Top-Down (tt)  Thuận lợi:  Có nhìn tồn diện (mức doanh nghiệp) liệu  Có kiến trúc rõ ràng, khơng phải việc hợp data mart khác  Lưu trữ tập trung  Các luật kiểm soát tập trung  Có thể thấy kết nhanh chóng thực bước lặp  Hạn chế:     Mất nhiều thời gian Tiềm ẩn rủi ro thất bại cao Cần có kỹ nhiều lĩnh vực mức cao Tốn chi phí Data Warehouse and Business Intelligence 10 2.2 Bottom-Up  Cách tiếp cận Ralph Kimball  KDL công ty tập hợp data mart làm cho phù hợp  Data mart tạo trước để cung cấp khả phân tích báo cáo cho việc kinh doanh chun biệt dựa mơ hình liệu chiều Data Warehouse and Business Intelligence 11 Bảng kiện yếu Data Warehouse and Business Intelligence 41 4.5 Thiết kế vật lý  Tập trung vào cấu trúc vật lí cần thiết để hỗ trợ cho thiết kế luận lý  Bao hàm tiêu chuẩn định danh thiết lập môi trường sở liệu  Các chiến lược đánh mục (indexing) phân hoạch (partitioning) sơ cần xem xét Data Warehouse and Business Intelligence 42 4.6 Thiết kế phát triển vùng liệu tạm  Thường bị đánh giá thấp dự án KDL  Bao gồm bước chính: rút trích, chuyển đổi nạp  Quá trình rút trích ln bộc lộ vấn đề chất lượng liệu hệ thống tác nghiệp  Vấn đề chất lượng liệu cần phải lưu ý giai đoạn xây dựng vùng liệu tạm Data Warehouse and Business Intelligence 43 4.7 Thiết kế kiến trúc kỹ thuật KDL yêu cầu việc tích hợp nhiều công nghệ Những nhân tố then chốt cần xem xét:  Yêu cầu nghiệp vụ  Môi trường công nghệ  Kỹ thuật chiến lược Data Warehouse and Business Intelligence 44 4.8 Chọn lựa cài đặt kết  Dùng kiến trúc kỹ thuật framework  Qui trình đánh giá tiêu chuẩn kỹ thuật theo nhân tố lượng giá cho thành phần kiến trúc định nghĩa  Sau chọn lựa cài đặt, u cầu có q trình kiểm tra để chắn việc tích hợp tương thích Data Warehouse and Business Intelligence 45 4.9 Đặc tả ứng dụng người dùng cuối  Xác định tập tiêu chuẩn ứng dụng người dùng cuối cho ứng dụng đơn lẻ  Các đặc tả ứng dụng mô tả mẫu báo cáo, thông số hướng người dùng u cầu tính tốn  Các đặc tả phải chắn nhóm phát triển người dùng có cách hiểu ứng dụng chuyển giao Data Warehouse and Business Intelligence 46 4.10 Phát triển ứng dụng người dùng cuối  Việc phát triển bao gồm cấu hình cơng cụ siêu liệu xây dựng báo báo cáo đặc tả  Các ứng dụng xây dựng dùng cơng cụ truy xuất liệu nâng cao để cung cấp sản phẩm có ý nghĩa  Dùng cơng cụ truy xuất liệu nâng cao thường đưa cấu mạnh mẽ cho người dùng dễ dàng chỉnh sửa mẫu báo cáo sẵn có Data Warehouse and Business Intelligence 47 4.11 Cài đặt  Cài đặt thể sụ hội tụ công nghệ, liệu ứng dụng người dùng cuối  Huấn luyện người dùng quan trọng  Hỗ trợ người dùng, qui trình giao tiếp, chiến lược phản hồi nên thiết lập trước người dùng truy xuất đến KDL  Cài đặt nên hoãn lại tất mảng công việc chưa sẵn sàng Data Warehouse and Business Intelligence 48 4.12 Bảo trì phát triển  Tập trung vào phía bên để chắn tính tin cậy KDL  Các số chấp nhận hiệu suất nên đo lường nhiều lần ghi log để hỗ trợ tiếp thị cho KDL  Những thay đổi nên xem xét dấu hiệu thành công thất bại  Các tiến trình ưu tiên nên thiết lập cho thỏa mãn nhu cầu tăng thêm  Sau ưu tiên xác định, quay lại từ đầu chu trình Data Warehouse and Business Intelligence 49 4.13 Quản lí dự án  Tập trung theo dõi trạng thái dự án, ghi nhận vấn đề thay đổi kiểm sốt  Giao tiếp liên tục mang tính then chốt Data Warehouse and Business Intelligence 50 Các công cụ kỹ thuật cho KDL  Kimball Lifecycle công nghệ Microsoft Data Warehouse and Business Intelligence 51 Kimball Lifecycle công nghệ Microsoft Data Warehouse and Business Intelligence 52 The Microsoft DW/BI Toolset  The relational engine (RDBMS) to manage and store the dimensional data warehouse database  SQL Server Integration Services (SSIS) to build the extract,transformation, and load (ETL) system  SQL Server Analysis Services (SSAS) analytic database to support users’ queries, particularly ad hoc use  SQL Server Analysis Services data mining to develop statistical data mining models, and also to include those models in advanced analytic applications  SQL Server Reporting Services (SSRS) to build predefined reports The majority of the Reporting Services features are most appropriate for the DW/BI team, but you may provide some ad hoc query and report building functionality with Report Builder Data Warehouse and Business Intelligence 53 The Microsoft DW/BI Toolset  Master Data Services (MDS) to create a range of master data management applications to feed the data warehouse, and possibly integrate that data management with the source transaction systems  Development and management tools, especially SQL Server BI Development Studio (BIDS) and SQL Server Management Studio to build and manage your DW/BI system Data Warehouse and Business Intelligence 54 The Microsoft DW/BI Toolset  Excel  PowerPivot  SharePoint  PowerPivot for SharePoint  Master Data Services Data Warehouse and Business Intelligence 55 .. .Chương 2: Qui trình phát triển kho liệu Data Warehouse and Business Intelligence Mục tiêu  Xem xét hoạt động lập kế hoạch kho liệu  Chu trình cho dự án kho liệu  Thảo luận... Tổng quan Các phương pháp luận phát triển kho liệu Hoạch định kho liệu Business Dimensional Lifecycle Chuyển đổi liệu Quản trị kho liệu Các công cụ kỹ thuật cho kho liệu Data Warehouse and Business... Các phương pháp phát triển KDL Có phương pháp phát triển chính:   Top-Down Bottom-Up Data Warehouse and Business Intelligence 2.1 Top-Down     Cách tiếp cận Bill Inmon Dữ liệu KDL lưu trữ