Xây dựng hệ thống trích lọc dữ liệu cho kho dữ liệu và ứng dụng trong điều tra thủy sản đối với dịch hại trên tôm và cá

BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC CẦN THƠ TRƯƠNG THỊ DIỄM XÂY DỰNG HỆ THỐNG TRÍCH LỌC DỮ LIỆU CHO KHO DỮ LIỆU VÀ ỨNG DỤNG TRONG ĐIỀU TRA THỦY SẢN ĐỐI VỚI DỊCH HẠI TRÊN TÔM VÀ CÁ LUẬN VĂN THẠC SĨ CÔNG NGHỆ THÔNG TIN Cần Thơ – 2010 BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC CẦN THƠ TRƯƠNG THỊ DIỄM XÂY DỰNG HỆ THỐNG TRÍCH LỌC DỮ LIỆU CHO KHO DỮ LIỆU VÀ ỨNG DỤNG TRONG ĐIỀU TRA THỦY SẢN ĐỐI VỚI DỊCH HẠI TRÊN TÔM VÀ CÁ Chuyên ngành: HỆ THỐNG THÔNG TIN Mã số: 60 48 05 LUẬN VĂN THẠC SĨ CÔNG NGHỆ THÔNG TIN Người hướng dẫn khoa học Ts PHẠM THỊ XUÂN LỘC Cần Thơ - 2010 LỜI CAM ĐOAN Tôi xin cam đoan luận văn hồn thành kết nghiên cứu tơi Các công việc nghiên cứu nội dung thực luận văn chưa nộp để lấy cấp từ trường nào; ngoại trừ phần lý thuyết kết từ cơng trình khác ghi rõ phần tài liệu tham khảo luận văn Cần Thơ, ngày 10 tháng 03 năm 2010 Ký tên Trương Thị Diễm Trang i LỜI CẢM ƠN Đề tài “Xây dựng hệ thống trích lọc liệu cho kho liệu ứng dụng điều tra thủy sản dịch hại tôm cá” đến hồn thành sau thời gian tìm hiểu thực Để đạt kết hôm nay, cố gắng thân em nhận nhiều giúp đỡ thầy cô, gia đình bạn bè Em xin chân thành nói lời cảm ơn đến thầy cô trường Đại Học Cần Thơ cung cấp cho em nhiều kiến thức quý báu năm qua Và đặc biệt tận tình hướng dẫn Phạm Thị Xn Lộc hướng dẫn em suốt thời gian qua Cô cung cấp kiến thức, truyền kinh nghiệm, cho lời khuyên động viên em suốt trình thực luận văn Xin cám ơn cha, mẹ, anh em gia đình hỗ trợ, lo lắng động viên Đồng thời xin chân thành cảm ơn anh, chị lớp Cao học k14 động viên, giúp đỡ em trình thực luận văn Xin chúc thầy cô nhiều sức khỏe, gặt hái nhiều thành cơng nghiệp giảng dạy đào tạo nhiều nhân tài cho đất nước Học viên Trương Thị Diễm, MSHV 250725 Lớp Cao học Hệ thống thông tin K14 Trang ii MỤC LỤC # " LỜI CAM ĐOAN i LỜI CẢM ƠN ii MỤC LỤC iii DANH MỤC HÌNH vi DANH MỤC TỪ VIẾT TẮT vii ABSTRACT viii TÓM TẮT ix CHƯƠNG 1: GIỚI THIỆU 1.1 Mở đầu 1.1.1 Đặt vấn đề 1.1.2 Hướng giải 1.1.3 Mục đích nghiên cứu đề tài 1.1.4 Đối tượng phạm vi nghiên cứu 1.1.5 Ý nghĩa thực tiễn đề tài 1.2 Các vấn đề liên quan 1.2.1 Trong nước 1.2.2 Ngoài nước 1.3 Các nội dung CHƯƠNG 2: TỔNG QUAN VỀ KHO DỮ LIỆU 2.1 Lịch sử phát triển kho liệu 2.2 Các giai đoạn tiến triển kho liệu 2.3 Các định nghĩa kho liệu 2.4 Các đặc điểm kho liệu 2.4.1 Hướng chủ đề (Subject Oriented) 10 2.4.2 Tích hợp (Integrated) 10 2.4.3 Ổn định (Nonvolatile) 11 2.4.4 Thay đổi theo thời gian (Time Variant) 11 2.5 Mục đích kho liệu 13 2.6 Những thành phần kho liệu 13 2.6.1 Hệ thống hoạt động nguồn 14 2.6.2 Vùng liệu tạm 14 2.6.3 Biểu diễn liệu 16 2.6.4 Công cụ truy cập liệu 18 Trang iii 2.6.5 Siêu liệu (Metadata) 18 CHƯƠNG 3: THIẾT KẾ KHO DỮ LIỆU THEO MƠ HÌNH CHIỀU 20 3.1 Lý sử dụng mơ hình chiều xây dựng kho liệu 20 3.2 Các khái niệm mơ hình chiều 20 3.2.1 Bảng kiện 21 3.2.2 Bảng chiều 23 3.3 Chiều thời gian 27 3.4 Sự kết hợp bảng kiện bảng chiều 27 3.4.1 Lược đồ hình (Star schema) 28 3.4.2 Lược đồ hình bơng tuyết (Snowflake schema) 29 3.4.3 Lược đồ chòm (constellation schema) 30 3.5 Các bước q trình thiết kế mơ hình chiều 32 3.6 Giới thiêu mơ hình liệu đa chiều 32 3.6.1 Khái niệm sở liệu đa chiều 33 3.6.2 Xử lý phân tích trực tuyến (OLAP) 33 3.6.3 Các thao tác OLAP 34 CHƯƠNG 4: Q TRÌNH TRÍCH XUẤT, CHUYỂN ĐỔI VÀ NẠP DỮ LIỆU 36 4.1 Giới thiệu trình ETL 36 4.2 Các cách tiếp cận ETL 36 4.3 Trích xuất (Extraction) 38 4.3.1 Xem xét chung 38 4.3.2 Trích liệu từ hệ thống hoạt động 39 4.3.2.1 Ánh xạ liệu logic từ hệ thống nguồn vào kho liệu 40 4.3.2.2 Các phương pháp trích xuất logic 42 4.3.3 Trích liệu từ hệ thống tập tin 47 4.4 Chuyển đổi (Transformation) 47 4.5 Nạp (Loading) 50 4.5.1 Nạp bảng chiều 50 4.5.2 Nạp bảng kiện 56 4.6 ETL theo định kỳ 60 4.7 Siêu liệu 61 CHƯƠNG 5: THIẾT KẾ CƠ SỞ DỮ LIỆU NGUỒN VỀ TÔM, CÁ 62 5.1 Giới thiệu chung Tôm, cá 62 5.1.1 Tơm sú Sóc Trăng 63 5.1.1.1 Đặc điểm sinh học tôm sú 63 Trang iv 5.1.1.2 Chu kỳ sống tôm 63 5.1.1.3 Mùa vụ nuôi 63 5.1.1.4 Các nguyên nhân phát triển dịch bệnh tôm 63 5.1.2 Cá tra, basa An Giang 64 5.1.2.1 Đặc điểm sinh học 64 5.1.2.2 Các giai đoạn sinh trưởng 64 5.1.2.3 Mùa vụ nuôi 64 5.1.2.4 Các mơ hình ni cá 64 5.1.2.5 Các nguyên nhân phát triển dịch bệnh cá 65 5.2 Mô tả hệ thống sở liệu tôm, cá 66 5.3 Mơ hình liên kết thực thể (ERD: Entity Relationship Diagram) 67 5.4 Mơ hình liệu luận lý (MLD: Model of Logical Data) 69 5.5 Bảng từ điển liệu 70 CHƯƠNG 6: THIẾT KẾ KHO DỮ LIỆU TÔM, CÁ 71 6.1 Xây dựng kho liệu tơm, cá theo mơ hình chiều 71 6.2 Kho liệu tôm, cá thiết kế theo mơ hình chiều 74 CHƯƠNG 7: ỨNG DỤNG HỆ THỐNG TRÍCH XUẤT, CHUYỂN ĐỔI VÀ NẠP DỮ LIỆU VÀO KHO DỮ LIỆU 75 7.1 Cấu trúc chương trình 75 7.2 Tạo bảng chiều 76 7.3 Tạo bảng kiện 80 7.4 Xem thông tin siêu liệu 82 CHƯƠNG 8: KẾT LUẬN VÀ HƯỚNG PHÁT TRIỂN 83 8.1 Kết đạt 83 8.2 Hướng phát triển 84 PHỤ LỤC 85 TÀI LIỆU THAM KHẢO 104 Trang v DANH MỤC HÌNH STT 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 Tên Hình 2.1: Vấn đề tích hợp Hình 2.2: Vấn đề ổn định Hình 2.3: Vấn đề thay đổi theo thời gian Hình 2.4: Những phần tử kho liệu Hình 3.1: Cấu trúc bảng kiện Hình 3.2: Cấu trúc bảng chiều Hình 3.3: Phân cấp chiều ngày địa điểm Hình 3.4: Lược đồ hình Hình 3.5: Lược đồ hình bơng tuyết Hình 3.6: Lược đồ chịm Hình 4.1: Thực chuyển đổi vùng tạm Hình 4.2: Thực chuyển đổi nhớ Hình 4.3: ETL ELT: chọn nơi để thực chuyển đổi Hình 4.4: Trích liệu từ hệ thống hoạt động Hình 4.5: Ánh xạ liệu logic Hình 4.6: Trích tồn bảng trích gia tăng Hình 4.7: Mơ hình thực thể liên kết thơng tin cán Hình 4.8: Bảng chiều cán Hình 4.9: Thao tác trích lọc thơng tin cán Hình 4.10: Thơng tin cán sau trích lọc Hình 4.11: Chuyển đổi phân tách Hình 4.12: Chuyển đổi hợp Hình 4.13: Chuyển đổi chuẩn hóa Hình 4.14: Chuyển đổi loại bỏ nhân Hình 4.15: Nạp liệu trực tiếp qua xử lý vùng tạm Hình 4.16: Cấu trúc bảng chiều Hình 4.17: Tạo bảng chiều tự động Hình 4.18: Kết nạp liệu vào bảng chiều Hình 4.19: Chiều thay đổi chậm kiểu Hình 4.20: Chiều thay đổi chậm kiểu Hình 4.21: Chiều thay đổi chậm kiểu Hình 4.22: Luồng liệu nạp bảng kiện Hình 4.23: Thao tác trích lọc thơng tin cho bảng kiện Hình 4.24: Thơng tin bảng kiện sau trích lọc Hình 4.25: Thay khóa tự nhiên khóa đại diện Hình 4.26: Kết liệu sau thay khóa tự nhiên khóa đại diện Hình 5.1: Mơ hình thực thể liên kết tơm, cá Hình 5.2: Mơ hình liệu vật lý tơm, cá Hình 6.1 : Mơ hình liên kết thực thể trình báo cáo Hình 6.2: Lược đồ hình kiện báo cáo Hình 6.3: Lược đồ hình kiện phiếu điều tra Hình 6.4: Mơ hình chiều kho liệu tơm, cá Trang vi Trang 10 11 12 14 22 24 27 28 29 31 36 37 38 39 41 42 43 43 44 46 47 48 48 49 50 51 52 52 53 54 55 56 57 58 59 69 68 70 72 73 73 74 DANH MỤC TỪ VIẾT TẮT # " ETL Extract-Transform-Load DWH Data WareHouse (Kho liệu) DASD Direct Access Storage Device (Thiết bị lưu trữ truy cập trực ERD Entity Relationship Diagram (Mơ hình thực thể liên kết) MLD Model of Logical Data (Mơ hình liệu luận lý) FK Foreign Key NK Natural Key 3NF Third-Normal-Form (hình thức chuẩn thứ 3) SCD Slowly Changing Dimensions (Chiều thay đổi chậm) OLTP Online Transaction Processing (Xử lý giao dịch trực tuyến) KDL Kho liệu CSDL Cơ sở liệu ĐBSCL Đồng sông Cửu Long tiếp) Trang vii ABSTRACT In this thesis, the basic concepts and components of data warehouse are introduced The building of data warehouse structure is also described according to the dimension model The purpose of the thesis is to research and to construct an Extract-Transform-Load (ETL) system The ETL system is to build data warehouse of fish and shrimp diseases in some areas in Mekong Delta, Vietnam The thesis is to research and to construct the ETL system according to two methods First, the thesis uses one of ETL tools in the market Second, the thesis constructs the application program of ETL system This program helps designers to build more easily the data warehouse This thesis gives a dynamics: the users can select necessary data from data source, then the program will automatically create table and load data into the data warehouse In additon, the data is also saved automatically into the Metadata database Trang viii 14 CHI TIẾT BÁO CÁO - ChiTiet_BCao STT Tên thuộc tính Kiểu Kích thước Khóa Duy Not Min Null Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi MaCT_BC Int MaBaoCao Int BaoCao MaHinhThuc Int HinhThucNuoi MaDoiTuong Int DoiTuongNuoi MaHuyen Int Huyen DTich_Nuoi Float DTich_NhiemBe nh Float TinhHinh_DichB enh TacNhan_GayBe nh x Nvarchar 200 Nvarchar 200 10 BienPhap_XuLy Nvarchar 200 11 ThucAn_DangS Dung Nvarchar 100 Diễn giải Mã chi tiết báo cáo Mã báo cáo Mã hình thức Mã đối tượng Diện tích ni Diện tích nhiễm bệnh Tình hình dịch bệnh Tác nhân gây bệnh Biện pháp xử lý Thức ăn xử dụng Trang 91 12 GhiChu Nvarchar 100 Kiểu Kích thước Ghi 15 HỘ NUÔI – HoNuoi STT Tên thuộc tính Khóa Duy Not Min Null MaHoNuoi Int MaAp Int TenHoNuoi Nvarchar 30 x DiaChi_HN Nvarchar 30 x SDThoai_HN Nvarchar 10 x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi x Ap Trang 92 Diễn giải Mã hộ ni Mã ấp Tên hộ nuôi Địa hộ nuôi Số điện thoại hộ nuôi 16 PHIẾU ĐIỀU TRA – Phieu_DTra STT Tên thuộc tính MaPhieuDT 10 MaHoNuoi MaCanBo MaNgay MaHinhThuc MaDoiTuong DTich_Nuoi MatDoNuoi SLuong_Nuoi SLuong_Chet Sluong_NhiemB enh DauHieuBenh TacNhan_GayBe nh BienPhap_XuLy ThucAn_DangS Dung ThuocSuDung GhiChu 11 12 13 14 15 16 17 Kiểu Kích thước Int Khóa Duy Not Min Null Max Giá trị Số chữ số thập phân Miề n giá trị Ràng buộc toàn vẹn luận lý Khóa ngồi x Int Int DateTime Int Int Float Int Int Int HoNuoi CanBo ThoiGian HinhThucNuoi DoiTuongNuoi x Int Nvarchar 100 Nvarchar 100 Nvarchar 100 Nvarchar 100 Nvarchar Nvarchar 100 200 Trang 93 Diễn giải Mã phiếu điều tra Mã hộ nuôi Mã cán Mã ngày Mã hình thức Mã đối tượng Diện tích ni Mật độ nuôi Số lượng nuôi Số lượng chết Số lượng nhiễm bệnh Dấu hiệu bệnh Tác nhân gây bệnh Biện pháp xử lý Thức ăn sử dụng Thuốc sử dụng Ghi Phụ lục 2: Các bảng từ điển liệu cho kho liệu tôm, cá 17 BẢNG CHIỀU THỜI GIAN – Dim_ThoiGian STT Tên thuộc tính IdThoiGian MaNgay Thang Nam Kiểu Kích thước Int Khóa Duy Not Min Null Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Mã chiều thời gian Mã ngày Tháng Năm x DateTime Int Int Diễn giải x x x 18 BẢNG CHIỀU CÁN BỘ – Dim_CanBo STT Tên thuộc tính Kiểu Kích thước Khóa Duy Not Min Null IdCanBo Int MaCanBo Int HoTenCB Nvarchar 30 x TenCoQuan TenChucVu Nvarchar Nvarchar 30 20 x x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Mã chiều cán Mã cán Họ tên cán Tên quan Tên chức vụ x Trang 94 19 BẢNG CHIỀU HÌNH THỨC NI – Dim_HinhThucNuoi STT Tên thuộc tính Kiểu IdHinhThucNuoi Int MaHinhThuc Int TenHinhThuc Nvarchar Kích thước Khóa Duy Not Min Null Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc toàn vẹn luận lý Khóa ngồi Mã chiều hình thức Mã hình thức Tên hình thức ni x 20 Diễn giải x 20 BẢNG CHIỀU ĐỐI TƯỢNG – Dim_DoiTuong STT Tên thuộc tính Kiểu Kích thước Khóa Duy Not Min Null IdDoiTuong Int MaDoiTuong Int TenDoiTuong Nvarchar 20 x TenLoaiDT Nvarchar 20 x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Mã chiều đối thượng Mã đối tượng Tên đối tượng nuôi Tên loại đối tượng x Trang 95 21 BẢNG CHIỀU VÙNG NI – Dim_VungNuoi STT Tên thuộc tính Kiểu IdMaVung Int MaHuyen TenHuyen TenTinh Int Nvarchar Nvarchar Kích thước Khóa Duy Not Min Null Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa Mã chiều đối thượng Mã huyện Tên huyện Tên tỉnh x 20 20 Diễn giải x x 22 BẢNG CHIỀU HỘ NI – Dim_HoNuoi STT Tên thuộc tính Kiểu Kích thước Int Khóa Duy Not Min Null IdHoNuoi MaHoNuoi TenHoNuoi Int Nvarchar 30 x DiaChi_HN Nvarchar 30 x SDThoai_HN Nvarchar 10 x TenAp Nvarchar 20 x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Mã chiều hộ nuôi Mã hộ nuôi Tên hộ nuôi Địa hộ nuôi Số điện thoại hộ nuôi Tên ấp x Trang 96 23 BẢNG SỰ KIỆN BÁO CÁO – Fact_BaoCao STT Tên thuộc tính Kiểu IdCanBo Int IdThoiGian Int IdDoiTuong Int IdHinhThucNuoi Int IdMaVung Int DTich_Nuoi Float DTich_NhiemBe nh Float Kích thước Khóa Duy Not Min Null Max x Trang 97 Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Dim_CanB o Dim_Thoi Gian Dim_DoiT uong Dim_Hinh ThucNuoi Dim_Vung Nuoi Mã chiều cán Mã chiều thời gian Mã chiều đối thượng Mã chiều hình thức Mã chiều đối thượng Diện tích ni Diện tích nhiễm bệnh 24 BẢNG SỰ KIỆN PHIẾU ĐIỀU TRA – Fact_PhieuDTra STT Tên thuộc tính Kiểu IdCanBo Int IdThoiGian Int IdHinhThucNuoi Int IdDoiTuong Int IdHoNuoi Int DTich_Nuoi Float MatDoNuoi Int SLuong_Chet Int Sluong_NhiemBe nh Int Kích thước Khóa Duy Not Min Null Max x Trang 98 Giá trị Số chữ số thập phân Miền giá trị Ràng buộc toàn vẹn luận lý Khóa ngồi Diễn giải Dim_CanB o Dim_Thoi Gian Dim_Hinh ThucNuoi Dim_DoiT uong Dim_HoN uoi Mã chiều cán Mã chiều thời gian Mã chiều hình thức Mã chiều đối thượng Mã chiều hộ ni Diện tích ni Mật độ nuôi Số lượng chết Số lượng nhiễm bệnh Phụ lục 3: Các bảng từ điển liệu cho sở liệu siêu liệu 25 DANH SÁCH NGUỒN – Nguon_dsNguon STT Tên thuộc tính Kiểu Kích thước Khóa Duy x Not Min Null MaNguon TenNguon Mieuta Int Nvarchar Nvarchar 30 300 HeQTCSDL Nvarchar 50 NgayTao_TemTG Datetime x NgayCapNhat_Te mTG Datetime x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc toàn vẹn luận lý Khóa ngồi x x Diễn giải Mã nguồn Tên nguồn Miêu tả Hệ quản trị sở liệu Ngày tạo mẫu tin Ngày cập nhật mẫu tin 26 DANH SÁCH KHO – Kho_dsKho STT Tên thuộc tính Kiểu Kích thước MaKho TenKho Mieuta Int Nvarchar Nvarchar 30 200 HeQTCSDL Nvarchar 50 NgayTao_TemTG Datetime Khóa Duy x Not Min Null Max x x Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Mã kho Tên kho Miêu tả Hệ quản trị sở liệu Ngày tạo mẫu tin x Trang 99 NgayCapNhat_Te mTG Datetime Ngày cập nhật mẫu tin x 27 KHO KIỂU BẢNG – Kho_KieuBang STT Tên thuộc tính Kiểu Kích thước Khóa Duy x Not Min Null MaKieuBang Int TenKieuBang Nvarchar 30 Mieuta Nvarchar 100 NgayTao_TemTG Datetime x NgayCapNhat_Te mTG Datetime x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc toàn vẹn luận lý Khóa ngồi x Diễn giải Mã kiểu bảng Tên kiểu bảng Miêu tả Ngày tạo mẫu tin Ngày cập nhật mẫu tin x 28 KHO DANH SÁCH BẢNG – Kho_dsBang STT Tên thuộc tính MaBang TenBang MaKieuBang MaKho Mieuta NgayTao_TemTG Kiểu Int Nvarchar Kích thước Khóa Duy x 50 Not Min Null Max x x Int x Int Nvarchar Datetime x Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa Diễn giải Mã bảng Tên bảng Kho_KieuB Mã kiểu bảng ang Kho_dsKho Mã kho Miêu tả Ngày tạo 300 x Trang 100 NgayCapNhat_Te mTG Datetime mẫu tin Ngày cập nhật mẫu tin x 29 KHO KIỂU CỘT – Kho_KieuCot STT Tên thuộc tính Kiểu Kích thước Khóa Duy x Not Min Null MaKieuCot TenKieuCot ViTri Mieuta Int Nvarchar Nvarchar Nvarchar NgayTao_TemTG Datetime x NgayCapNhat_Te mTG Datetime x 100 200 300 Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa x x x Diễn giải Mã kiểu cột Tên kiểu cột Vị trí Miêu tả Ngày tạo mẫu tin Ngày cập nhật mẫu tin 30 KHO DANH SÁCH CỘT – Kho_dsCot STT Tên thuộc tính Kiểu MaCot MaBang Int Int MaKieuCot Int TenCot KieuDuLieu Nvarchar Varchar Kích thước Khóa Duy x Not Min Null Max x x Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa Diễn giải Mã cột Kho_dsBang Mã bảng Kho_KieuCo Mã kiểu cột t Tên cột Kiểu liệu x 100 50 Giá trị x x Trang 101 KhoaChinh KhoaNgoai Rong TuTang 10 NgayTao_TemTG Bit Bit Bit Bit Datetime x NgayCapNhat_Te Datetime mTG 31 NẠP CÂU LỆNH – Nap_CauLenh 11 STT Tên thuộc tính Kiểu Khóa Khóa ngoại Rỗng Tự tăng Ngày tạo mẫu tin Ngày cập nhật mẫu tin Kích thước Int x Khóa Duy x Not Min Null MaNapCL TenKho Varchar 200 x TenBangKho Varchar 200 x TenNguon Varchar 200 x LenhThemMoi Varchar 500 x LenhCapNhat Varchar 500 LenhXoa Varchar 500 NgayTao_TemTG Datetime x NgayCapNhat_Te mTG Datetime x Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Mã nạp câu lệnh Tên kho Tên bảng kho Tên nguồn Lệnh thêm Lệnh cập nhật Lệnh xóa Ngày tạo mẫu tin Ngày cập nhật mẫu tin x Trang 102 32 ÁNH XẠ LOGIC – AnhXa_Logic ST T Tên thuộc tính Kiểu Kích thước Khóa Duy MaAnhXa TenKho Kho_TenBang Int Varchar Varchar 200 200 x x x Kho_TenCot Varchar 200 x Kho_KieuDuLieu Kho_KieuBang Varchar Varchar 200 200 x x Kho_KieuSCD Char 10 TenNguon Varchar 200 x Nguon_TenBang Varchar 200 x 10 Nguon_TenCot Varchar 200 x 11 Nguon_KieuDuLieu Varchar 200 x 12 NgayTao_TemTG Datetime x Datetime x 13 NgayCapNhat_Tem TG x Not Min Null Max Giá trị Số chữ số thập phân Miền giá trị Ràng buộc tồn vẹn luận lý Khóa ngồi Diễn giải Mã ánh xạ Tên kho Tên bảng Tên cột bảng Kiểu liệu Kiểu bảng Kiểu chiều thay đổi chậm Tên nguồn Tên bảng nguồn Tên cột nguồn Kiểu liệu Ngày tạo mẫu tin Ngày cập nhật mẫu tin Trang 103 TÀI LIỆU THAM KHẢO YUZ Tiếng Việt Huỳnh Tuấn Anh (2008), Datawarehouse and data mining, Bài giảng Khoa Công Nghệ Thông Tin, Trường Đai Học Nha Trang Nguyễn Văn Triều Dâng (2006), Ứng dụng Web ngữ nghĩa vào phân tích trực tuyến thơng tin bưu điện Bến Tre, Luận văn thạc sĩ Trường Đại Học Công Nghệ Thông Tin, Đại học quốc gia thành phố Hồ Chí Minh Phan Quốc Nghĩa (2010), Xây dựng ứng dụng Thống kê trực tuyến (OLAP) tình hình dịch bệnh lúa, Luận văn thạc sĩ Khoa Công Nghệ Thông Tin & Truyền Thông, Trường Đại Học Cần Thơ Nguyễn Thị Lan Quyên (2010), Vấn đề bảo trì kho liệu (maintaining) ứng dụng kho liệu lúa, Luận văn thạc sĩ Khoa Công Nghệ Thông Tin & Truyền Thông, Trường Đại Học Cần Thơ Nguyễn Bá Tường (2001), Cơ sở liệu lý thuyết thực hành Tiếng Anh Chuck Ballard, Dirk Herreman, Don Schau, Rhonda Bell, Eunsaeng Kim, Ann Valencic, International Technical Support Organization (1998), Data Modeling Techniques for Data Warehousing, IBM, Chapter2, PP Mark Humphries, Michael W.Hawkins, Michelle C.Dy, Datawarehousing Architacture and implementation Paul Lane (2001, 2005), Oracle Database Data Warehousing Guide, 10g Release (10.2), Oracle Ralph Kimball, Joe Caserta (2004), The Data Warehouse ETL Toolkit, Wiley 10 Ralph Kimball, Margy Ross (2002), The Data Warehouse Toolkit Second Edition The Complete Guide to Dimensional Modeling, Second Edition, Wiley Trang 104 11 Reed Jacobson, Stacia Misner Hitachi Consulting (2005), Microsoft Sql server 2005 analysis services step by step 12 Sivakumar Harinath, Stephen Quinn (2006), Professional SQL Server Analysis Services 2005 with MDX, Wiley 13 Vincent Rainardi (2008), Building a data Warehouse with Examples in SQL Server 14 William H.Inmon (2005), Building the Data Warehouse, Fourth Edition, Wiley Internet 15 http://en.wikipedia.org/wiki/Data_warehouse 16 http://www.1keydata.com/datawarehousing/inmon-kimball.html 17 http://www.nea.gov.vn/tapchi/toanvan/09-2k8-30.htm 18 http://vneconomy.vn/20091103100943174P0C10/xuat-khau-thuy-san-nam2009-co-the-dat-44-ty-usd.htm 19 http://iss.gso.gov.vn/?page=NewsDetail&ID=84&tabsel=News 20 http://www.dgmarketvietnam.org.vn/tenders/np-notice.do~2758289 21 http://thongbaomoithau.com/thong-bao-moi-thau-9830.html 22 http://www.ehdp.com/vitalnet/ Trang 105 ... quan kho liệu như nước Trang 1.2.1 Trong nước Trước phát triển thuận lợi kho liệu năm gần việc xây dựng kho liệu nói chung nhiều quan, tổ chức thực nghiên cứu xây dựng Một số dự án có ứng dụng kho. .. Việc xây dựng kho liệu trở thành phần thiếu dự án lớn Tuy nhiên, chưa có dự án xây dựng kho liệu dịch bệnh tơm, cá Do nhu cầu xây dựng kho liệu nhu cầu cần thiết Bên cạnh đó, việc xây dựng kho. .. dụng chương trình ETL vào xây dựng kho liệu cho tôm, cá Chương 8: Kết luận hướng phát triển Trang CHƯƠNG 2: TỔNG QUAN VỀ KHO DỮ LIỆU 2.1 Lịch sử phát triển kho liệu Trong năm đầu thập niên 1960s,