Báo cáo cuối kỳ môn kho dữ liệu xây dựng kho dữ liệu cho bài toán phân tích dữ liệu bán hàng

TRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TIN & TRUYỀN THÔNG VIỆT HÀN Khoa Khoa Học Máy Tính Báo cáo cuối kỳ môn Kho liệu XÂY DỰNG KHO DỮ LIỆU CHO BÀI TỐN PHÂN TÍCH DỮ LIỆU BÁN HÀNG Sinh viên thực hiện: Đà Nẵng, tháng năm 2023 TRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TIN & i TRUYỀN THÔNG VIỆT HÀN Khoa Khoa Học Máy Tính Báo cáo cuối kỳ môn Kho liệu ĐỀ TÀI: QUẢN LÝ BÁN Ô TÔ Sinh viên thực hiện: Đà Nẵng, tháng năm 2023 NHẬN XÉT CỦA GIẢNG VIÊN HƯỚNG DẪN …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… ii …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………………………………… …………………………………………… TP.Đà Nẵng, ngày… tháng… năm… GIẢNG DẪN LỜI CẢM ƠN iii VIÊN HƯỚNG MỤC LỤC MỞ ĐẦU 1.Giới thiệu Mục tiêu đề tài Nội dung thực .2 Bố cục báo cáo Chương TỔNG QUAN VỀ ĐỀ TÀI Giới thiệu chung đề tài Giới thiệu SQL Server management studio CHƯƠNG PHÂN TÍCH VÀ THIẾT KẾ KHO DỮ LIỆU 1.Khái niệm 1.1 Thực thể đo lường số nguyên 1.2 Thứ bậc kích thước 1.3 Sơ đồ mơ hình khái niệm 10 2.Mơ hình logic 11 Chương TRIỂN KHAI KHO DỮ LIỆU 20 1.Mô hình SSIS 20 2.Quá trình ETH .21 KẾT LUẬN .22 Kết đạt 22 Các hạn chế 23 Hướng phát triển 24 iv MỞ ĐẦU Giới thiệu Tôi thực nghiên cứu quản lý bán xe ô tô xây dựng kho liệu liên quan Đề tài quan trọng ngành tơ quản lý bán xe tơ q trình phức tạp quan trọng việc đảm bảo hoạt động kinh doanh hiệu cạnh tranh Quản lý bán xe ô tô đòi hỏi khả thu thập, quản lý phân tích thơng tin khách hàng, quản lý sản phẩm, quản lý đặt hàng, quản lý kho nhiều khía cạnh khác Việc triển khai hệ thống quản lý bán xe tơ hiệu mang lại nhiều lợi ích cho doanh nghiệp ngành ô tô Qua đề tài lần này, mong muốn cung cấp nhìn tổng quan chi tiết cách quản lý bán xe tơ tối ưu hóa thơng qua việc sử dụng kho liệu Sự hiểu biết khía cạnh quản lý bán xe ô tô triển khai hệ thống quản lý bán xe ô tô hiệu giúp doanh nghiệp ngành ô tô nắm bắt xu hướng thị trường tối ưu hóa quy trình bán hàng , từ tăng cường cạnh tranh nâng cao hiệu kinh doanh Trên hành trình tìm hiểu triển khai quản lý bán xe ô tô, nhận thấy có nhiều thách thức phải đối mặt Một thách thức quản lý liệu khách hàng phức tạp Việc thu thập quản lý thông tin cá nhân, lịch sử mua hàng, yêu cầu sở thích cá nhân khách hàng đòi hỏi hệ thống quản lý liệu mạnh mẽ an toàn để đảm bảo quyền riêng tư xử lý thông tin cách xác Mục tiêu đề tài Mục tiêu đề tài cung cấp nhìn tổng quan chi tiết quản lý bán xe ô tô triển khai hệ thống quản lý hiệu Chúng em muốn nghiên cứu đưa phương pháp, quy trình cơng nghệ phù hợp để tối ưu hóa quy trình bán hàng tơ, từ khâu thu thập thông tin khách hàng đến quản lý sản phẩm, đặt hàng quản lý kho Mục tiêu tăng cường khả cạnh tranh hiệu kinh doanh doanh nghiệp ô tô Chúng em muốn đề cập đến quan trọng việc xử lý liệu khách hàng cách xác an tồn, đồng thời tận dụng thơng tin để tạo chiến lược tiếp thị dịch vụ cá nhân hóa cho khách hàng Ngồi ra, mục tiêu nghiên cứu đưa phương pháp phân tích liệu cung cấp nhìn tổng quan thị trường tơ, từ giúp doanh nghiệp tơ nắm bắt xu hướng tiêu dùng đưa định kinh doanh thông minh Cuối cùng, mục tiêu chúng em đề xuất triển khai hệ thống quản lý bán xe tơ hiệu quả, có khả tích hợp với hệ thống khác doanh nghiệp cung cấp thông tin liệu xác, đáng tin cậy dễ quản lý Chúng tơi hy vọng đề tài đóng góp vào việc nâng cao quy trình bán hàng tơ đạt cạnh tranh thành công bền vững ngành ô tô Nội dung thực Tìm hiểu quản lý bán xe tơ: Nghiên cứu quy trình bán xe tơ, từ việc tiếp cận khách hàng đến giao dịch hậu Xác định yêu cầu nhu cầu doanh nghiệp tơ quản lý bán hàng Phân tích thiết kế kho liệu: Xác định thực thể quan trọng quản lý bán xe ô tô khách hàng, sản phẩm, đơn hàng, kho, Thiết kế mơ hình logic mơ hình vật lý cho kho liệu, bao gồm bảng, quan hệ, khóa khóa ngoại Xây dựng sở liệu: Tạo bảng liệu sở liệu sử dụng SQL Server Management Studio (SSMS) Định nghĩa kiểu liệu cho cột bảng thiết lập ràng buộc liệu Xử lý liệu: Thu thập liệu khách hàng, sản phẩm đơn hàng từ nguồn khác Thực truy vấn SQL để nhập, cập nhật truy xuất liệu sở liệu Tối ưu hóa quy trình bán hàng: Đề xuất cải tiến tối ưu hóa quy trình quản lý bán hàng tơ, bao gồm quy trình đặt hàng, xử lý đơn hàng, quản lý kho, v.v Áp dụng phương pháp công nghệ phù hợp để tăng cường hiệu suất khả cạnh tranh quy trình bán hàng Đánh giá hiệu quả: Đánh giá hiệu hệ thống quản lý bán xe ô tô triển khai, bao gồm khả tăng trưởng doanh số, cải thiện trải nghiệm khách hàng, giảm thiểu lỗi sai sót, v.v Phân tích liệu đưa nhận xét, kết luận quy trình quản lý bán hàng tơ hiệu hệ thống Bố cục báo cáo Sau phần Mở đầu, báo cáo trình bày ba chương, cụ thể sau: Chương Tổng quan đề tài Trong chương này, báo cáo trình bày khái niệm, đặc điểm, tổng kết Chương Phân tích thiết kế kho liệu Chương Triển khai kho liệu Cuối Kết luận, Tài liệu tham khảo Phụ lục liên quan đến đề tài Chương TỔNG QUAN VỀ ĐỀ TÀI Giới thiệu chung đề tài 1.1 Mục tiêu đề tài Mục tiêu báo cáo tìm hiểu sâu quản lý bán xe ô tô đưa phương pháp giải pháp để triển khai hệ thống quản lý bán hàng hiệu ngành tơ Báo cáo nghiên cứu khía cạnh quản lý bán hàng tơ, bao gồm thu thập thông tin khách hàng, quản lý sản phẩm, quản lý đặt hàng quản lý kho Chúng ta tìm hiểu cách thu thập thơng tin khách hàng cách xác hiệu quả, từ việc xác định nhu cầu ưu tiên khách hàng đến việc xây dựng hồ sơ khách hàng chi tiết theo dõi tương tác với họ Quản lý thông tin khách hàng đáng tin cậy giúp xây dựng mối quan hệ lâu dài tạo trải nghiệm tốt cho khách hàng Cùng với đó, báo cáo tập trung vào quản lý sản phẩm ô tô, từ việc xác định theo dõi danh sách sản phẩm, thơng tin kỹ thuật tính đến việc quản lý thông tin giá khuyến Quản lý sản phẩm cách xác hiệu giúp đáp ứng nhu cầu khách hàng tối ưu hóa q trình bán hàng Ngoài ra, báo cáo sâu vào quản lý đặt hàng quản lý kho Chúng ta tìm hiểu cách quản lý trình đặt hàng từ khách hàng, theo dõi tình trạng đơn hàng đảm bảo giao hàng thời hạn Đồng thời, quản lý kho đóng vai trị quan trọng việc kiểm sốt theo dõi lượng hàng tồn kho, tối ưu hóa việc quản lý dự trữ đảm bảo sẵn sàng hàng hóa có nhu cầu 1.2 Lý chọn đề tài Lý chọn đề tài quản lý bán xe tơ quan trọng phát triển mạnh mẽ ngành ô tô Ngành ô tô ngành công nghiệp quan trọng đóng góp lớn vào kinh tế nhiều quốc gia giới Việc quản lý bán hàng tơ đóng vai trị then chốt việc đạt thành công bền vững thị trường cạnh tranh ngày Quản lý bán xe ô tô không đơn quy trình bán hàng, mà liên quan đến việc xây dựng mối quan hệ với khách hàng, đáp ứng nhu cầu mong muốn họ, tạo trải nghiệm mua hàng tốt trì hài lịng sau mua xe Quản lý bán hàng tơ địi hỏi chun nghiệp, hiệu tinh tế việc quản lý thông tin khách hàng, quản lý sản phẩm, quản lý đặt hàng quản lý kho Bên cạnh phát triển ngành ô tô, việc áp dụng công nghệ thông tin hệ thống quản lý đại trở thành yếu tố định để nâng cao hiệu suất cạnh tranh ngành Triển khai hệ thống quản lý bán hàng ô tô hiệu giúp tăng cường quy trình quản lý, tối ưu hóa việc thu thập, lưu trữ xử lý thơng tin khách hàng, tối ưu hóa việc quản lý sản phẩm, đặt hàng kho hàng Việc nghiên cứu triển khai hệ thống quản lý bán hàng ô tô hiệu không mang lại lợi ích cho doanh nghiệp tơ mà cịn đem lại lợi ích cho khách hàng Khách hàng trải nghiệm quy trình mua hàng sn sẻ, dễ dàng tận hưởng dịch vụ chăm sóc sau bán hàng tốt Điều tạo tin tưởng thúc đẩy khách hàng trung thành, góp phần vào phát triển tăng trưởng doanh nghiệp ô tô Giới thiệu SQL Server management studio SQL Server Management Studio (SSMS) công cụ quản lý sở liệu mạnh mẽ phát triển Microsoft Được thiết kế đặc biệt để làm việc với SQL Server, SSMS cung cấp giao diện đồ họa trực quan tính tiện ích cho việc quản lý, phân tích triển khai sở liệu SSMS cho phép quản trị viên sở liệu nhà phát triển tương tác với SQL Server cách dễ dàng thuận tiện Dưới số tính SSMS: Kết nối quản lý sở liệu: SSMS cho phép bạn kết nối quản lý sở liệu SQL Server từ giao diện Bạn tạo, sửa đổi xóa sở liệu, bảng, trường ràng buộc SSMS cung cấp công cụ để lưu phục hồi sở liệu, kiểm soát phiên quản lý quyền truy cập Truy vấn xử lý liệu: SSMS cho phép bạn thực truy vấn liệu cách sử dụng ngơn ngữ truy vấn SQL Bạn viết chạy câu lệnh SELECT, INSERT, UPDATE DELETE để truy xuất thay đổi liệu sở liệu SSMS cung cấp chế độ xem kết trực quan công cụ xử lý liệu mạnh mẽ nhập xuất liệu Thiết kế quản lý đối tượng sở liệu: SSMS cho phép bạn thiết kế quản lý đối tượng sở liệu bảng, chế độ xem, thủ tục lưu trữ hàm Bạn tạo mới, sửa đổi xóa đối tượng cách dễ dàng SSMS cung cấp công cụ để kiểm tra xử lý ràng buộc, quan hệ mục đối tượng Xem giám sát hoạt động: SSMS cung cấp báo cáo công cụ giám sát cho phép bạn theo dõi đánh giá hiệu suất hoạt động SQL Server Bạn xem thơng số tài nguyên hệ thống, truy vấn chạy, lịch sử hoạt động kiện Xử lý tập tin liệu: SSMS cung cấp công cụ cho việc quản lý tập tin liệu SQL Server Bạn chép, di chuyển xóa tệp tin thư mục máy chủ SQL Server SSMS hỗ trợ nhập xuất liệu từ định dạng khác CSV, Excel, XML Lập lịch tự động hóa: SSMS cho phép bạn lập lịch tự động hóa tác vụ quản lý sở liệu Bằng cách sử dụng SQL Server Agent, bạn đặt lịch trình thực thi công việc lưu, kiểm tra toàn vẹn liệu xử lý liệu Điều giúp giảm thiểu can thiệp thủ công tăng tính tự động quản lý sở liệu Tích hợp với cơng cụ phát triển ứng dụng: SSMS hỗ trợ tích hợp với cơng cụ phát triển ứng dụng Visual Studio Điều cho phép nhà phát tiển kết hợp công cụ quản lý sở liệu cơng cụ Hình 2.2.1: Sơ Đồ Bơng Tuyết Hình 2.2.2: Bảng Customer 16 Hình 2.2.3: Bảng Date Hình 2.2.4: Bảng Payment Method Hình 2.2.5: Bảng Product 17 Hình 2.2.6: Bảng Promotion Hình 2.2.7: Bảng Saleperson Hình 2.2.8: Bảng Store 18 Hình 2.2.9: Bảng Factsaleorder 19 Khơng q khó để thấy star schema có thiết kế tương đối đơn giản mang tính đối xứng Nếu xét từ góc độ túy nghiệp vụ, thiết kế gần với nhìn người dung cuối nghiệp vụ họ Trong nhiều trường hợp, tranh xác nghiệp vụ mà người dùng làm việc Thực ta suy nghĩ sâu chút trình xây dựng sở liệu quan hệ cho ứng dụng xây dựng data warehouse cho ứng dụng đó, gần tạo thành vịng tuần hoàn Những thiết kế sở liệu quan hệ - relational database - biết bước phải xác định mơ hình quan hệ - thực thể (Entity – Relationship) Sau thực thể mối quan hệ chúng xác định, ta tiến hành xây dựng table column áp dụng chuẩn 3NF Trong trình này, thực thể phân nhỏ để tạo nên table với quan hệ 1-N Các mối quan hệ đa chiều N-N mơ hình E-R thể bảng trung gian với quan hệ 1-N tương ứng Bằng cách này, mơ hình E-R với lượng nhỏ thực thể ban đầu phát triển thành sỡ liệu lớn với hàng trăm bảng kết nối với qua mối quan hệ 1-N 1-1 Khối lượng thông tin rõ ràng không dễ hiểu với người dùng cuối, vốn đối tượng khơng có chút khái niệm database Khi xây dựng data warehouse theo dạng star schema, cách tự nhiên ta biến sở liệu phức tạp quay trở lại dạng mơ hình E-R gần ban đầu Dĩ nhiên thực tế, star schema thường tập trung vào góc nhỏ relational database Do đó, từ sở liệu ban đầu xây dựng nhiều star schema, star schema tập trung vào khía cạnh cụ thể nghiệp vụ Trong ví dụ trên, Product thực thể Khi đưa vào sở liệu quan hệ, chuẩn hóa theo 3NF tách thành bảng Product, SubCategory, Category Khi đưa vào data 20 warehouse, Product lại quay hình dạng thực thể Product ban đầu - Snow Flake: Là dạng mở rộng lược đồ hình bổ sung Dim Bảng Fact lược đồ hình sao, bảng Dim chuẩn hố Các chiều cấu trúc rõ ràng Bảng Dim chia thành chiều hay chiều phụ Ưu điểm: Số chiều phân cấp thể dạng chuẩn bảng Dim Nhược điểm: Cấu trúc phi dạng chuẩn lược đồ hình phù hợp cho việc duyệt chiều 21 Chương TRIỂN KHAI KHO DỮ LIỆU Mơ hình SSIS Sử dụng Bảng Product, FactSaleOrder Promotion để Kết hợp bảng Product Hình 3.1.1: Mơ Hình SSIS 22 Q trình ETH Sau hồn tất sơ đồ SSIS khởi chạy trình ETH để tạo bảng liệu Product Hình 3.2.1: Bảng Data Product Hình 3.2.2: Import liẹu vào Excel 23 KẾT LUẬN Kết đạt Hiểu biết cấu trúc quy trình xây dựng kho liệu: Bạn hiểu khái niệm, phương pháp quy trình thiết kế, xây dựng triển khai kho liệu Điều giúp bạn có khả tổ chức quản lý liệu cách hiệu hệ thống kho liệu Kỹ thiết kế triển khai kho liệu: Bạn học cách thiết kế mơ hình liệu, chuẩn hóa liệu xác định quy trình ETL để trích xuất, biến đổi tải liệu vào kho liệu Kỹ cho phép bạn xây dựng hệ thống kho liệu chất lượng cao có khả phục vụ nhu cầu phân tích báo cáo Nắm vững công nghệ công cụ hỗ trợ: Bạn làm quen với công nghệ công cụ quan trọng lĩnh vực kho liệu hệ quản trị kho liệu (Data Warehouse Management System - DWMS), ngôn ngữ truy vấn, công cụ truy vấn báo cáo, phương pháp khai thác liệu (data mining) công nghệ lưu trữ tối ưu hóa liệu Khả phân tích liệu đưa định: Với hệ thống kho liệu chất lượng, bạn có khả truy vấn phân tích liệu cách hiệu Bằng cách sử dụng công cụ kỹ thuật phân tích liệu, bạn tìm thông tin quan trọng, xu hướng, mẫu đối tượng quy luật ẩn liệu Điều hỗ trợ định phân tích kinh doanh hiệu Nắm vững khái niệm business intelligence big data: Môn kho liệu cung cấp cho bạn tảng để hiểu business intelligence (BI) big data Bạn có nhìn tổng quan cách sử dụng liệu để hỗ trợ định kinh doanh làm việc với liệu lớn phức tạp 24 Các hạn chế Mặt hạn chế kho liệu bán xe tơ bao gồm: Khó khăn việc tích hợp liệu: Kho liệu bán xe tơ thường phải tích hợp liệu từ nhiều nguồn khác hệ thống bán hàng, hệ thống CRM, trang web bán hàng nguồn liệu bên ngồi Việc tích hợp liệu từ nguồn khác gặp khó khăn không quán cấu trúc liệu, định dạng liệu khác trình ETL phức tạp Dữ liệu khơng xác khơng đồng nhất: Dữ liệu kho liệu bán xe ô tô khơng xác khơng đồng Điều liệu nhập liệu sai sót, liệu thiếu sót khơng tn thủ quy trình chuẩn hóa liệu Dữ liệu khơng xác khơng đồng ảnh hưởng đến tính xác tin cậy phân tích báo cáo Độ trễ trình cập nhật liệu: Việc cập nhật liệu kho liệu bán xe tơ gặp độ trễ q trình ETL tích hợp liệu từ nguồn khác Điều làm giảm tính sát thời độ tin cậy liệu, đặc biệt xử lý liệu thời gian thực theo dõi thay đổi nhanh chóng lĩnh vực bán xe tơ Khó khăn việc quản lý liệu lớn: Kho liệu bán xe ô tô chứa lượng lớn liệu, bao gồm thơng tin hàng nghìn xe, khách hàng, giao dịch dịch vụ Quản lý liệu lớn đòi hỏi sở hạ tầng lưu trữ xử lý mạnh mẽ, gây áp lực lên hệ thống tăng chi phí vận hành Hạn chế quyền riêng tư bảo mật: Kho liệu bán xe ô tô chứa nhiều thông tin nhạy cảm khách hàng, bao gồm thông tin cá nhân, lịch sử mua hàng tài Bảo vệ quyền riêng tư đảm bảo bảo mật liệu thách thức kho liệu bán xe ô tô, đặc biệt bối cảnh quy định bảo vệ liệu ngày nghiêm ngặt Khó khăn việc phân tích liệu phức tạp: Kho liệu bán xe ô tô chứa liệu phức tạp đa dạng xe, khách hàng giao dịch Phân tích liệu phức tạp trích xuất thơng tin có giá trị từ kho liệu đòi hỏi hiểu biết sâu ngành công nghiệp ô tô kỹ phân tích liệu phức tạp Đối mặt với hạn chế này, quản lý phát triển kho liệu bán xe tơ địi hỏi trọng đến việc quản lý liệu, tối ưu hóa quy trình ETL, áp dụng biện pháp bảo mật tuân thủ quy định, đảm bảo tính xác đồng liệu 25 26 Hướng phát triển Hướng phát triển kho liệu bán xe tơ bao gồm yếu tố sau: Mở rộng cập nhật nguồn liệu: Để kho liệu bán xe ô tô phát triển, cần liên tục mở rộng cập nhật nguồn liệu Điều bao gồm việc tích hợp liệu từ nguồn khác hệ thống bán hàng, hệ thống CRM (quản lý mối quan hệ khách hàng), hệ thống quản lý dịch vụ, trang web bán hàng nguồn liệu bên khác Cập nhật thông tin xe mới, giá cả, thông số kỹ thuật thông tin khách hàng quan trọng để trì tính xác đại kho liệu Mở rộng phạm vi phân tích: Kho liệu bán xe tơ mở rộng phạm vi phân tích để cung cấp thơng tin quan trọng cho phận công ty bán hàng, marketing, dịch vụ, nghiên cứu phát triển sản phẩm Các phân tích bao gồm: xu hướng bán hàng, tình hình thị trường, phân loại khách hàng, đánh giá hiệu chiến dịch tiếp thị, hài lịng khách hàng phân tích liệu dịch vụ sau bán hàng Tích hợp liệu với công nghệ mới: Hướng phát triển kho liệu bán xe tơ liên quan đến tích hợp với cơng nghệ xu hướng cơng nghệ trí tuệ nhân tạo (AI), học máy (machine learning) phân tích liệu lớn (big data analytics) Các cơng nghệ áp dụng để cải thiện việc phân tích liệu, dự đốn xu hướng, tối ưu hóa chiến dịch tiếp thị cải thiện trải nghiệm khách hàng Tăng cường bảo mật tuân thủ quy định: Kho liệu bán xe tơ cần đảm bảo tính bảo mật tuân thủ quy định bảo vệ liệu cá nhân GDPR (General Data Protection Regulation) CCPA (California Consumer Privacy Act) Hướng phát triển bao gồm việc áp dụng biện pháp bảo mật tiên tiến, quản lý quyền truy cập liệu tuân thủ quy định quyền riêng tư Tích hợp với hệ sinh thái công nghệ: Hướng phát triển kho liệu bán xe tơ liên quan đến tích hợp với hệ sinh thái cơng nghệ khác hệ thống CRM, hệ thống quản lý tổ chức (ERP), hệ thống báo cáo dashboard, cơng cụ phân tích liệu Điều giúp tạo hệ thống tồn diện tích hợp, nâng cao hiệu khả đưa định công ty Quan trọng nhất, hướng phát triển kho liệu bán xe ô tô phụ thuộc vào mục tiêu kinh doanh yêu cầu cụ thể công ty Việc 27 liên tục theo dõi tương tác với phận công ty giúp xác định hướng phát triển tối ưu cho kho liệu bán xe ô tô 28 TÀI LIỆU THAM KHẢO [2] "Pro MERN Stack: Full Stack Web App Development with Mongo, Express, React, and Node" by Vasan Subramanian "Learning React: A Hands-On Guide to Building [3] [4] Web Applications Using React and Redux" by Kirupa [2 Chinnathambi "React Design Patterns and Best Practices" by [5] [6] [3 Michele Bertoli [1] [1 [7] [8] [4 https://www.mongodb.com/ [9] [10] [5 https://reactjs.org/ [11] [12] [6 https://nodejs.org/ [13] [14] [7 https://expressjs.com/ [15] [16] [8 https://redux.js.org/ [17] [18] [19] [20] [21] [22] [23] [24] [25] [26] [27] [28] [29] [30] [31] [32] [33] [34] [35] i