Một số công cụ phân tích dữ liệu thông minh và ứng dụng trong các bài toán kinh tế

TẠP CÚ CÚNG TBUONG MỘT SƠ CƠNG CỤ PHÂN TÍCH DỮ LIỆU THÔNG MINH VÀ ỨNG DỤNG TRONG CÃC BÀI TỖN KINH TẾ • NGUYỄN THỊ HỘI - BÙI QUANG TRƯỜNG TĨM TẮT: Sự phát triển mạnh mẽ cơng nghệ thông tin ứng dụng phương tiện truyền thơng xã hội vào hoạt động sản xì, kinh doanh làm cho tốn phân tích liệu doanh nghiệp tổ chức ngày trở nên quan trọng hết Nghiên cứu nhằm giới thiệu so sánh số công cụ phân tích liệu thơng minh tốn ứng dụng thực tế Bài viết chia thành phần, gồm: giới thiệu chung tốn phân tích liệu doanh nghiệp tổ chức; trình bày số cơng cụ phân tích Liệu phổ biến nay; đồng thời đưa số so sánh hàm ý đề xuất ứng dụng ưong toán kinh tế hoạt động sản xuất, kinh doanh doanh nghiệp, tổ chức quan nhà nước Từ khóa: phân tích liệu, cơng cụ phâ n tích, liệu kinh doanh, toán dự báo Đặt vấn đề Cùng với phát triển công nghệ thông tin lan tỏa cách mạng công nghệ lần thứ 4, công cụ công nghệ thông tin ngày ứng dụng nhiều toán kinh tế Đặc biệt, với phát triển Dữ liệu lớn (Big Data), Khoa học liệu (Data Science) công cụ khai phá liệu (Data Mining Tools) thúc đẩy phát triển quy trình phân tích liệu lên câp độ Quy trìnhkhơng sử dụng liệu sơ câp phân tích công cụ thông thường như: SPSS, Eview, mà cịn sử dụng thêm cơng cụ có tính phù hợp điều kiện mạng Internet phát triển công cụ: Tableau Public, Power Bỉ, FineReport, R Python Các cơng cụ phân tích liệu tích hợp thêm ngơn ngữ lập trình với gói mơ đun xử lý đơn giản, phù hợp với nhiều ngữ cảnh nhiều kiểu liệu khác nhau, đưa kết 82 SỐ - Tháng 2/2022 phân tích liệu tốt, mà cịn hỗ trợ tốn dự báo hoạt động tốt liệu không đầy đủ Cơ sở lý thuyết 2.1 Một sô khái niệm Phân tích liệu: Phân tích liệu(data analytics) (Oreily, (2017), q trình phát hiện, giải thích truyền đạt mơ hình có ý nghĩa liệu nhằm đưa báo cáo, thống kê tổng hợp theo mong muôn người dùng Các tổ chức, doanh nghiệp áp dụng phân tích liệu kinh doanh để mơ tả, dự đốn cải thiện hiệu suất kinh doanh Cơng cụ phân tích liệu: Với đời phương tiện truyền thông xã hội (social media), tổ chức, doanh nghiệp người bán hàng có nhiều lựa chọn kênh bán hàng, kênh truyền thông, kênh quảng bá công cụ marketing thay cho phương thức KINH TÊ truyền thông Theo (D Manning, et al., 2008), (Z Alpbassi, et ai., 2015) (Z Yongzheng p Marco, 2013) liệu phương tiện truyền thơng xã hội thường có đặc trưng khơng đay đủ, khơng hồn chỉnh, khơng có cấu trúc rõ rang nhiều ngôn ngữ trộn lẫn theo đo xt nhiều, địi hỏi cơng cụ phân tích d ĩ liệu có thay đổi cải tiến để theo kịp cạc yêu cầu người dùng Bài tốn phân tích liệu: Phân tích liệu Ỉ>ng tổ chức, doanh nghiệp toán ú trọng nhiều ứng dụng năm n Bài tốn phân tích liệu khơng phải tốn cơng cụ để phân tích liệu Ễàng ngày cải tiến đa dạng nhằm phù Ợp với nhiều ngữ cảnh nhiều kiểu liệu khác hau từ liệu văn bản, liệu số đến liệu a phương tiện, kiểu liệu có yếu tố thời gian, phân tích liệu theo thời gian thực Một quy trình phân tích liệu thơng thường có giai đoạn gồm: Tìm hiểu thu thập liệu mà tổ chức, doanh nghiệp cần; Phân tích liệu phân loại liệu; Cì tạo báo cáo xác định chiến lược kinh doanh dựa liệu phân tích Có thể mơ tả tốn phân tích liệu doanh nghiệp, tổ chức dựa cơng cụ phân tích cách tổng qt Hình Hình ỉ: Mơ tả tốn Trong tốn phân tích liệu nghiên cứu không tập trung vào cách thức thu thập liệu cách thức đưa báo cáo thống kê, mà tập trung giới thiệu cơng cụ phân tích liệu Đặc biệt, cơng cụ phân tích liệu xã hội thu thập từ phương tiện truyền thông xã hội 2.2 Các nghiên cứu liên quan 2.2.1 Các nghiên cứu nước Trong báo tác giả Nguyễn Thanh Hải (2019) đăng PCW Việt Nam đề cập đến vai trị phân tích liệu tổ chức, doanh nghiệp Bài báo nhấn mạnh đến công cụ mới, với gói tính hỗ trợ q trình phân tích liệu từ liệu trực quan biến đổi thành thơng tin, sau dựa cơng cụ phân tích liệu thơng minh đưa thơng tin hữu ích cho tổ chức, doanh nghiệp doanh số bán hàng, bất thường doanh số kinh doanh, dự đoán vấn đề tác động đến bất thường, Bên cạnh đó, Trg (2020), Cisco Việt Nam (2019) nhấn mạnh đến giải pháp Business Intelligence - Kinh doanh thông minh (BI) kinh doanh cách mạng công nghệ 4.0 xu hướng chuyển đổi số bùng nổ Các báo cáo cho thấy kết phân tích liệu kinh doanh, đặc biệt phân tích liệu khách hàng ngày đóng vai trị quan trọng q trình tồn phát triển tổ chức, doanh nghiệp Nghiên cứu Nguyễn Anh Duy Nguyễn Phúc Quỳnh Như (2019) giới thiệu đến cách thức khai thác liệu trực tuyến với trường hỢp Amazone Thông qua cách triển khai tảng công nghệ Big Data, cộng với thấu hiểu khách hàng, Amazon đạt lợi ngành kinh doanh bán lẻ trực tuyến 2.2.2 Nghiên cứu nước Nghiên cứu Allahyari, Mehdi, et aỉ (2017) đưa thống kê tổng quát cách phân tích kỹ thuật trích chọn liệu đặc trưng đôi với liệu văn phương tiện truyền thơng xã hội Trong chia thành nhóm văn quy chuẩn văn khơng quy chuẩn Trong nghiên cứu Akhtar et al., (2020); Mandava, Geetha Bhargava (2018); N Couldry, and J Turow (2014), N Balaji et al, (2021) giới thiệu công cụ phân tích liệu thơng minh ứng dụng toán cụ thể, như: toán dự báo, tốn cho phân tích kết dựa nhu cầu, tốn xác định mơ hình hóa liệu cho tổ chức, doanh nghiệp Nghiên cứu D Manning, et al., (2008); z Abbassi, et al., (2015); z Yongzheng and p Marco, (2013) đưa cách trích chọn thơng tin đặc trưng phương tiện truyền thông xã hội website, cổng thơng tin giải trí, trang mạng xã hội, tảng bán hàng trực tuyến, , Như vậy, nghiên cứu cách phân tích liệu, mà cịn có nghiên cứu cơng cụ phân tích, thuật tốn ứng dụng phân tích so sánh chúng thực SỐ - Tháng 2/2022 83 TẠP CHÍ CƠNG THIÍdNG liệu đặc biệt, liệu phương tiện truyền thông xã hội Vì vậy, cơng cụ phân tích liệu thông minh xem xu hướng ứng dụng tốn phân tích liệu, đặc biệt hệ thống thông tin thương mại điện tử Phương pháp nghiên cứu Nhóm nghiên cứu sử dụng kết hợp phương pháp nghiên cứu định tính định lượng Nghiên cứu định tính: Nhóm nghiên cứu sử dụng nhiều phương pháp khác để thu thập, tìm hiểu, nghiên cứu tài liệu cơng cụ phân tích liệu phổ biến Nghiên cứu định lượng: Nhóm nghiên cứu sử dụng số liệu để tiến hành thực nghiệm minh họa nhằm so sánh cơng cụ phân tích liệu trực tuyến nghiên cứu Sau dựa nghiên cứu định tính định lượng, nhóm nghiên cứu sử dụng phương pháp luận khoa học để đề xuất lựa chọn kỹ thuật phù hợp cho phân tích liệu khách hàng trực tuyến hệ thông thông tin thương mại điện tử tổ chức, doanh nghiệp Kết nghiên cứu 4.1 Một sốcơng cụ phân tích liệu Cơng cụ lập trình R: Lập trình R cơng cụ mạnh cho học máy, thống kê phân tích liệu Ưu điểm R phân tích hầu hết kiểu liệu, phù hợp cho việc mơ hình hóa liệu, thao tác đơn giản, dễ dàng với nhiều kiểu liệu khác đặc biệt việc mơ hình hóa liệu Câng cụ Tableau: Tableaulà công cụ thực nghiệp vụ phân tích cách nhanh chóng, đơn giản trực quan dành cho tất người Ưu điểm Tableau có phiên miễn phí dễ dàng tương tác với loại liệu từ cơng cụ văn phịng Excel, Data Warehouse Dữ liệu trực tuyến Website phương tiện truyền thơng xã hội Đặc biệt Tableau có khả cập nhật hệ thống liệu đầu vào theo thời gian thực, trực quan hóa liệu nhiều hình thức biểu đồ hay chí Dashboard, hỗ trợ phân tích liệu lớn Big Data Python: Python ngôn ngữ lập trình theo kịch (scripting) phổ biến thú vị Ưu điểm dễ học, dễ viết mã, dễ trì 84 SỐ3-Tháng 2/2022 cung cấp dạng mã nguồn mở miễn phí cho học tập nghiên cứu Các thư viện học máy phong phú hỗ trợ tốt xử lý liệu văn thư viện: Scikitleam, Theano, Tensorflow Keras Power BI: Power Bllà công cụ “phân tích kinh doanh” phân tích liệu chia sẻ thông tin chi tiết Kết nôi liệu dễ dàng, hiển thị nhanh Dashboard - bảng điều khiển, Reports Power BI tập hợp nhiều ứng dụng connectors Biến nguồn liệu không liên quan, thành thông tin chi tiết mạch lạc, trực quan tương tác Nguồn liệu đa dạng, giản tệp Excel bảng website, đến Azure AWS Excel Advance: Excel nằm cơng cụ văn phịng Microsoft Office gồm nhiều phần mềm hỗ trợ viết văn bản, thuyết trình, quản lý email hay bảng tính Excel Mặc dù tưởng chừng đơn giản Excel giúp tạo bảng tính, tính năng, cơng cụ hỗ trợ người dùng tính tốn liệu nhanh, xác với số’ lượng hàng triệu tính 4.2 Các toán ứng dụng ứng dụng hệ thống khuyến nghị: Hệ thống khuyến nghị (Recommender System - RS), hay gọi hệ thống tư vấn hệ thơng lọc thơng tin nhằm dự đốn đánh giá sở thích, mốì quan tâm, nhu cầu người dùng để đưa nhiều mục, sản phẩm, dịch vụ mà người dùng quan tâm với xác suất lớn Trong năm gần đây, hệ thông khuyến nghĩ trở lên phổ biến sử dụng nhiều lĩnh vực khác truyền hình, tin tức, dịch vụ tài chính, viễn thơng, thương mại điện tử mạng xã hội,.„ ứng dụng phần nhóm khách hàng: Thị trường cạnh tranh, đời sơng cải thiện, sản phẩm/dịch vụ phát triển đa dạng,điều tạo khác biệt nhu cầu người Chính cần hướng đến phân loại nhóm khách hàng, doanh nghiệp dễ dàng khâu quản lý khách hàng nhằm thỏa mãn hài lịng khách hàng Phân loại khách hàng nắm bắt đặc điểm chung liệu khách hàng, thơng kê đặc tính tương đồng khách hàng trước sau mua/sử dụng dịch vụ/sản phẩm doanh nghiệp, từ chia đơi tượng khách hàng thành nhóm nhỏ KINH TÊ 4.3 Một sốkết so sánh thực nghiệm Để thực so sánh cơng cụ phân tích liệu, nhóm nghiên cứu sử dụng liệu thực hệ thông siêu thị áp dụng công cụ để so sánh Excel Advance, Power BI Python Bộ liệu mẫu: Bộ liệu mẫu gồm thơng tin tình trạng bán hàng thống kê theo hóa đơn bao gồm tổng cơng 92.000 hóa đơn khách hàng từ nhóm mặt hàng công ty, bao gồm: Điện máy Công nghệ; Mẹ bé; Nội thất đời sống; Sách, văn phòng phẩm âm nhạc; Sức khỏe mỹ phẩm làm đẹp; Thời trang phụ kiện; Thực phẩm; Vé máy bay - Dịch vụ đặt chỗ; Voucher dịch vụ Mục tiêu chúng tơi phân tích liệu để đưa dự báo nhóm mặt hàng, xu hướng, phân loại khách hàng cho tổ chức (Hình 2, 3,4) Bộ liệu mẫu gồm thơng tin tình trạng bán hàng thống kê theo hóa đơn, bao gồm tổng Hình 2: Phân tích Excel Advance I ! ! Tổng doanh thu JWT Nhóm mật hàng Điện máy cơng nghệ Mẹ bé Nội thất đời sống Totaỉ VND 199,377,167,683.00 VND 3,457,047,483.00 VND 250,000,000.000.00 VND 106 737,964,908.00 VND 200,000,000,000.00 Sách, văn phòng phẩm âm nhạc VND 2,406,581,690.00 VND 150,000,000,000.00 Sức khỏe mỹ phẩm làm đẹp VND 4,447,146,799.00 Thời trang phụ kiện VND 15,344,459,691.00 VND 31 389,363,464.00 Thực phẩm Vé máy bay - Dịch vụ đặt chỗ Voucher dịch vu VND 71,094,741,775.00 Tống doanh thu VN D 100,000,000,000.00 VND 5O,{fflO,O00.0ÍM).00 VNU0.00 VND 94,383,400.00 Điện Mẹ Nội thất Sách, máy bé đời ván Công nghệ VND 434,348,856 893.00 sổng Sức Thời ĩ hực Vé mây Voucher khỏe vã trang phẩm bay - đkb vụ phóng mỹ phẩm vả phẩm phụ kiệu Dịch vụ -đặt chố ám nhạc tàm đẹp iênnhốmhAnghốa - Hình 3: Phân tích Power BI f dô cao ị TỔNG CỌNG Theo TfN NHĨM HÁNỈ5 hóa < TỔNG CỦNG rlSH-.iWWrt PhO TÍNH/ Thánh PhO Tóíhị ĩộng Ha Nạ 514 59 Ho Chí Ml w, 3.17S1 Has Phàng Ố65 Dà NẴnạ 65? Bủng Na; 4Ộ8 6Ah Dương 45? Khanh Hoa 555 Căn Thơ 2:52 Hình 4: Phân tích Python cơng 92.000 hóa đơn khách hàng từ nhóm mặt hàng Nghiên cứu cho thấy: Nếu so sánh số liệu cố định, cơng cụ phân tích, vẽ biểu đồ thực phép tính trung gian Tuy nhiên, muốn xem xét giao diện thay đổi tham số thị trường (theo tỉnh/ thành phố) Power BI cho kết trực quan sinh động, dễ dàng cập nhật cho giao SỐ - Tháng 2/2022 85 TẠP CHÍ CƠNG THƯỬNG Bảng So sánh cơng cụ Nội dung Excel Advance Power BI Python Phân tích trực quan Tốt Rất tốt Tốt Tính dếsử dụng Rất tốt Tốt Thấp Biểu diên phức tạp, nhiểu tham số Thấp Khá cao Cao Biểu diên biểu đổ, đồ thị, mơ tả Tốt Rất tốt Khá Khơng Có yếu Tốt Hổìrợ truy vấn lổng Bài tốn phân loại Phân loại đơn có phép AND Phân loại đơn, phân loại kép, thực AND, OR NOT Phân loại đơn, phân loại kép, thực AND, OR, NOT phép toán phân cụm dựa học máy Bài toán dự báo Dự báo dựa hàm có sấn Dự báo dựa mơ hình Dự báo theo học máy tùy biến theo yêu cấu người dùng Bài tốn xếp Thủ cơng Thủ công xây dựng hàm Dựa hàm xếp theo cụm theo nhóm với u cẩu khác diện kết nơ'i thơng minh Excel Advance Tuy nhiên, để phân cụm đưa mơ hình dự báo tốt nhát Python với thư viện hỗ trợ phong phú từ xử lý liệu, phân tích văn bản, phân tích số liệu đến đưa mức độ Nhược điểm Python khó sử dụng (phải có kiến thức lập trình), biết cài đặt thêm thư viện So sánh công cụ chi tiết Bảng Kết luận Nghiên cứu với mục tiêu nghiên cứu, tìm hiểu, so sánh số cơng cụ phân tích liệu thơng minh ứng dụng hoạt động sản xuất, kinh doanh doanh nghiệp, tổ chức nay, như: Tableau Public, Power BI, FineReport, R Python, nhằm đưa sô hàm ý ứng dụng sử dụng cơng cụ phân tích liệu hoạt động thực tế Qua kết luận thây rằng, có nhiều cơng cụ hữu ích cho phân tích liệu, nhiên cơng cụ có mức độ ảnh hưởng ứng dụng toán khác ■ TÀI LIỆU THAM KHẢO: Nguyễn Anh Duy, Nguyễn Phúc Quỳnh Như (2019) Dữ liệu lớn: Cách thức khai thác hội từ liệu? Trường hợp Amazon Phát triển Hội nhập, số46 (56), tháng 05 - 06/2019 Phan Thanh Đức tác giả (2019) ứng dụng liệu lớn hoạt động quản trị quan hệ khách hàng ngân hàng thương mại Việt Nam Tạp chí Khoa học Đào tạo Ngân hàng, số 203, tháng 4/2019 Oreily (Trần Mạnh Hồng dịch) (2017) Phân tích liệu tinh gọn NXB Công Thương Lê Triệu Tuân, Lý Thu Trang, (2020) Tổng quan liệu lớn thương mại điện tử Tạp chí Khoa học Cơng nghệ - Đại học Thái Nguyên, 225(06): 536 - 540, 202 Trg (2020) Áp dụng hiệu giải pháp BI vào hoạt động kinh doanh Truy cập tại: trginternational.com/ solutions D Manning, et al., (2008) Introduction to Information Retrieval New York, USA: Cambridge University Press, ISBN: 0521865719,9780521865715, 2008 86 So 3-Tháng 2/2022 KINH TÊ Mandava, Geetha Bhargava (2018) Analysis and Design of Visualization of Educational Institution Database using Power BI Tool, Software & Data Engineering Global Journal of Computer Science and Technology, Vol 1(4), Ver 1.0, 2018 z Yongzheng and p Marco (2013) Predicting Purchase Behaviors from Social Media, in Proceedings of the 22ndInternational Conference on World Wide Web, WWW '13, Rio de Janeiro, Brazil, 2013 Ngày nhận bài: 11/1/2022 Ngày phản biện đánh giá sửa chữa: 11/2/2022 Ngày chấp nhận đăng bài: 21/2/2022 Thông tin tác giả: TS NGUYỄN THỊ HỘI ThS BÙI QUANG TRƯỜNG Khoa Hệ thống thông tin Kinh tế Thương mại điện tử Trường Đại học Thương mại SOME INTELLIGENT DATA ANALYSIS TOOLS AND THE USE OF THESE TOOLS TO SOLVE ECONOMIC PROBLEMS • Ph D NGUYEN THI HOI’ • Master BUI QUANG TRUONG’ ’Faculty of Economic Information Systems and E-commerce Thuongmai University ABSTRACT: The rapid development in information technologies and the use of social media networks in business activities have made the data analysis increasingly important in businesses and organizations This paper introduces and compares some intelligent data analysis tools and problems that are applied in practice today This paper has three parts in order to generally introduce the problem of data analysis in businesses and organizations, present some popular data analysis tools, and present comparisons and make some implications for the use of intelligent data analysis tools in production and business activities of enterprises, organizations and state agencies Keywords: data analysis, analytical tools, business data, forecasting problems SỐ3-Tháng 2/2022 87 ... cơng cụ phân tích d ĩ liệu có thay đổi cải tiến để theo kịp cạc yêu cầu người dùng Bài tốn phân tích liệu: Phân tích liệu Ỉ>ng tổ chức, doanh nghiệp toán ú trọng nhiều ứng dụng năm n Bài tốn phân. .. định chiến lược kinh doanh dựa liệu phân tích Có thể mơ tả tốn phân tích liệu doanh nghiệp, tổ chức dựa cơng cụ phân tích cách tổng qt Hình Hình ỉ: Mơ tả tốn Trong tốn phân tích liệu nghiên cứu... Intelligence - Kinh doanh thông minh (BI) kinh doanh cách mạng công nghệ 4.0 xu hướng chuyển đổi số bùng nổ Các báo cáo cho thấy kết phân tích liệu kinh doanh, đặc biệt phân tích liệu khách hàng ngày