2 .Phân tích dữ liệu big data
2. Cơ hội và thách thức của big data
2.1 Cơ hội
Tiếp cận và nghiên cứu về dữ liệu lớn sẽ giúp cho chúng ta có thêm phương án giải quyết, xử lý và đối phó với những thách thức đối sản xuất số liệu thống kê chính thức trong hiện tại và tương lai. Những nghiên cứu thực nghiệm cần phải được tiến hành để khám phá những ứng dụng tiềm năng của dữ liệu lớn trong số liệu thống kê chính thức và nghiên cứu thực nghiệm đó phải là một phần trong quy trình sản xuất số liệu thống kê .
Nghiên cứu và dữ liệu lớn cần phải có cơ sở hạ tầng cơng nghệ thơng tin hiện đại, đáp ứng các yêu cầu xử lý khối lượng lớn dữ liệu và nhanh, đồng thời có thể tập hợp dữ liệu từ nhiều nguồn khác nhau. Thực hiện được điều này chúng ta có thể có được đội ngũ, nguồn nhân lực về quản lý và khai thác big data vững vàng về chuyên môn và được trải nghiệm thực tế
Tiếp cận và nghiên cứu về dữ liệu lớn sẽ giúp chúng ta có được những văn bản pháp lý bổ sung có thể giúp cho cơ quan thống kê chính thức có điều kiện để thực hiện được khai thác dữ liệu thơng qua hồ sơ hành chính, ngồi ra dữ liệu cũng được bảo đảm và giữ bí mật nhờ những văn bản pháp lý bổ sung này.
Sử dụng dữ liệu lớn đem lại niềm tin của cộng đồng với thống kê chính thức do q trình sản xuất số liệu thống kê chính thức với dữ liệu lớn hồn tồn khơng có sự tác động chủ ý của con người
2.2 Thách thức
Tài chính : nhiều đơn vị , tổ chức khơng đo lường được vấn đề sẽ phát sinh trong quá trình triển khai thực hiện, dự tốn kinh phí chưa chính xác, do vậy dự án không thực hiện được. Để triển khai được thành cơng, yếu tố tài chính có ý nghĩa rất quan trọng, một số tập đồn thương mại lớn có tiềm lực tài chính vững chắc đã
xây dựng thuận lợi hệ thống dữ liệu Big data như IBM, website bán hàng thương mại điện tử Amazon…
Chính sách, quy định luật pháp về truy cập và sử dụng dữ liệu : việc sử dụng và khai thác dữ liệu lớn phụ thuộc vào luật quy định của mỗi quốc gia
Ví dụ: ở canada người dùng có thể được tiếp cận dữ liệu từ cả hai tổ chức chính phủ và phi chính phủ, nhưng ở những nước khác nhưu Ireland thì phải được sự cho phép từ các cơ quan chính phủ. Điều này có thể dẫn đến những hạn chế để truy cập vào một số loại dữ liệu lớn
Trình độ khai thác và quản lý dữ liệu: Do luật pháp quy định sử dụng và khai thác ở mỗi quốc gia là khác nhau nên cách quản lý là cũng khác nhau. Một vấn đề liên quan đến quản lý thông tin hiện nay là nguồn nhân lực. Khoa học dữ liệu lớn đang phát triển mạnh trong những tổ chức tư nhân, trong khi đó bộ phận này chưa được liên kết với những tổ chức của chính phủ một cách chặt chẽ dẫn đến việc quản lý vẫn con nhiều vướng mắc…
Hạ tầng công nghệ thông tin : Cẩn phải cải thiện tốc độ dữ liệu truy cập vào các dữ liệu hành chính nghĩa là có thể sử dụng giao diện ứng dụng của Chương trình chuyên sâu tiêu chuẩn (API) để truy cập dữ liệu. Bằng cách này, nó có thể kết nối các ứng dụng cho dữ liệu thu về và xử lý dữ liệu trực tiếp với dữ liệu hành chính. Ngồi ra hệ thống khai thác dữ liệu lớn cũng cần phải được tính tốn để có thể kết nối vào được kho cơ sở dữ liệu truyền thống, đó cũng là một trong những thách thức lớn cần được giải quyết.