(LUẬN văn THẠC sĩ) phân tích và mô phỏng tình trạng giao thông dựa vào khai phá dữ liệu của phương tiện vận tải luận văn ths máy tính 84801

ĐẠI HỌC QUỐC GIA HÀ NỘI TRƯỜNG ĐẠI HỌC CÔNG NGHỆ TRỊNH BÁ Q PHÂN TÍCH VÀ MƠ PHỎNG TÌNH TRẠNG GIAO THÔNG DỰA VÀO KHAI PHÁ DỮ LIỆU CỦA PHƯƠNG TIỆN VẬN TẢI LUẬN VĂN THẠC SĨ KHOA HỌC MÁY TÍNH HÀ NỘI - 2018 TIEU LUAN MOI download : skknchat@gmail.com ĐẠI HỌC QUỐC GIA HÀ NỘI TRƯỜNG ĐẠI HỌC CƠNG NGHỆ TRỊNH BÁ Q PHÂN TÍCH VÀ MƠ PHỎNG TÌNH TRẠNG GIAO THƠNG DỰA VÀO KHAI PHÁ DỮ LIỆU CỦA PHƯƠNG TIỆN VẬN TẢI Ngành: Khoa học máy tính Chuyên ngành: Khoa học máy tính Mã Số: 8480103.01 LUẬN VĂN THẠC SĨ KHOA HỌC MÁY TÍNH NGƯỜI HƯỚNG DẪN KHOA HỌC: PGS.TS PHAN XUÂN HIẾU TS NGUYỄN VĂN TĂNG HÀ NỘI - 2018 TIEU LUAN MOI download : skknchat@gmail.com i MỤC LỤC LỜI CẢM ƠN iii LỜI CAM ĐOAN iv DANH MỤC HÌNH VẼ v DANH MỤC BẢNG vii MỞ ĐẦU viii Chương 1: Khái quát toán khai phá liệu phương tiện vận tải 1.1 Tổng quan liệu GPS 1.1.1 Phần không gian 1.1.2 Phần kiểm soát 1.1.3 Phần sử dụng 1.2 Dữ liệu phương tiện vận tải 1.3 Các ứng dụng khai phá liệu phương tiện vận tải Chương 2: Một số nghiên cứu phân tích, mơ tình trạng giao thơng 2.1 Thuật toán phân cụm TRACLUS 2.1.1 Phân vùng quãng đường 10 2.1.2 Phân cụm 12 2.2 Mơ hình giao thông dựa “PageRank” 15 2.2.1 Xếp hạng duyệt web 15 2.2.2 Damping factor PageRank 16 2.2.3 PageRank có trọng số 17 2.2.4 Xếp hạng taxi 18 2.3 Sử dụng xích Markov dự đốn điểm đến 19 2.3.1 Xích Markov 19 2.3.2 Xích Markov di động (Mobility Markov Chain - MMC) 22 TIEU LUAN MOI download : skknchat@gmail.com ii 2.3.3 Sử dụng n-MMC để dự đoán điểm đến 24 Chương 3: Xây dựng hệ thống phân tích, mơ tình trạng giao thông 28 3.1 Các đề xuất 28 3.1.1 Đề xuất phân vùng đồ Hà Nội 28 3.1.2 Cách tính xếp hạng cho PageRank có trọng số 29 3.1.3 Sử dụng mơ hình n-MMC với nhãn xếp hạng 29 3.2 Tổng quan hệ thống 30 Chương 4: Thử nghiệm đánh giá 33 4.1 Tổng quan liệu sử dụng đề tài 33 4.1.1 Định dạng liệu 33 4.1.2 Dữ liệu từ thiết bị giám sát hành trình 33 4.1.3 Dữ liệu từ ứng dụng đặt taxi, điều phối taxi 35 4.1.4 Dữ liệu xử lý hệ thống 36 4.2 Lựa chọn công nghệ 37 4.2.1 Ngôn ngữ Nodejs 37 4.2.2 Ngôn ngữ python 38 4.2.3 Cơ sở liệu Mongo 38 4.2.3.2 Kiến trúc MongoDB 40 4.3 Kết thu 41 4.3.1 Môi trường thử nghiệm 41 4.3.2 Kết thử nghiệm 42 4.4 Tính xác liệu dự đốn 46 KẾT LUẬN 48 TÀI LIỆU THAM KHẢO 49 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 iii LỜI CẢM ƠN Lời đầu tiên, xin bày tỏ cảm ơn chân thành Thầy giáo, Tiến sĩ Phan Xuân Hiếu Thầy giáo, Tiến sĩ Nguyễn Văn Tăng – hai giáo viên hướng dẫn Hai thầy cho gợi ý dẫn quý báu, nguồn liệu để thực nghiệm đề tài, tơi khơng thể hồn thành luận văn khơng có bảo hai thầy Tơi xin cảm ơn Công ty Trách nhiệm hữu hạn phát triển Cơng nghệ Điện tử Bình Anh Cơng ty Cổ phần Công nghệ AIB Việt Nam cung cấp liệu phục vụ cho nghiên cứu luận văn Tôi xin gửi lời cảm ơn tới Thầy Cô khoa Công nghệ thông tin, trường Đại học Công nghệ, Đại học Quốc gia Hà Nội dìu dắt, hướng dẫn, dạy dỗ bảo tạo điều kiện cho học tập nghiên cứu trường suốt thời gian vừa qua Tôi xin cảm ơn người thân gia đình, bạn bè, đồng nghiệp quan tâm, động viên giúp đỡ, tạo điều kiện cho thời gian học tập nghiên cứu luận văn tốt nghiệp Mặc dù cố gắng hoàn thành luận văn chắn không tránh khỏi sai sót, tơi kính mong nhận thơng cảm bảo thầy cô bạn Xin chân thành cảm ơn (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 iv LỜI CAM ĐOAN Tôi Trịnh Bá Quý, học viên lớp Khoa học máy tính K22 xin cam đoan báo cáo luận văn viết hướng dẫn Thầy giáo, Tiến sĩ Phan Xuân hiếu Thầy giáo, Tiến sĩ Nguyễn Văn Tăng Tất kết đạt luận văn trình tìm hiểu, nghiên cứu riêng tơi Trong tồn nội dung luận văn, điều trình bày kết cá nhân tổng hợp từ nhiều nguồn tài liệu khác Các tài liệu tham khảo có xuất xứ rõ ràng trích dẫn hợp pháp Tơi xin hồn tồn chịu trách nhiệm chịu hình thức kỷ luật theo quy định cho lời cam đoan Hà Nội, ngày….tháng….năm 2018 Người cam đoan Trịnh Bá Quý (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 v DANH MỤC HÌNH VẼ Hình 1.1 Vệ tinh GPS Hình 1.2 Dữ liệu đến từ thiết bị giám sát hành trình Hình 1.3 Kiến trúc hệ thống định vị sử dụng thiết bị di động thơng minh .4 Hình 1.4 Sơ đồ hoạt động ứng dụng gọi xe taxi sử dụng thiết bị di động thông minh Hình 2.1 Mơ hình qng đường chung .8 Hình 2.2 Ví dụ phân vùng cụm quãng đường Hình 2.3 Ví dụ quãng đường phân đoạn 10 Hình 2.4 Cách tính độ đo MDL .12 Hình 2.5 Ví dụ mật độ truy cập mật độ kết nối 13 Hình 2.6 Ví dụ backlink 15 Hình 2.7 Ví dụ phiên đơn giản PageRank 16 Hình 2.8 Khơng có outlink từ trang k 16 Hình 2.9 Chuyển xếp hạng hai trang u v 16 Hình 2.10 Liên kết trang web 18 Hình 2.11 Xếp hạng taxi 19 Hình 2.12 Xích Markov biểu diễn chuỗi kiện thời tiết .20 Hình 2.13 Xích Markov biểu diễn xác suất chuỗi từ .20 Hình 2.14 Xích Markov biểu diễn theo phân bố cho chuỗi kiện thời tiết 22 Hình 2.15 Ví dụ n-MMC với n = 23 Hình 2.16 Đồ thị biểu diễn 2-MMC 26 Hình 3.1 Hệ thống mơ đưa gợi ý giao thông .30 Hình 3.2 Mơ hình chung cho tốn dự đốn .31 Hình 4.1Dữ liệu gps từ thiết bị giám sát hành trình cơng ty Bình Anh 34 Hình 4.2 Dữ liệu từ ứng dụng điều phối taxi .35 Hình 4.3 So sánh RDBMS MongoDB 41 Hình 4.4 Kết thuật tốn TRACLUS liệu mẫu 42 (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 vi Hình 4.5 Chia (vùng) đồ theo cấu hình .43 Hình 4.6 Hiển thị tuyến di chuyển đồ chia ô (vùng) 43 Hình 4.7 Biểu đồ vận tốc thông số thống kê ô (vùng) 44 Hình 4.8 Xếp hạng vùng thống kê 44 Hình 4.9 Xếp hạng vùng PageRank có trọng số 45 Hình 4.10 Traing tập liệu mẫu theo ngày 45 Hình 4.11 Gợi ý vùng di chuyển 46 Hình 4.12 Kiểm tra tính xác liệu dự đốn 47 (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 vii DANH MỤC BẢNG Bảng 2.1 Ma trận chuyển dịch .24 Bảng 3.1 Bảng ma trận chuyển dịch có thêm nhãn tốc độ di chuyển .30 Bảng 4.1 Dữ liệu đầu vào cho thuật toán phân cụm 36 Bảng 4.2 Dữ liệu sau phân cụm 36 (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 viii MỞ ĐẦU Phân tích liệu giao thơng cơng việc quan trọng có nhiều ý nghĩa thực tiễn Bài toán thu hút quan tâm đơn vị quản lý vận hành hạ tầng giao thông nhà khoa học lĩnh vực liên quan Phân tích liệu giao thơng giúp ích nhiều cho ngành ngành vận tải: vận chuyển người hàng hóa đến đích cách an tồn, tiết kiệm; ngành giao thơng: điều phối lưu lượng giao thông, trách ùn tắc giao thông; ngành quy hoạch đô thị: đưa giải pháp việc quy hoạch tuyến đường, nhà ga, bến xe Trong khoảng thời gian gần đây, đối tượng kinh doanh vận tải bắt buộc gắn thiết bị giám sát hành trình, cách thức kinh doanh vận tải đại hóa cách áp dụng cơng nghệ thơng tin, đặc biệt thiết bị di động thông minh Dữ liệu từ hệ thống giám sát hành trình, hệ thống nghiệp vụ phần cho phép ta biết vị trí thời phương tiện vận tải, biết thông tin kèm phương tiện vận tải vận tốc, người lái, sai phạm phương tiện vận tải Tuy nhiên việc khai thác liệu gặp nhiều thách thức lượng liệu lớn, liệu nhiễu nhiều Luận văn nêu phương pháp: (1) phân vùng phân cụm cung đường di chuyển theo thời gian để tìm quy luật di chuyển phương tiện vận tải; (2) Mô luồng di chuyển phương tiện vận tải theo vùng; (3) Xếp hạng khu vực đón, trả khách; (4) Dự đốn luồng giao thông vùng; (5) Đưa gợi ý di chuyển cho tài xế dựa vào mật độ giao thông kết xếp hạng vùng Các toán thực theo tiếp cận phân tích liệu giao thơng, cụ thể phân tích liệu hành trình thu nhận từ taxi theo thời gian thực gần thời gian thực Bố cục luận văn tổ chức sau:  Chương 1: Khái quát toán khai phá liệu phương tiện vận tải giới thiệu tổng quan toán khai phá liệu phương tiện vận tải, định nghĩa hướng tiếp cận  Chương 2: Một số nghiên cứu phân tích, mơ tình trạng giao thông giới thiệu số phương pháp, kỹ thuật nghiên cứu áp dụng cho toán phân tích, mơ tình trạng giao thơng (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 36 Dữ liệu từ ứng dụng đặt xe taxi gồm 23 triệu ghi, chiếm dung lượng 3GB, nhiên liệu từ ứng dụng rời rạc nhiều nhiễu 4.1.4 Dữ liệu xử lý hệ thống Sau tiền xử lý liệu từ nguồn liệu, thu liệu đầu vào để chạy thuật toán phân cụm sau: liệu có cột là: vĩ độ (Y), kinh độ (X), ID (ID tương ứng với taxi), trạng thái khách hàng gồm có trạng thái: 1- khơng có khách, - đường đón khách, 3- có khách Trạng thái Vĩ độ (Y) Kinh độ (X) ID 21.0300596 105.7889164 21.0300596 105.7889164 21.0301935 105.7859652 21.0301178 105.7896338 21.0287439 105.7889675 21.0296401 105.7913306 21.0671696 105.8348092 21.0671696 105.8348092 1 khách hàng Bảng 4.1 Dữ liệu đầu vào cho thuật toán phân cụm Đầu sau phân cụm thuật toán TRACLUS Dữ liệu gồm điểm xuất phát (vĩ độ, kinh độ), điểm đích (vĩ độ, kinh độ), ID ID cụm Điểm xuất phát Điểm đích ID ID cụm Vĩ độ (Y) Kinh độ (X) Vĩ độ (Y) Kinh độ (X) 21.04617 105.790172 21.046049 105.781655 21.038296 105.791987 21.032248 105.790092 21.030695 105.784669 21.030111 105.788194 21.030111 105.788194 21.03984 105.790379 Bảng 4.2 Dữ liệu sau phân cụm (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 37 4.2 Lựa chọn công nghệ Để xây dựng API phân tích lấy liệu online, ta sử dụng ngôn ngữ Nodejs để viết api cho truy vấn liệu, python để phân tích, mơ hình hố liệu, sở liệu Mongodb 4.2.1 Ngôn ngữ Nodejs Node.js phần mềm mã nguồn mở viết dựa ngôn ngữ JavaScript cho phép lập trình viên xây dựng ứng dụng chạy máy chủ Ban đầu, Node.js phát triển Ryan Dahl Phiên Node.js cho mắt vào năm 2009 Node.js chạy nhiều tảng khác Windows, Linux hay Mac OS Node.js phát triển sử dụng V8 Engine thư viện JavaScript Google phát triển để viết trình duyệt web Chrome Bản thân Node.js khơng phải ngơn ngữ lập trình mới, thay vào Node.js tảng mã nguồn mở (hay phần mềm mã nguồn mở) viết dựa ngôn ngữ JavaScript Node.js dùng để tạo ứng dụng chạy môi trường máy chủ ứng dụng web Tuy nhiên Node.js không giới hạn việc tạo website mà cịn dùng để phát triển công cụ chạy máy tính cá nhân Trong JavaScript thường dùng trình duyệt Node.js lại sử dụng để phát triển ứng dụng chạy máy chủ server Node.js chạy ứng dụng độc lập máy tính cá nhân (mà khơng cần phải thơng qua mơi trường trình duyệt) Nói xác khơng thể chạy Node.js sử dụng mơi trường trình duyệt Về chất Node.js phần mềm mở rộng phát triển tảng ngôn ngữ JavaScript Vì cú pháp Node.js giống với cú pháp JavaScript (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 38 Ưu điểm Node.js      JSON APIs: NodeJS điểu khiển REST/JSON APIs, với chế event-driven, non-blocking I/O(Input/Output) mơ hình kết hợp với Javascript lựa chọn tối ưu cho dịch vụ Webs làm JSON Ứng dụng trang: Với khả xử lý nhiều Request/s đồng thời thời gian phản hồi nhanh, ứng dụng sử dụng Node.js khơng cần tải lại trang, gồm nhiều request từ người dùng cần hoạt động nhanh Shelling tools unix: NodeJS tận dụng tối đa Unix để hoạt động Tức NodeJS xử lý hàng nghìn Process trả luồng khiến cho hiệu xuất hoạt động đạt mức tối đa Streamming Data (Luồng liệu): Các web thông thường gửi HTTP request nhận phản hồi lại (Luồng liệu) Giả xử cần xử lý luồng giữ liệu cực lớn, NodeJS xây dựng Proxy phân vùng luồng liệu để đảm bảo tối đa hoạt động cho luồng liệu khác Ứng dụng Web thực: Node.js sử dụng để xây dựng ứng dụng chat, feed Facebook, Twitter 4.2.2 Ngôn ngữ python Python ngơn ngữ lập trình phổ biến Được tạo Guido van Rossum vào năm 1991 Ngày nay, Python sử dụng nhiều mục đích, luận văn ngơn ngữ python sử dụng với mục đích phục vụ tính tốn khoa học Hiện nay, với khả xử lý phép toán phức tạp mình, Python sử dụng nhiều việc phát triển Trí Tuệ Nhân Tạo nghiên cứu lĩnh vực Machine Learning 4.2.3 Cơ sở liệu Mongo MongoDB (bắt nguồn từ “humongous”) hệ sở liệu NoSQL mã nguồn mở (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 39 Thay cho việc lưu trữ liệu vào bảng có quan hệ với truyền thống, MongoDB lưu liệu cấu trúc dạng giống với JSON(JavaScript Object Notation) gọi tên BSON Dự án bắt đầu triển khai vào tháng 10 năm 2007 10gen công ty xây dựng tảng dịch vụ (Platform as a Service) giống Google App Engine Phải đến năm 2009, dự án tách độc lập Hệ thống chạy Windows, Linux, OS X Solaris Nó số tổ chức sử dụng thực tế như: ● Caigslist : Công ty làm việc lịch vực môi giới quảng cáo website khác (giống adMicro Việt Nam) MongoDB giúp cho công ty quản lý hàng tỉ ghi quảng cáo thuận tiện nhanh chóng ● Foursquare mạng xã hội gắn thông tin địa lý Công ty cần lưu liệu rất nhiều vị trí địa điểm quán cafe, nhà hàng, điểm giải trí, lịch sử, … ghi lại nơi mà người sử dụng qua ● CERN : Trung tâm nghiên cứu lượng nguyên tử Châu Âu, sử dụng MongoDB để lưu trữ lại kết quả, liệu thí nghiệm Đây lượng liệu khổng lồ dùng để sử dụng tương lai ● MTV Networks, Disney Interactive Media Group, bit.ly, The New York Times, The Guardian, SourceForge, Barclays, … 4.2.3.1 Ưu điểm MongoDB ● ● ● ● Dễ học, có số nét giống với CSDL quan hệ – Quản lý command line GUI RockMongo phpMoAdmin Linh động, không cần phải định nghĩa cấu trúc liệu trước tiến hành lưu trữ, điểm hữu ích ta cần làm việc với dạng liệu khơng có cấu trúc Khả mở rộng tốt (distributed horizontally), khả cân tải cao, tích hợp cơng nghệ quản lý liệu tốt kích thước thơng lượng trao đổi liệu tăng Miễn phí (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 40 4.2.3.2 Kiến trúc MongoDB Một MongoDB Server chứa nhiều database Mỗi database lại chứa nhiều colection Đây tập documnents, mặt logic chúng gần tương tự table CSDL quan hệ Tuy nhiên, điểm hay ta không cần phải định nghĩa trước cấu trúc liệu trước thao tác thêm, sửa liệu… Một document đơn vị liệu – ghi (không lớn 16MB) Mỗi chúng lại chứa tập trước cặp key – value Key chuỗi ký tự, dùng để truy xuất giá trị dạng : string, integer, double, … Dưới ví dụ MongoDB document { _id : ObjectId("4db31fa0ba3aba54146d851a"), username : "joegunchy", email : "joe@mysite.org", age : 26, is_admin : true, created : "Sun Apr 24 2011 01:52:58 GMT+0700 (BDST)" } Cấu trúc giống JSON, nhiên, lưu trữ document database, MongoDB serialize liệu thành dạng mã hóa nhị phân đặc biệt – BSON Ưu điểm BSON hiệu dạng format trung gian XML hay JSON hệ tiêu thụ nhớ lẫn hiệu xử lý BSON hỗ trợ toàn dạng liệu mà JSON hỗ trợ (string, integer, double, Boolean, array, object, null) thêm số dạng liệu đặc biệt regular expression, object ID, date, binary, code (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 41 Hình 4.3 So sánh RDBMS MongoDB 4.3 Kết thu 4.3.1 Mơi trường thử nghiệm Các thuật tốn mơ hình hệ thống xây dựng thử nghiệm máy tính có cấu sau: Máy server     •CPU: Intel(R) Xeon(R) CPU E3-1230 v5 @ 3.40GHz RAM: GB GPU: Intel HD Graphic Hệ điều hành Centos Máy client     CPU: Intel® Core ™ i5 CPU M520 RAM: GB GPU: ATI mobility Radeaon HD 5730 Hệ điều hành Win7 Ultimate (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 42 4.3.2 Kết thử nghiệm Các quãng đường mà xe qua phân chia thành cụm quãng đường nhờ vào thuật toán TRACLUS Các cụm biểu diễn màu khác Hình 4.4 Chúng ta thấy qng đường có chung đặc tính (đặc điểm địa lý) gom chung vào cụm Mỗi cụm biểu diễn màu ngẫu nhiên khác Một cụm thỏa mãn yếu tố sau:Các đoạn đường chung có gần địa lý, số lượng đường cụm tối thiểu Với thông số cho phép phát hành vi quy luật di chuyển taxi Hình 4.4 Kết thuật toán TRACLUS liệu mẫu Để thực đề xuất mục 3.1.1 ta tiến hành chia vùng (ô) cho đồ Hà Nội, với điểm bắt đầu là: (20.9333, 105.75 ) điểm kết thúc (21.1333, 105.95), điểm bắt đầu điểm kết thúc lấy theo liệu đồ địa theo nhu cầu toán đặt ra, thu chiều dài gồm 50 vùng (ô), chiều rộng gồm 50 vùng (ô), tổng thể 2500 vùng (ô), vùng (ơ) có chiều dài chiều rộng xấp xỉ 500m (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 43 Hình 4.5 Chia (vùng) đồ theo cấu hình Cách chia vùng (ơ) kết hợp với biểu diễn liệu phân cụm hình 4.4 thấy số thông tin cụm (mật độ, độ quan trọng) Hình 4.6 Hiển thị tuyến di chuyển đồ chia (vùng) Để có thêm thông tin độ quan trọng vùng (ô) luận văn thực thống kê vẽ biểu đồ vận tốc vùng (ơ) hình 4.7 (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 44 Hình 4.7 Biểu đồ vận tốc thơng số thống kê (vùng) Để có thơng tin tổng quan, luận văn tiến hành xếp hạng vùng (ơ) phương pháp thống kê, hình 4.8 xếp hạng vùng (ô) theo vận tốc, với màu đỏ đậm vùng (ơ) có vận tốc di chuyển cao Hình 4.8 Xếp hạng vùng thống kê Thực xếp hạng PageRank có trọng số cho vận tốc di chuyển thời gian với hình 4.8, ta nhận thấy vùng (ơ) có màu đỏ đậm thuật tốn PageRank cho ta vùng đỏ liền mạch (do tính chất lan truyền) tập trung (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 45 vào đoạn đường cao tốc, vùng đỏ đậm liên tiếp gợi ý cho tài xế di chuyển cung đường có vận tốc cao (giúp tránh tắc đường, tiết kiệm nhiên liệu) Hình 4.9 Xếp hạng vùng PageRank có trọng số Ngoài luận văn tiến hành training liệu dựa ngày tuần hai tuần mô hình n-MMC (kết hình 4.10) từ đưa dự đoán cho tài xế thời điểm để lựa chọn cung đường tốt hình 4.11 Hình 4.10 Traing tập liệu mẫu theo ngày (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 46 Hình 4.11 Gợi ý vùng di chuyển 4.4 Tính xác liệu dự đốn Sử dụng mơ hình chung cho tốn dự đốn hình 3.2 hai nguồn liệu mục 4.1 luận văn tiến hành dự đoán điểm đến mật độ điểm đến dựa tập liệu ta thu kết dự đốn xác điểm đến từ 70% - 85% với liệu từ thiết bị giám sát hành trình, 50 – 73% với liệu từ ứng dụng đặt xe taxi, xác điểm đến mật độ điểm đến từ 45% - 60% với hai liệu Với tham số hình 4.12:     Miss: Các điểm để dự đoán không nằm tập liệu huấn luyện Incorrect: Dự đoán sai nhãn mật độ điểm đích Correct cell: Dự đốn điểm đến, sai mật độ điểm đích Correct: Đúng điểm đến mật độ Với cách tính sau:   Độ xác điểm đến mật độ = correct/tổng Độ xác điểm đến = (correct + correct cell)/tổng (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 47 Hình 4.12 Kiểm tra tính xác liệu dự đốn Kết luận: Trong chương luận văn tác giả trình bày q trình thử nghiệm bao gồm: mơi trường thử nghiệm, kết thử nghiệm Kết thử nghiệm thực hai liệu taxi từ thiết bị giám sát hành trình ứng dụng đặt xe taxi, trình bày tổng quan kết thu được, đưa cách đánh giá đánh giá độ xác mơ hình dự báo (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 48 KẾT LUẬN Những vấn đề giải luận văn Luận văn tiến hành nghiên cứu giải tốn Giám sát điều khiển giao thơng Bài tốn đánh giá có độ phức tạp cao có ứng dụng thực tiễn lớn Phương pháp giải luận văn tập trung vào phân cụm cung đường di chuyển, xếp hạng vùng giao thông, dự đoán lưu lượng điểm đến, sở gợi ý cung đường di chuyển cho người tham gia giao thơng Dựa nghiên cứu có, luận văn đề xuất số cách áp dụng, kết hợp nghiên cứu để giải toán thực tiễn Luận văn xây dựng mơ hình nhằm giải toán đặt thử nghiệm máy tính cá nhân Luận văn tiến hành xây dựng giao diện trực quan để hiển thị kết toán đặt Luận văn chạy hai liệu thực tế từ hai nguồn liệu khác có số kết định Định hướng nghiên cứu tương lai Tiến hành khắc phục tình trạng thiếu xác liệu thưa, đặc biệt liệu từ ứng dụng di động Tiến hành xây dựng hệ thống gợi ý theo hướng tiếp cận học tăng cường (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 49 TÀI LIỆU THAM KHẢO Tiếng Việt [1] Nguyễn Văn Tăng (2017) “Phát triển dịch vụ ứng dụng công nghệ GPS quản lý, giám sát, điều phối tối ưu hóa kế hoạch sử dụng phương tiện”, Bộ công thương - Chương trình quốc gia phát triển cơng nghệ cao đến năm 2020 [2] Viện Khoa học Công nghệ Giao thông (2016) “Dự thảo tiêu chuẩn quốc gia cho kiến trúc hệ thống giao thông thông minh its”, Bộ Khoa học Công nghệ Tiếng Anh [3] A A Markov (2006) “Classical Text in Translation An Example of Statistical Investigation of the Text Eugene Onegin Concerning the Connection of Samples in Chains”, Science in Context 19(4), pp 591–600 [4] Bin Jiang (2008) “Ranking Spaces for Predicting Human Movement in an Urban Environment”, Journal International Journal of Geographical Information Science Volume 23 Issue 7, July 2009 pp 823-837 [5] Daniel Jurafsky & James H Martin (2006) “Speech and Language Processing: An introduction to natural language processing, computational linguistics, and speech recognition”, Chapter [6] Jae-Gil Lee, Jiawei Han, Kyu-Young Whang (2007) “Trajectory clustering: a partition-and-group framework”, Proceedings of the 2007 ACM SIGMOD international conference on Management of data (SIGMOD '07) ACM, New York, NY, USA, pp 593-604 [7] Jiang Bian, Dayong Tian, Yuanyan Tang, Dacheng Tao (2018), “A survey on trajectory clustering analysis” [8] Naoto Mukai (2013) “PageRank-based Traffic Simulation Using Taxi Probe Data”, Procedia Computer Science, 2013 22: pp 1156-1163 [9] Raj Kishen Moloo, Varun Kumar Digumber (2011) “Low-Cost Mobile GPS Tracking Solution”, 2011 International Conference on Business Computing and Global Informatization (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 TIEU LUAN MOI download : skknchat@gmail.com (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801 (LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801(LUAN.van.THAC.si).phan.tich.va.mo.phong.tinh.trang.giao.thong.dua.vao.khai.pha.du.lieu.cua.phuong.tien.van.tai.luan.van.ths.may.tinh.84801