Luận văn thạc sĩ tiêu chuẩn etsi tr 103 559 và các giải pháp đo đánh giá chất lượng mạng di động mặt đất

HỌC VIỆN CƠNG NGHỆ BƯU CHÍNH VIỄN THƠNG - HOÀNG VĂN ĐĂNG TIÊU CHUẨN ETSI TR 103 559 VÀ CÁC GIẢI PHÁP ĐO ĐÁNH GIÁ CHẤT LƯỢNG MẠNG DI ĐỘNG MẶT ĐẤT LUẬN VĂN THẠC SĨ KỸ THUẬT (Theo định hướng ứng dụng) HÀ NỘI – 2022 e HỌC VIỆN CÔNG NGHỆ BƯU CHÍNH VIỄN THƠNG - HOÀNG VĂN ĐĂNG TIÊU CHUẨN ETSI TR 103 559 VÀ CÁC GIẢI PHÁP ĐO ĐÁNH GIÁ CHẤT LƯỢNG MẠNG DI ĐỘNG MẶT ĐẤT CHUYÊN NGÀNH : KỸ THUẬT VIỄN THÔNG MÃ SỐ: 8.52.02.08 LUẬN VĂN THẠC SĨ KỸ THUẬT NGƯỜI HƯỚNG DẪN KHOA HỌC: PGS TS ĐẶNG THẾ NGỌC HÀ NỘI – 2022 e i LỜI CAM ĐOAN Tôi xin cam đoan luận văn: " Tiêu chuẩn ETSI TR 103 559 giải pháp đo đánh giá chất lượng mạng di động mặt đất" cơng trình nghiên cứu riêng tơi Việc sử dụng kết quả, trích dẫn tài liệu tham khảo tạp chí, trang web tham khảo đảm bảo theo quy định Các nội dung trích dẫn tham khảo tài liệu, sách báo, thông tin đăng tải tác phẩm, tạp chí trang web theo danh mục tài liệu tham khảo luận văn Tơi xin chịu hồn tồn trách nhiệm cho lời cam đoan Hà Nội, ngày tháng năm 2022 Học viên Hoàng Văn Đăng e ii LỜI CẢM ƠN Lời em xin trân trọng gửi lời cảm ơn sâu sắc đến quý thầy, cô Học viện Cơng nghệ Bưu Viễn thơng thời gian qua dìu dắt tận tình truyền đạt cho em kiến thức, kinh nghiệm vô quý báu mà em có kết ngày hơm Xin trân trọng cảm ơn PGS TS Đặng Thế Ngọc, người hướng dẫn khoa học luận văn, hướng dẫn tận tình giúp đỡ mặt để hồn thành luận văn Em xin chân thành gửi lời cảm ơn đến thầy, cô Khoa Đào tạo Sau Đại học tận tình truyền đạt kiến thức tạo điều kiện thuận lợi cho em trình học tập nghiên cứu, hoàn thành luận văn Mặc dù có nhiều cố gắng để hồn thành luận văn tất nhiệt tình khả mình, nhiên luận văn khơng thể tránh khỏi thiếu sót hạn chế Kính mong nhận chia sẻ đóng góp ý kiến thầy, cô giáo bạn đồng nghiệp Trân trọng cảm ơn! Hà Nội, ngày tháng năm 2022 Học viên Hoàng Văn Đăng e iii MỤC LỤC LỜI CAM ĐOAN i LỜI CẢM ƠN .ii MỤC LỤC iii DANH MỤC VIẾT TẮT v DANH MỤC BẢNG BIỂU vii DANH MỤC HÌNH viii MỞ ĐẦU CHƯƠNG 1: TỔNG QUAN VỀ ĐÁNH GIÁ CHẤT LƯỢNG MẠNG DI ĐỘNG 1.1 Tổng quan đánh giá chất lượng mạng di động 1.2 Quy trình phương pháp kĩ thuật chung đánh giá tham số chất lượng mạng di động 1.3 Các chuẩn đánh giá chất lượng mạng giới 11 1.4 Giải pháp Tems Director hãng Infovista 12 1.4.1 Tổng quan sản phẩm 12 1.4.2 Những ưu sản phẩm .13 1.4.3 Các ứng dụng 14 1.5 Giải pháp Nemo CEM hãng Keysight 15 1.5.1 Tổng quan sản phẩm 15 1.5.2 Những ưu sản phẩm .16 1.6 Giải pháp đo Bench Marking mạng Vương Quốc Anh hãng Umlaut17 1.6.1 Giới thiệu 17 1.6.2 Phương pháp đo kiểm định 18 1.6.3 Kết đo .20 1.7 Giải pháp đo Bench Marking nhà mạng Nam Phi hãng Rohde&Schwarz 25 1.7.1 Giới thiệu 25 1.7.2 Phương pháp đo kiểm định 26 1.7.3 Kết đề xuất 28 1.8 Kết luận chương 29 CHƯƠNG 2: TIÊU CHUẨN ETSI TR 103 559 30 e iv 2.1 Giới thiệu chung chuẩn ETSI TR 103 559 30 2.1.1 Giới thiệu 30 2.1.2 Đảm bảo tính cơng nhà mạng .31 2.2 Định nghĩa vùng đo theo chuẩn ETSI TR 103 559 32 2.2.1 Giới thiệu 32 2.2.2 Phân chia vùng đo 33 2.3 Phương pháp đo kiểm theo chuẩn ETSI TR 103 559 35 2.3.1 Giới thiệu 35 2.3.2 Phương pháp đo kiểm thoại 36 2.3.3 Phương pháp đo kiểm Video 37 2.3.4 Phương pháp đo kiểm liệu .38 2.3.5 Phương pháp đo kiểm dịch vụ khác .38 2.4 Xếp hạng tiêu đo kiểm theo chuẩn ETSI TR 103 559 41 2.4.1 Giới thiệu 41 2.4.2 Vùng đo kiểm 41 2.4.3 Các đo .42 2.5 Kết luận chương 49 CHƯƠNG 3: THỰC NGHIỆM TIÊU CHUẨN ETSI TR 103 559 TẠI KHU VỰC Ở VIỆT NAM 50 3.1 Kịch triển khai thực nghiệm 50 3.2 Thực nghiệm thu thập đánh giá liệu thuê bao với giải pháp Nemo CEM khu vực Việt Nam 51 3.2.1 Mô tả công việc .51 3.2.2 Kết thu thập Nemo CEM .51 3.2.3 Kết luận đề xuất .61 3.3 Thực nghiệm đo kiểm, phân tích đo Driving Test theo tiêu chuẩn ETSI TR 103 559 cho nhà mạng khu vực Việt Nam 63 3.3.1 Nội dung thực 64 3.3.2 Kết đo kiểm định 71 3.4 Nhận xét kết thu từ thực nghiệm, khuyến nghị từ kết đo 74 3.5 Kết luận chương 74 KẾT LUẬN VÀ KIẾN NGHỊ 75 DANH MỤC TÀI LIỆU THAM KHẢO 77 e v DANH MỤC VIẾT TẮT Từ viết tắt Tiếng Anh Tiếng Việt EVS Enhanced Voice Services Dịch vụ thoại nâng cao FB Full Band Toàn dải tần FTP File Transfer Protocol Giao thức truyền tập tin HD High Definition Độ phân giải cao HTTP HyperText Transfer Protocol Giao thức truyền siêu văn International Telecommunication Union International Telecommunication Union Telecommunication Liên minh Viễn thông Quốc tế IP Internet Protocol Giao thức Internet IPTV Internet Protocol Television Truyền hình giao thức Internet KPI Key Performance Indicator Chỉ số hiệu KQI Key Quality Indicator Chỉ số chất lượng LTE Long Term Evolution Tiến hóa dài hạn Multiple-Input MultipleOutput Multimedia Messaging Services Đa đầu vào đa đầu MOS Mean Opinion Score Điểm đánh giá trung bình OTA Over The Air Truyền qua không gian OTT Over The Top Đặt lên hàng đầu PA Problem Area Khu vực có vấn đề POLQA Perceptual Objective Listening Phân tích chất lượng thoại theo mục Quality Analysis tiêu tri giác ITU ITU-T MIMO MMS Liên minh viễn thông quốc tế- Lĩnh vực viễn thông Dịch vụ tin nhắn đa phương tiện e vi QAM Quadrature Amplitude Modulation Điều chế biên độ cầu phương QoE Quality of Experience Chất lượng trải nghiệm QoS Quality of Service Chất lượng dịch vụ Reference Signal Received Power Reference Signal Received Quality Received Signal Strength Indicator Signal to Interference plus Noise Ratio Cơng suất thu tín hiệu tham chiếu SMS Short Message Services Dịch vụ nhắn tin ngắn SNR Signal to Noise Ratio Tỷ lệ tín hiệu tạp âm TS Technical Specification Đặc tính kĩ thuật UL Up Link Đường lên UMTS Universal Mobile Telecommunication System Hệ thống viễn thông di động toàn cầu VoIP Voice Over IP Thoại IP VoLTE Voice Over LTE Thoại tảng mạng LTE VQI Voice Quality Index Chỉ số chất lượng thoại VSSSR Video Streaming Service Success Ratio Tỉ lệ thành công phát video trực tuyến WB Wide Band Băng rộng RSRP RSRQ RSSI SINR e Chất lượng thu tín hiệu tham chiếu Chỉ số cường độ tín hiệu thu Tỷ số tín hiệu nhiễu tạp âm vii DANH MỤC BẢNG BIỂU Bảng 1.1: Kết đo so sánh thoại nhà mạng vùng khác 22 Bảng 1.2: Kết đo so sánh liệu nhà mạng vùng khác 23 Bảng 1.3: Kết đo so sánh thu thập liệu người dùng nhà mạng 24 Bảng 2.1: Tỉ trọng ba vùng đo 34 Bảng 2.2: Tỉ trọng ba phân loại thành phố 34 Bảng 2.3: Tỉ trọng ba phân loại đường .34 Bảng 2.4: Tỉ trọng hai loại hình đo kiểm 35 Bảng 2.5: Tỉ trọng hai loại dịch vụ di động 35 Bảng 3.1: Thống kê số mẫu dịch vụ 52 Hình 3.1 Trọng số theo dịch vụ .53 Bảng 3.2: Tỉ lệ truy cập công nghệ 56 Bảng 3.3: Loại khu vực đo kiểm .64 Bảng 3.4: Các điểm đo Hotspot 65 Bảng 3.5: Bài đo Bench Marking 66 Bảng 3.6: Yêu cầu mẫu đo 68 Bảng 3.7: Kết xếp hạng nhà mạng 72 Bảng 3.8: Tính điểm dịch vụ nhà mạng 73 Bảng 3.9: Quy đổi điểm KPI 73 e viii DANH MỤC HÌNH Hình 1.1 Đánh giá chất lượng dịch vụ theo phương pháp cũ Hình 1.2 Thói quen sử dụng ứng dụng tảng di động Mỹ năm 20216 Hình 1.3 Giới thiệu Tems Director 13 Hình 1.4 Các ứng dụng Tems Director 15 Hình 1.5 Tổng quan Nemo CEM 16 Hình 1.6 nhà mạng nước Anh 17 Hình 1.7 Phân chia tỉ lệ loại hình đo kiểm Umlaut 19 Hình 1.8 Kết điểm tổng hợp chung nhà mạng Anh 21 Hình 1.9 Kết cấp độ đánh giá chất lượng mạng Rohde&Schwarz 26 Hình 1.10 Điểm số dịch vụ theo thang điểm 1000 loại hình dịch vụ 27 Hình 1.11 Điểm hiệu suất địa điểm, thời gian, hoàn cảnh định 27 Hình 1.12 Điểm hiệu suất mơ tả CLDV theo khu vực địa lý 28 Hình 1.13 Kết đo Bench Marking Nam Phi lần năm 2018 28 Hình 1.14 Kết đo Bench Marking Nam Phi lần năm 2018 29 Hình 2.1 Phân chia vùng đo kiểm 41 Hình 2.2 Các loại dịch vụ để thử nghiệm 42 Hình 2.3 Chức tính trọng số 43 Hình 2.4 Các thành phần đánh giá dịch vụ thoại 44 Hình 2.5 Các thành phần đánh giá dịch vụ phát video trực tuyến 46 Hình 2.6 Các thành phần đánh giá dịch vụ liệu 47 Hình 2.7 Các thành phần đánh giá dịch vụ khác 48 Hình 3.1 Trọng số thang điểm theo dịch vụ 53 Hình 3.2 Bản đồ vùng phủ 2G Đà Nẵng 57 Hình 3.3 Bản đồ vùng phủ 3G Đà Nẵng 57 Hình 3.4 Bản đồ vùng phủ 4G Đà Nẵng 58 Hình 3.5 Bản đồ tốc độ tải xuống 3G Đà Nẵng 58 Hình 3.6 Bản đồ tốc độ tải xuống 4G Đà Nẵng 59 e 63 Khuyến nghị: Lắp thêm new site 4G vị trí 3G có Lắp thêm sector kéo dài small cell chung cư, trung tâm thương mại  Một số khu vực có tốc độ tải xuống thấp lỗi truyền dẫn, phần cứng, băng thông thấp Khuyến nghị: Cần xử lý lỗi truyền dẫn, phần cứng, nâng cấp băng thông  Do hạn chế số lượng đầu cuối (200 thiết bị) dẫn đến đồ vùng phủ chưa thể tồn vùng phủ nhà mạng có Khi giải pháp triển khai diện rộng số lượng đầu cuối tăng lên đưa đồ vùng phủ cách chi tiết, xác đẩy đủ Khuyến nghị: Triển khai với số lượng nhiều license để đánh giá xác vùng phủ sóng 2G/3G/4G 3.2.3.3 Đề xuất  Hãng tiếp tục nghiên cứu để khắc phục nhược điểm hạn chế phần mềm  Triển khai số lượng lớn licence để thu thập số liệu đầy đủ, xác phạm vi tồn tỉnh tích hợp vào ứng dụng riêng nhà mạng tích hợp SIM để dễ dàng kiểm soát trạng thái hoạt động thuê bao  Đưa giải pháp Nemo CEM vào dịch vụ chăm sóc khách hàng VIP 3.3 Thực nghiệm đo kiểm, phân tích đo Driving Test theo tiêu chuẩn ETSI TR 103 559 cho nhà mạng khu vực Việt Nam Các quy chuẩn, tiêu chuẩn áp dụng:  European Telecommunications Standards Institute (2019), “ETSI TR 103 559 v1.1.1”, Speech and multimedia Transmission Quality (STQ); Best practices for robust network QoS benchmark testing and scoring [4] e 64  Bộ Thông tin Truyền thông (2011), “QCVN 36:2011/BTTTT”, Quy chuẩn kỹ thuật quốc gia chất lượng dịch vụ điện thoại mạng viễn thông di động mặt đất [1]  Bộ Thông tin Truyền thông (2019), “QCVN 81:2019/BTTTT”, Quy chuẩn kỹ thuật quốc gia chất lượng dịch vụ truy nhập Internet mạng viễn thông di động mặt đất [2] 3.3.1 Nội dung thực  Đo kiểm Driving Test tuyến đường đo điểm vị trí điểm nóng tập trung đơng người Thành phố Đà Nẵng  Thực đo kiểm đánh giá Benchmarking chất lượng dịch vụ 3G/4G theo cảm nhận khách hàng (thoại, duyệt Web, DL/ULHTTP/HTTPs, phát video trực tuyến) mạng MobiFone so với đối thủ Viettel, Vinaphone tuyến đường Thành phố Đà Nẵng  Thực đo điểm vị trí tập trung đông khách hàng khu tham quan, du lịch, điểm nóng khu vui chơi giải trí, khu tham quan, bãi biển 3.3.1.1 Route đo Việc lựa chọn khu vực đo kiểm Driving Test điểm đo Hotspot mô tả bảng 3.3 Bảng 3.3: Loại khu vực đo kiểm Loại Khu vực Khu vực Trọng số Quận/ Huyện đo kiểm Đo Nội Thành 45.00% Hải Châu + Thanh Khê Nội Thành 20.00% Sơn Trà + Ngũ Hành Sơn Các khu vực khác 15.00% Các điểm Hotspot Đường 20.00% Hòa Vang + Cẩm Lệ Driving Test Driving Test điểm Hotspot (Đo cố đinh) Driving Test Nội Thành Ngoại Thành e 65 Số km Route đo Đà Nẵng có tổng chiều dài 625km, trải rộng khắp quận trung tâm huyện Hịa Vang (được mơ tả hình 3.13) Hình 3.13 Route đo xe oto Đà Nẵng 3.3.1.2 Lựa chọn điểm nóng Danh sách khu vực đo điểm nóng Hotspot lựa chọn bảng 3.4 Bảng 3.4: Các điểm đo Hotspot Điểm HotSpot Địa điểm du lịch_ Tham quan (Khu) Điểm đo Điểm Cổng vào - Bãi xe Điểm Khu vực Trung tâm Điểm Khu Cổng InterContinental Asian Park - Helio Điểm Khu Cổng vào - Bãi đỗ xe Điểm Cầu Rồng Khu Cầu Rồng - Cầu Sông Điểm Cầu Tình yêu Hàn Điểm Chợ Hàn Điểm Nhà thờ Con gà Điểm Bãi tắm Phạm Văn Đồng Điểm Công viên Biển Đông Các Bãi Biển - Non Điểm Bãi tắm Mỹ Khê Nước,Ngũ Hành Sơn Điểm Bãi tắm T20 Điểm Non Nước - Ngũ Hành Sơn Đại học Bách Khoa - Cao Đẳng kinh Khu trường đại học (Tập tế kế hoạch trung đông sinh viên) Đại học Sư Phạm Đà Nẵng Chùa Linh Ứng - Bán đảo Sơn Trà e 66 3.3.1.3 Bài đo Bài đo Bench Marking, hướng dẫn, thiết lập đo nhà mạng Mobifone, Vinaphone, Viettel mô tả chi tiết bảng 3.5 Bảng 3.5: Bài đo Bench Marking TT I II Nội dung Thực đo Laptop 1_MobiFone Đo chất lượng MS gọi MS, duration 70s, gọi (đo CSFB) chế độ nghỉ 10s, Time out 15s MOS mạng 2G/3G/4G chọn giải thuật POLQA Duyệt 10 TOP Web Việt Nam theo thống kê Alexa (Youtube.com; Laodong.vn; Web browsing - Tuoitre.vn; Shopee.vn; Duyệt trang web 24h.com.vn; Vtv.vn; (LTE preferred) Kenh14.vn; Zingnews.vn; Google.com; Facebook.com) Thực trang Web Nghỉ 10s Đo HTTP Download 10s Download gói tin (1GB) Đo HTTP Upload thời gian 10s, nghỉ 5s; tiếp tục 10s Upload gói tin (1GB) Chế độ DualMode thời gian 10s, nghỉ 5s 3G/4G Đo HTTP Download file 5MB Download gói tin (5MB), nghỉ Đo HTTP Upload file 5s; tiếp tục Upload gói tin 3MB (3MB), nghỉ 5s (LTE preferred) Chọn Video TOP trending Youtube Tháng 02-2021, độ Đo Youtube phân giải Full HD 1080p, Streaming automatic Resolution Thời (LTE preferred) gian xem Video 60s; Nghỉ 10s Laptop 2_Vinaphone Đo chất lượng MS gọi MS, duration 70s, gọi (đo CSFB) nghỉ 10s, Time out 15s MOS Dualmode 2G/3G/4G chọn giải thuật POLQA Web browsing Duyệt 10 TOP Web Việt Duyệt trang web Nam theo thống kê Alexa e Chỉ tiêu đo CSSR, CDR, CST, MOS Tỉ lệ duyệt Web thành công, Tốc độ DL 800kB đầu tiên, thời gian phân giản tên miền DNS thời gian IP Service Access Tỉ lệ DL/ULthành công, tốc độ DL/UL trung bình Tỉ lệ DL/ULthành cơng, tốc độ DL/UL trung bình; thời gian DL/UL trung bình VSSSR, độ phân giải trung bình; tỉ lệ khung hình giật, Video Access Time CSSR, CDR, CST, MOS Tỉ lệ duyệt Web thành công, Tốc độ 67 TT Nội dung (LTE preferred) Đo HTTP Download 10s Đo HTTP Upload 10s Chế độ DualMode 3G/4G Đo HTTP Download file 5MB Đo HTTP Upload file 3MB (LTE preferred) Đo Youtube Streaming (LTE preferred) III Laptop 3_Viettel Đo chất lượng gọi (đo CSFB) Dualmode 2G/3G/4G Web browsing Duyệt trang web (LTE preferred) Đo HTTP Download 10s Đo HTTP Upload 10s Thực đo Chỉ tiêu đo (Youtube.com; Laodong.vn; DL 800kB đầu Tuoitre.vn; Shopee.vn; tiên, thời gian phân 24h.com.vn; Vtv.vn; giản tên miền DNS Kenh14.vn; Zingnews.vn; thời gian IP Google.com; Facebook.com) Service Access Thực trang Web Nghỉ 10s Download gói tin (1GB) Tỉ lệ DL/UL thành thời gian 10s, nghỉ 5s; tiếp tục cơng, tốc độ Upload gói tin (1GB) DL/UL trung bình thời gian 10s, nghỉ 5s Tỉ lệ DL/UL thành Download gói tin (5MB), nghỉ cơng, tốc độ 5s; tiếp tục Upload gói tin DL/UL trung bình; (3MB), nghỉ 5s thời gian DL/UL trung bình Chọn Video TOP trending VSSSR, độ phân Youtube Tháng 02-2021, độ giải trung bình; tỉ phân giải Full HD 1080p, lệ khung hình giật, automatic Resolution Thời Video Access gian xem Video 60s; Nghỉ Time 10s MS gọi MS, duration 70s, nghỉ 10s, Time out 15s MOS chọn giải thuật POLQA Duyệt 10 TOP Web Việt Nam theo thống kê Alexa (Youtube.com; Laodong.vn; Tuoitre.vn; Shopee.vn; 24h.com.vn; Vtv.vn; Kenh14.vn; Zingnews.vn; Google.com; Facebook.com) Thực trang Web Nghỉ 10s Download gói tin (1GB) thời gian 10s, nghỉ 5s; tiếp tục Upload gói tin (1GB) thời gian 10s, nghỉ 5s e CSSR, CDR, CST, MOS Tỉ lệ duyệt Web thành công, Tốc độ DL 800kB đầu tiên, thời gian phân giản tên miền DNS thời gian IP Service Access Tỉ lệ DL/ULthành công, tốc độ DL/UL trung bình 68 TT Nội dung Thực đo Chỉ tiêu đo Chế độ DualMode 3G/4G Đo HTTP Download Tỉ lệ DL/ULthành file 5MB Download gói tin (5MB), nghỉ công, tốc độ Đo HTTP Upload file 5s; tiếp tục Upload gói tin DL/UL trung bình; 3MB (3MB), nghỉ 5s thời gian DL/UL (LTE preferred) trung bình Chọn Video TOP trending VSSSR, độ phân Youtube Tháng 02-2021, độ Đo Youtube giải trung bình; tỉ phân giải Full HD 1080p, Streaming lệ khung hình giật, automatic Resolution Thời (LTE preferred) Video Access gian xem Video 60s; Nghỉ Time 10s 3.3.1.4 Yêu cầu mẫu đo Căn vào nội dung yêu cầu đo, cách thiết lập đo yêu tố đầu vào liên quan đến việc lập phương án, yêu cầu kết công việc mô tả bảng 3.6 Bảng 3.6: Yêu cầu mẫu đo STT I II Nội dung Đơn vị ĐO THEO ĐIỂM ĐO (5 KHU VỰC ĐO) Mạng MobiFone Đo chất lượng gọi (đo CFSB) Mẫu đo Đo tốc độ Download 4G Mẫu đo Đo tốc độ Upload 4G Mẫu đo Đo tốc độ Download 4G file 5MB Mẫu đo Đo tốc độ Upload 4G File 3MB Mẫu đo Đo Youtube Stream Mẫu đo Đo Webbrowsing động Mẫu đo Mạng Vinaphone Đo chất lượng gọi (đo CFSB) Mẫu đo Đo tốc độ Download 4G Mẫu đo Đo tốc độ Upload 4G Mẫu đo e Số lượng mẫu đo (Mẫu đo Data tính theo QCVN 120s/phiên) 500 375 375 375 375 375 375 500 375 375 69 STT III I II III Nội dung Đo tốc độ Download 4G đo file 5MB Đo tốc độ Upload 4G đo file 3MB Đo Youtube Stream Đo Webbrowsing động Mạng Viettel Đo chất lượng gọi (đo CFSB) Đo tốc độ Download 4G Đo tốc độ Upload 4G Đo tốc độ Download 4G đo file 5MB Đo tốc độ Upload 4G đo file 3MB Đo Youtube Stream Đo Webbrowsing động ĐO THEO ROUTE Mạng MobiFone Đo chất lượng gọi (đo CFSB) Đo tốc độ Download 4G Đo tốc độ Upload 4G Đo tốc độ Download 4G file 5MB Đo tốc độ Upload 4G đo file 3MB Đo Youtube Stream Đo Webbrowsing động Mạng Vinaphone Đo chất lượng gọi (đo CFSB) Đo tốc độ Download 4G Đo tốc độ Upload 4G Đo tốc độ Download 4G đo file 5MB Đo tốc độ Upload 4G đo file 3MB Đo Youtube Stream Đo Webbrowsing động Mạng Viettel Đo chất lượng gọi (đo CFSB) Đo tốc độ Download 4G Đo tốc độ Upload 4G Đo tốc độ Download 4G đo file 5MB Đo tốc độ Upload 4G đo file 3MB e Mẫu đo Mẫu đo Mẫu đo Mẫu đo Số lượng mẫu đo (Mẫu đo Data tính theo QCVN 120s/phiên) 375 375 375 375 Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo 500 375 375 375 375 375 375 Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo 1.000 750 750 750 750 750 750 Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo 1.000 750 750 750 750 750 750 Mẫu đo Mẫu đo Mẫu đo Mẫu đo Mẫu đo 1.000 750 750 750 750 Đơn vị 70 STT Nội dung Đo Youtube Stream Đo Webbrowsing động Đơn vị Mẫu đo Mẫu đo Số lượng mẫu đo (Mẫu đo Data tính theo QCVN 120s/phiên) 750 750 3.3.1.5 Sơ đồ bố trí thiết bị đo Căn vào đo, thiết bị đo kết nối bố trí hình 3.14 Hình 3.14 Sơ đồ bố trí thiết bị đo xe oto Trong đo cho nhà mạng bao gồm có thiết bị phục vụ cho việc đo kiểm như: Laptop cài sẵn phần mềm đo, điện thoại đo, Hub, GPS, Inverter Các thiết bị kết nối theo sơ đồ mơ tả hình 3.15 e 71 Hình 3.15 Sơ đồ kết nối đo nhà mạng Điện thoại đo sử dụng Sony XZ Premium, thiết bị hỗ trợ mạng 2G/3G/4G, hỗ trợ MIMO 4x4, LTE Cat 16 để đảm bảo đo tốc độ tải lên, tải xuống cao nhà mạng Chi tiết thông số kĩ thuật điện thoại trình bày hình 3.16 Hình 3.16 Thông số điện thoại đo Sony Xperia XZ Premium 3.3.2 Kết đo kiểm định Theo kết đo kiểm đánh giá ETSI 103 559 toàn tỉnh Đà Nẵng, MobiFone xếp vị trí thứ hai với 89.14/100 điểm so với Viettel đứng thứ (92.12/100) (xem hình 3.17)  Dịch vụ thoại: Viettel cho trải nghiệm người dùng tốt vượt trội e 72 nội thành ngoại thành (chất lượng gọi tốt, thời gian thiết lập gọi nhanh,…)  Dịch vụ liệu: tốc độ liệu Viettel cho người dùng cao so với MobiFone (duyệt web nhanh hơn, tốc độ download/upload tốt hơn) Kết cho thấy, số lượng trạm MobiFone Đà Nẵng nhiều hơn, MobiFone lại thiếu thiết bị phần cứng, truyền dẫn (MIMO 4x4, CA 2100, băng thông truyền dẫn,…) Điểm số Benchmarking MobiFone Vinaphone - Viettel Đà Nẵng 100.00 100.00 80.00 80.00 54.22 52.94 60.00 60.00 49.82 40.00 40.00 20.00 20.00 36.20 37.90 34.09 MobiFone Viettel Vinaphone 0.00 0.00 Voice Data Tổng Hình 3.17 Kết so sánh tổng điểm nhà mạng Kết xếp hạng chung nhà mạng: Viettel đứng số 1, Mobifone, đứng cuối Vinaphone (xem bảng 3.7) Bảng 3.7: Kết xếp hạng nhà mạng THANG ĐIỂM 100 ĐÁNH GIÁ THEO TIÊU CHUẨN ETSI 103.559 Khu vực Trọng số Điểm MBF Điểm VNP Điểm VTE Nội thành 65% 88.07 81.16 91.52 Ngoại thành 20% 90.57 86.18 93.62 Hotspot 15% 91.78 90.38 92.78 ĐÀ NẴNG 89.13 83.54 92.13 XẾP HẠNG Chi tiết bảng tính điểm dịch vụ nhà mạng ghi chi tiết bảng 3.8 e 73 Bảng 3.8: Tính điểm dịch vụ nhà mạng Nội thành Điểm Điểm Điểm MBF VNP VTE Dịch vụ Thoại CSFB MOS Youtube Streaming Browsing Dynamic Web Pages HTTP/HTTPs Download 10s HTTP/HTTPs Upload 10s HTTP/HTTPs Download 5MB HTTP/HTTPs Upload 3MB TỔNG ĐIỂM Điểm MBF Ngoại thành Điểm Điểm VNP VTE Điểm MBF Hotspot Điểm Điểm VNP VTE 36.03 33.61 38.61 35.98 33.51 36.34 37.21 36.42 36.92 12.92 12.81 12.91 12.94 12.94 12.94 12.91 12.87 12.91 11.49 11.68 11.40 12.04 12.05 12.10 12.00 12.25 11.98 5.90 5.79 6.89 6.77 7.81 8.20 6.65 7.31 7.94 6.99 6.82 7.38 7.24 7.98 8.23 7.65 7.84 7.40 6.94 4.85 6.62 7.71 5.85 7.51 7.19 6.45 7.40 7.81 5.60 7.71 7.89 6.05 8.29 8.18 7.24 8.23 81.16 91.52 90.57 86.18 93.62 91.78 90.38 92.78 88.07 Cách quy đổi điểm KPI mô tả bảng 3.9 Bảng 3.9: Quy đổi điểm KPI Nội thành (City/Town Limit) Trọng số c K PI Metric Trọng số Trong số c loại dịc h Voic e/Dat vụ a A VO ICE CSSR CDR MOS %MOS < 1.6 90% MOS CST [s] %CST > 15s 90% CST 40% 40% 40% 40% 40% 40% 40% 40% 40% Trọng số K PI dịc h vụ Exponent (1: linear, 0.5: sqrt) Ngư ỡng xấu Ngư ỡng tốt K PI Metric RO UTE B C D E F G 100.00% 100.00% 100.00% 100.00% 100.00% 100.00% 100.00% 100.00% 31.25% 37.50% 4.38% 5.62% 2.50% 6.25% 8.75% 3.75% 1 0.5 0.5 1 85% 10% 10% 12 3% 100% 0% 4.3 0% 4.75 4.5 0% Ngoại thành (City/Town Limit) Trọng số c Vinaphone Road Nội Thành Điểm thô_RO UT Điểm số E_NỘ I RO UTE (%) THÀNH Điểm MIN(MAX thô_RO UT ((G-E)/(FE_NỘ I E))*100;0) THÀNH*A* ;100)^D B*C 36.03 93.73 11.72 98.60 14.79 93.25 1.63 100.00 2.25 29.19 0.29 72.07 1.80 83.33 2.92 41.83 0.63 K PI Metric RO UTE G 99.74% 0.26% 4.26 0.00 4.31 4.76 0.14% 4.42 Điểm thô_RO UT Điểm số E_NỘ I RO UTE (%) THÀNH Điểm MIN(MAX thô_RO UT ((G-E)/(FE_NỘ I E))*100;0) THÀNH*A* ;100)^D B*C 38.61 98.25 12.28 97.40 14.61 99.13 1.74 100.00 2.25 64.31 0.64 96.50 2.41 95.33 3.34 89.62 1.34 K PI Metric RO UTE G 99.08% 1.73% 3.92 0.00 3.97 6.54 0.34% 6.15 Điểm thô_RO UT Điểm số E_NỘ I RO UTE (%) THÀNH Điểm MIN(MAX thô_RO UT ((G-E)/(FE_NỘ I E))*100;0) THÀNH*A* ;100)^D B*C 33.61 93.85 11.73 82.71 12.41 91.37 1.60 100.00 2.25 0.00 0.00 72.86 1.82 88.67 3.10 46.31 0.69 MobiFone Viettel Vinaphone Ngoại thành (City/Town Limit) Ngoại thành (City/Town Limit) Ngoại thành (City/Town Limit) Trọng số K PI dịc h vụ Exponent (1: linear, 0.5: sqrt) Ngư ỡng xấu Ngư ỡng tốt K PI Metric RO UTE A B C D E F K 100.00% 100.00% 100.00% 100.00% 100.00% 100.00% 100.00% 100.00% 31.25% 37.50% 4.38% 5.62% 2.50% 6.25% 8.75% 3.75% 1 0.5 0.5 1 85% 10% 10% 12 3% 100% 0% 4.3 0% 4.75 4.5 0% 40% 40% 40% 40% 40% 40% 40% 40% 40% Viettel Road Nội Thành 99.06% 0.14% 4.00 0.00 4.06 6.59 0.50% 6.33 K PI Metric Trọng số Trong số c loại dịc h Voic e/Dat vụ a VO ICE CSSR CDR MOS %MOS < 1.6 90% MOS CST [s] %CST > 15s 90% CST MobiFone Road Nội Thành 98.54% 0.00% 4.01 0.00 4.08 6.68 0.32% 6.43 e Điểm thô_RO UT Điểm số E_NGO AI RO UTE (%) THÀNH Điểm MIN(MAX thô_RO UT ((K -I)/(JE_NGO ẠI I))*100;0); THÀNH*A* 100)^D B*C 35.98 90.29 11.29 100.00 15.00 93.48 1.64 100.00 2.25 31.73 0.32 70.97 1.77 89.42 3.13 39.16 0.59 K PI Metric RO UTE K 99.74% 0.26% 4.27 0.24 4.32 4.55 0.29% 4.25 Điểm thô_RO UT Điểm số E_NGO AI RO UTE (%) THÀNH Điểm MIN(MAX thô_RO UT ((K -I)/(JE_NGO ẠI I))*100;0); THÀNH*A* 100)^D B*C 36.34 98.27 12.28 97.40 14.61 99.35 1.74 0.00 0.00 65.82 0.66 99.30 2.48 90.33 3.16 93.80 1.41 K PI Metric RO UTE K 97.58% 0.99% 3.79 0.00 3.85 6.43 0.31% 6.07 Điểm thô_RO UT Điểm số E_NGO AI RO UTE (%) THÀNH Điểm MIN(MAX thô_RO UT ((K -I)/(JE_NGO ẠI I))*100;0); THÀNH*A* 100)^D B*C 33.51 83.90 10.49 90.10 13.52 88.22 1.55 100.00 2.25 0.00 0.00 74.24 1.86 89.67 3.14 48.16 0.72 74 Căn theo kết đo kiểm Nội thành Ngoại thành Đà Nẵng, Viettel cho kết cảm nhận sử dụng dịch vụ thoại tốt hơn: điểm MOS trung bình tốt 90% số lượng mẫu gọi có điểm trung bình lên tới 4.32 (tiệm cận HD Voice) Thời gian thiết lập gọi Viettel nhanh 2s so với nhà mạng khác (MobiFone Vinaphone) 3.4 Nhận xét kết thu từ thực nghiệm, khuyến nghị từ kết đo Sau trình đo kiểm so sánh nhà mạng, tiến hành tổng hợp điểm đánh giá nhà mạng theo tiêu chuẩn ETSI TR 103559, số nhận xét so sánh đưa bảng 3.10 Bảng 3.10: So sánh kết trước sau áp dụng tiêu chuẩn ETSI TR 103 559 Tên đợt đo Đo kiểm đánh giá chất lượng dịch vụ theo phương pháp dựa chuẩn ETSI TS 103 559 3.5 Mô tả đối tượng trước áp Mô tả đối tượng sau áp dụng dụng tiêu chuẩn ETSI TR 103 tiêu chuẩn ETSI TR 103 559 559 -Chưa đánh giá chất - Đánh giá rõ ràng chất lượng lượng dịch vụ người dùng người dùng khu vực (nội đơ, vị trí trọng điểm ngoại thành, khu vực hotspot) -Chưa đánh giá cảm nhận khách hàng qua đo chất lượng thoại, liệu -Đánh giá trải nghiệm khách hàng thông qua đo hướng đến cảm nhận người dùng (duyệt web, xem youtube,…) -Chưa có phân biệt xếp hạng 1, 2, nhà mạng có kết đo kiểm gần (tốc độ 45Mbps 45.01Mbps) -Phân biệt xếp hạng rõ ràng benchmarking thông qua thang điểm (có sử dụng trọng số để phân biệt loại hình dịch vụ, khu vực địa lý) Sử dụng đo linh hoạt Kết luận chương Chương trình bày kịch triển khai thực nghiệm tiêu chuẩn ETSI TR 103 559 thành phố Đà Nẵng Trong việc triển khai đánh giá trải nghiệm khách hàng giải pháp Nemo CEM có kết cụ thể góp phần đóng góp vào việc nâng cao hiệu nhà mạng Mobifone Ngồi ra, phần chương nói q trình thực nghiệm đo kiểm, tính tốn, đánh giá xếp hạng nhà mạng theo tiêu chuẩn ETSI TR 103 559 e 75 KẾT LUẬN VÀ KIẾN NGHỊ Luận văn tập trung vào việc tìm hiểu tiêu chuẩn so sánh, đánh giá chất lượng mạng di động giới Việt Nam Cùng với nghiên cứu kĩ tiêu chuẩn ETSI TR 103 559 nhằm hiểu rõ phương pháp luận tiêu chuẩn Dựa kiến thức này, nêu kịch thực nghiệm theo tiêu chuẩn ETSI TR 103 559 Từ thực nghiệm việc đo kiểm so sánh chất lượng mạng nhà mạng Mobifone, Vinaphone, Viettel theo tiêu chuẩn ETSI TR 103 559 thành phố Đà Nẵng Thách Thức: Vấn đề công nhận từ phủ : việc triển khai đánh giá chất lượng mạng di động theo tiêu chuẩn ETSI TR 103 559 cần có quy chuẩn ban hành hướng dẫn Bộ Thông tin truyền thông Mặc dù dựa tài liệu ban hành ETSI tính thống hợp quy tiêu chuẩn ETSI TR 103 559 cần chờ Bộ TTTT ban hành để nhà mạng, tổ chức áp dụng công nhận kết Vấn đề triển khai: việc triển khai đánh giá chất lượng mạng toàn quốc cần nguồn lực đầu tư lớn, đồng thời khối lượng liệu lớn cần có chiến lược đầu tư nhà mạng việc hoạch định triển khai Vấn đề công nghệ: Việt Nam tiến hành triển khai thương mại hóa 5G tồn quốc xuất dịch vụ cần nghiên cứu sở đánh giá thêm, thiết bị đo kiểm 5G số lượng hỗ trợ nên để đánh giá nhiều đo với số lượng thiết bị hỗ trợ 5G thách thức với nhà mạng Hướng nghiên cứu tiếp theo: Nghiên cứu việc áp dụng giải pháp Nemo CEM để đánh giá cho mạng Nghiên cứu thêm việc đánh giá ứng dụng OTT (Whatsapp, Viber, Zalo ), dịch vụ mạng xã hội (Social Network Service) Facebook, Instagram, Twister nhằm hướng đến đánh giá hiệu người dùng e 76 Các đề xuất cho Bộ Thông Tin Truyền Thông: Với phát triển không ngừng ngành công nghiệp điện thoại thông minh (smartphone), lưu lượng truy cập sử dụng liệu tăng vọt so với trước đây, đồng thời dịch vụ truyền thống SMS, MMS dần trở nên quan trọng giảm tỷ lệ sử dụng Các tiêu chuẩn áp dụng Việt Nam QCVN 36, QCVN 81, QCVN 82 công cụ nhà mạng sử dụng để đánh giá chất lượng dịch vụ mạng di động với tham số QoS cũ Tuy nhiên phương pháp không phù hợp cho việc đánh giá trải nghiệm khách hàng Do đó, cần phải có giải pháp cho phép nhà cung cấp dịch vụ đánh giá trải nghiệm khách hàng Tiêu chuẩn ETSI TR 103 559 nước giới áp dụng cho kết đánh giá toàn diện Trên sở nghiên cứu thực nghiệm tiêu chuẩn ETSI TR 103 559 Việt Nam, học viên xin đưa đề xuất cho Bộ TT&TT sau:  Bộ TT&TT sớm công bố định hướng nghiên cứu, áp dụng tiêu chuẩn đánh giá chất lượng mạng di động Việt Nam  Bộ TT&TT tổ chức hội thảo giải pháp đánh giá chất lượng mạng di động mới, bao gồm đại diện nhà mạng, tổ chức, doanh nghiệp chuyên cung cấp dịch vụ đo kiểm đánh giá chất lượng mạng  Từ tảng trên, Bộ TT&TT sớm giao trách nhiệm nghiên cứu cho đơn vị chun trách (Cục Viễn Thơng), từ có báo cáo, trình lên Bộ tài liệu cho quy chuẩn  Bộ TT&TT phê duyệt tài liệu tiêu chuẩn làm thủ tục ban hành toàn quốc để hướng dẫn nhà mạng, tổ chức tuân thủ theo e 77 DANH MỤC TÀI LIỆU THAM KHẢO Tiếng Việt [1] Bộ Thông tin Truyền thông (2015) QCVN 36:2015/BTTTT:Quy chuẩn kỹ thuật quốc gia chất lượng dịch vụ điện thoại mạng viễn thông di động mặt đất, 12 trang [2] Bộ Thông tin Truyền thông (2019) QCVN 81:2019/BTTTT:Quy chuẩn kỹ thuật quốc gia chất lượng dịch vụ truy nhập Internet mạng viễn thông di động mặt đất, 15 trang [3] Bộ Thông tin Truyền thông (2014) QCVN 82:2014/BTTTT:Quy chuẩn kỹ thuật quốc gia chất lượng dịch vụ tin nhắn ngắn mạng viễn thông di động mặt đất, 10 trang Tiếng Anh [4] European Telecommunications Standards Institute (2019), ETSI TR 103 559 v1.1.1:Speech and multimedia Transmission Quality (STQ);Best practices for robust network QoS benchmark testing and scoring, pp.1-33 [5] Rhode&Schwarz (2019), 5G Benchmarking And Optimization, pp.1-42 [6] Umlaut Company (2019), The 2019 Mobile Network Test In The United Kingdom, pp.1-17 Website [7] https://know.infovista.com/ratemsdirector/p/1?utm_source%20=website&utm %20_%20medium=organic&utm_campaign=2106TEMSDirector5.1, truy nhập ngày 10 tháng 11 năm 2021 [8] https://www.keysight.com/zz/en/product/NTV00003A/nemo-customerexperience-monitor.html, truy nhập ngày 10 tháng 11 năm 2021 e ... - HOÀNG VĂN ĐĂNG TIÊU CHUẨN ETSI TR 103 559 VÀ CÁC GIẢI PHÁP ĐO ĐÁNH GIÁ CHẤT LƯỢNG MẠNG DI ĐỘNG MẶT ĐẤT CHUYÊN NGÀNH : KỸ THUẬT VIỄN THÔNG MÃ SỐ: 8.52.02.08 LUẬN VĂN THẠC SĨ KỸ THUẬT NGƯỜI... i LỜI CAM ĐOAN Tôi xin cam đoan luận văn: " Tiêu chuẩn ETSI TR 103 559 giải pháp đo đánh giá chất lượng mạng di động mặt đất" cơng tr? ?nh nghiên cứu riêng tơi Việc sử dụng kết quả, tr? ?ch dẫn tài... VỀ ĐÁNH GIÁ CHẤT LƯỢNG MẠNG DI ĐỘNG 1.1 Tổng quan đánh giá chất lượng mạng di động 1.2 Quy tr? ?nh phương pháp kĩ thuật chung đánh giá tham số chất lượng mạng di động 1.3 Các