1. Trang chủ
  2. » Luận Văn - Báo Cáo

ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL

112 1,1K 0

Đang tải... (xem toàn văn)

Tài liệu hạn chế xem trước, để xem đầy đủ mời bạn chọn Tải xuống

THÔNG TIN TÀI LIỆU

Thông tin cơ bản

Định dạng
Số trang 112
Dung lượng 3,15 MB

Nội dung

LỜI NÓI ĐẦU Nhu cầu trao đổi thông tin qua internet đang ngày càng gia tăng, đặc biệt trong những năm gần đây có sự xuất hiện của các mạng xã hội, các mạng chia sẻ trực tuyến, các cộng đồng game trực tuyến… để đáp ứng được lưu lượng thông tin khổng lồ qua lại hàng ngày đó, các các hệ thống trung tâm dữ liệu đang phải mở rộng, đổi mới cả về kích thước với việc tăng số lượng máy chủ, các thiết bị mạng (switch, router) cũng như quy mô với nhiều trung tâm dữ liệu phân bố khắp thế giới. Chẳng hạn những tập đoàn lớn Google, Microsoft, Facebook,… đang duy trì các trung tâm dữ liệu với hàng ngàn các server trên khắp thế giới. Như một hệ quả tất yếu, việc tăng khả năng hoạt động cũng như chi phí dành cho hoạt động của trung tâm dữ liệu đang gia tăng chóng mặt và trở thành vấn đề cấp thiết thu hút nhiều sự quan tâm của các nhà nghiên cứu. Tuy nhiên việc nghiên cứu, triển khai các biện pháp cải thiện kĩ thuật lưu lượng sẽ gặp khó khăn do sự hiểu biết hạn chế về lưu lượng chảy trong trung tâm dữ liệu. Tập trung vào vấn đề này, em đã thực hiện đề tài tốt nghiệp nghiên cứu về lưu lượng trong trung tâm dữ liệu và từ đó xây dựng nên một mô hình lưu lượng phù hợp cho trung tâm dữ liệu vừa và nhỏ tương ứng môi trường nghiên cứu cấp trường và cấp doanh nghiệp. Trong thời gian làm việc tại phòng nghiên cứu C9201 cùng các thành viên nhóm Openflow, em đã hoàn thành đồ án với đề tài: “Nghiên cứu, đánh giá và mô hình hóa lưu lượng trong trung tâm dữ liệu dựa trên kết quả phân tích lưu lượng thu thập từ trung tâm dữ liệu Viettel”. Với những nỗ lực thực sự của bản thân và các thành viên trong nhóm, chúng em đã có những kết quả nhất định. Tuy nhiên thời gian thực hiện đồ án có hạn nên không thể tránh khỏi những thiếu sót. Kính mong thầy cô và các bạn có những góp ý để đồ án của em hoàn thiện hơn. Xin trân trọng cảm ơn trường Đại học Bách khoa Hà Nội, Trung Tâm Đào Tạo Tài Năng, Viện Điện Tử Viễn Thông trong suốt 5 năm qua đã dạy bảo và cung cấp cho em những kiến thức nền tảng rất có ích phục vụ cho quá trình thực hiện đồ án cũng như cuộc sống sau này. Xin chân thành cảm ơn TS Nguyễn Tài Hưng, người đã trực tiếp hướng dẫn em thực hiện đồ án này, cùng PGS.TS Nguyễn Hữu Thanh, TS.Trương Thu Hương đã dìu dắt, giúp đỡ và tận tình chỉ bảo em trong suốt thời gian thực hiện đồ án. Xin cảm ơn tập thể các bạn trong nhóm Green Network, phòng nghiên cứu C9 – 201 đã cùng mình nghiên cứu, chia sẻ trong suốt thời gian qua. Cảm ơn tập thể lớp KSTN – ĐTVT – K52 suốt thời gian học tập cùng các bạn là quãng thời gian không thể nào quên trong cuộc đời của mình. Cuối cùng, xin gửi lời cảm ơn tới gia đình, bố mẹ, anh em, đã là nền tảng, là người luôn theo sát, chăm sóc động viên cho con trong suốt cuộc đời này. Dù bất cứ khi nào, thành quả của con đạt được không thể thiếu công ơn sinh thành và dạy dỗ của gia đình. Hà Nội, Tháng 6 năm 2012 Sinh viên Lương Kim Doanh TÓM TẮT ĐỒ ÁN Các hệ thống trung tâm dữ liệu đang phát triển một cách nhanh chóng để đáp ứng nhu cầu sử dụng Internet ngày càng tăng của cộng đồng mạng. Do đó việc phát triển các kĩ thuật mạng, các kĩ thuật lưu lượng nhằm nâng cao khả năng lưu trữ, hoạt động của các trung tâm dữ liệu trở thành một vấn đề cấp thiết, thu hút sự quan tâm của rất nhiều nhà nghiên cứu. Tuy nhiên việc nghiên cứu sẽ gặp khó khăn do sự hiểu biết hạn chế về lưu lượng chảy trong trung tâm dữ liệu. Tập trung vào vấn đề này, em đã thực hiện đề tài tốt nghiệp nghiên cứu về lưu lượng trong trung tâm dữ liệu, phân tích các đặc điểm cả mức truyền thông mạng và mức truyền thông ứng dụng, đưa ra được mô hình lưu lượng phù hợp cho trung tâm dữ liệu vừa và nhỏ. Căn cứ vào kết quả nghiên cứu, em đã hoàn chỉnh bộ phát lưu lượng DITG và xây dựng giả lập một mô hình lưu lượng hoàn chỉnh trên Mininet. Cuối cùng, em đã đánh giá hoạt động của mô hình này. ABSTRACT Nowadays, data centers are growing rapidly to satisfy the tremendous traffic demand driven by the exponential development and popularity of the Internet. The development of networking technologies and traffic engineering to improve storage capability and performance of data centers have attracted worldwide reseachers. However, these researchers have encountered many challenges caused by the limited understanding about traffic in data centers. In this thesis, my researches focus on the data center traffic, analyzing its features in networkcommunication level and applicationcommunication level, providing an appropriate traffic model for small and medium data centers. Based on the research results, I have complemented the DITG traffic generator and built up a virtual traffic model in Mininet environment. Finally, I have evaluated the operation of the proposed model. MỤC LỤC LỜI NÓI ĐẦU 2 TÓM TẮT ĐỒ ÁN 2 ABSTRACT 2 MỤC LỤC 2 DANH SÁCH HÌNH VẼ 2 DANH SÁCH BẢNG BIỂU 2 DANH SÁCH CÁC THUẬT NGỮ VÀ TỪ VIẾT TẮT 2 GIỚI THIỆU ĐỀ TÀI 2 CHƯƠNG 1 : TỔNG QUAN VỀ TRUNG TÂM DỮ LIỆU 2 1.1 Tổng quan về trung tâm dữ liệu 2 1.1.1 Tầm quan trọng của trung tâm dữ liệu 2 1.1.2 Trung tâm dữ liệu xanh 2 1.1.3 Kiến trúc mạng trong trung tâm dữ liệu 2 1.2 Phân loại trung tâm dữ liệu 2 1.2.1 Phân loại theo cơ sở hạ tầng 2 1.2.2 Phân loại theo đối tượng sử dụng 2 1.2.3 Phân loại theo quy mô trung tâm dữ liệu 2 1.3 Năng lượng tiêu thụ của các thành phần mạng trong trung tâm dữ liệu 2 1.3.1 Mô hình công suất của các thiết bị mạng trong trung tâm dữ liệu 2 1.3.2 Các kỹ thuật tiết kiệm năng lượng trong mạng trung tâm dữ liệu 2 1.4 Định tuyến trong trung tâm dữ liệu 2 1.4.1 Định tuyến đơn đường 2 1.4.2 Định tuyến đa đường 2 1.5 Kết luận chương 2 CHƯƠNG 2 : NGHIÊN CỨU LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU THEO SHORTSCALE 2 2.1 Tổng quan về mô hình lưu lượng 2 2.1.1 Tầm quan trọng của mô hình lưu lượng 2 2.1.2 Các tiêu chuẩn đánh giá của mô hình lưu lượng 2 2.1.3 Mô tả toán học của lưu lượng 2 2.2 Đặc điểm của lưu lượng theo shortscale 2 2.2.1 Thu thập dữ liệu 2 2.2.2 Phân tích dữ liệu và đánh giá đặc điểm của lưu lượng 2 2.3 Mô hình lưu lượng cho trung tâm dữ liệu theo shortscale 2 2.4 Kết luận chương 2 CHƯƠNG 3 : PHÂN TÍCH LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU THEO LONGSCALE (DỰA TRÊN SỐ LIỆU ĐO ĐẠC THỰC TẾ TỪ TRUNG TÂM DỮ LIỆU CỦA VIETTEL) 2 3.1 Giới thiệu về DataCenter Viettel 2 3.2 Phân tích dữ liệu Web 2 3.2.1 Dữ liệu Web của các ngày trong tuần 2 3.2.2 Mô hình lưu lượng của dữ liệu Web 2 3.3 Phân tích dữ liệu Video 2 3.3.1 Dữ liệu Video của các ngày trong tuần 2 3.3.2 Mô hình lưu lượng của dữ liệu Video 2 3.4 Phân tích dữ liệu Voice 2 3.4.1 Dữ liệu Voice của các ngày trong tuần 2 3.4.2 Mô hình lưu lượng của dữ liệu Voice 2 3.5 Phân tích dữ liệu Aggregation 2 3.5.1 Dữ liệu Aggregation của các ngày trong tuần 2 3.5.2 Mô hình lưu lượng của dữ liệu Aggregation 2 3.6 Kết luận chương 2 CHƯƠNG 4 : XÂY DỰNG MODULE PHÁT LƯU LƯỢNG SỬ DỤNG DITG 2 4.1 Bộ phát lưu lượng DITG 2 4.1.1 Đặc trưng của DITG 2 4.1.2 Cấu trúc của DITG 2 4.1.3 Ưu điểm của DITG 2 4.2 Xây dựng module shortscale LogNormal trong DITG 2 4.2.1 Lý thuyết phân bố LogNormal 2 4.2.2 Phương hướng xây dựng module LogNormal 2 4.3 Xây dựng module longscale Logistic trong DITG 2 4.3.1 Lý thuyết phân bố Logistic 2 4.3.2 Phương hướng xây dựng module Logistic 2 4.4 Kết luận chương 2 CHƯƠNG 5 : XÂY DỰNG MÔI TRƯỜNG THỬ NGHIỆM VÀ ĐÁNH GIÁ KẾT QUẢ 2 5.1 Xây dựng môi trường thử nghiệm 2 5.1.1 Công cụ thực hiện 2 5.2 Đánh giá kết quả 2 5.2.1 Đánh giá module lognormal 2 5.2.2 Đánh giá module logistic 2 5.3 Kết luận chương 2 KẾT LUẬN ĐỒ ÁN VÀ HƯỚNG PHÁT TRIỂN TƯƠNG LAI 2 TÀI LIỆU THAM KHẢO 2

TRƯỜNG ĐẠI HỌC BÁCH KHOA HÀ NỘI VIỆN ĐIỆN TỬ - VIỄN THÔNG ~~~~~***~~~~~ ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC Đề tài: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MƠ HÌNH HỐ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL Giáo viên hướng dẫn Sinh viên thực Lớp MSSV : TS Nguyễn Tài Hưng : Lương Kim Doanh : KSTN - ĐTVT - K52 : 20070017 Hà Nội, 6-2012 TRƯỜNG ĐẠI HỌC BÁCH KHOA HÀ NỘI VIỆN ĐIỆN TỬ - VIỄN THÔNG ~~~~~***~~~~~ ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC Đề tài: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MƠ HÌNH HỐ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL Giáo viên hướng dẫn Sinh viên thực Lớp MSSV Cán phản biện : TS Nguyễn Tài Hưng : Lương Kim Doanh : KSTN - ĐTVT - K52 : 20070017 : ……………………………… Hà Nội, 6-2012 BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC BÁCH KHOA HÀ NỘI CỘNG HỊA XÃ HƠI CHỦ NGHĨA VIỆT NAM Độc lập - Tự - Hạnh phúc - NHIỆM VỤ ĐỒ ÁN TỐT NGHIỆP Họ tên sinh viên :.…………….………….…… Số hiệu sinh viên: ……………… Khố: …………………….Viện: Điện tử - Viễn thơng Ngành: ……………… Đầu đề đồ án: ……………………………………………… ……………………………………………………………………… …………………………………………………………………………………………………………… ……… Các số liệu liệu ban đầu: …………………………………… …………………………………………… …… …………………………… ……………………………………………………………………………………………………………………………….… ……………………… …………………………………………………………………………………… Nội dung phần thuyết minh tính tốn: ……………………………………………………………………………………………………………… … …………………………………………………………………………………………………………………………………… … ……………………………………………………………………………………………………………………………………… … …………………………………………………………………………………………… Các vẽ, đồ thị ( ghi rõ loại kích thước vẽ ): ……………………………………………………………………………………………………………………… … ………………………………………………………………………………………………………………………… ……… ………………………………………………………………………………………………………… Họ tên giảng viên hướng dẫn: ……………………………………………………… …………………… Ngày giao nhiệm vụ đồ án: ………………………………………………….…………… Ngày hoàn thành đồ án: ……………………………………………………………………… ……… Ngày Chủ nhiệm Bộ môn tháng năm Giảng viên hướng dẫn Sinh viên hoàn thành nộp đồ án tốt nghiệp ngày tháng năm Cán phản biện BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC BÁCH KHOA HÀ NỘI - BẢN NHẬN XÉT ĐỒ ÁN TỐT NGHIỆP Họ tên sinh viên: Số hiệu sinh viên: Ngành: Khoá: Giảng viên hướng dẫn: Cán phản biện: Nội dung thiết kế tốt nghiệp: Nhận xét cán phản biện: Ngày tháng năm Cán phản biện Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel LỜI NĨI ĐẦU Nhu cầu trao đổi thơng tin qua internet ngày gia tăng, đặc biệt năm gần có xuất mạng xã hội, mạng chia sẻ trực tuyến, cộng đồng game trực tuyến… để đáp ứng lưu lượng thơng tin khổng lồ qua lại hàng ngày đó, các hệ thống trung tâm liệu phải mở rộng, đổi kích thước với việc tăng số lượng máy chủ, thiết bị mạng (switch, router) quy mô với nhiều trung tâm liệu phân bố khắp giới Chẳng hạn tập đồn lớn Google, Microsoft, Facebook,… trì trung tâm liệu với hàng ngàn server khắp giới Như hệ tất yếu, việc tăng khả hoạt động chi phí dành cho hoạt động trung tâm liệu gia tăng chóng mặt trở thành vấn đề cấp thiết thu hút nhiều quan tâm nhà nghiên cứu Tuy nhiên việc nghiên cứu, triển khai biện pháp cải thiện kĩ thuật lưu lượng gặp khó khăn hiểu biết hạn chế lưu lượng chảy trung tâm liệu Tập trung vào vấn đề này, em thực đề tài tốt nghiệp nghiên cứu lưu lượng trung tâm liệu từ xây dựng nên mơ hình lưu lượng phù hợp cho trung tâm liệu vừa nhỏ tương ứng môi trường nghiên cứu cấp trường cấp doanh nghiệp Trong thời gian làm việc phòng nghiên cứu C9-201 thành viên nhóm Openflow, em hoàn thành đồ án với đề tài: “Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel ” Với nỗ lực thực thân thành viên nhóm, chúng em có kết định Tuy nhiên thời gian thực đồ án có hạn nên khơng thể tránh khỏi thiếu sót Kính mong thầy bạn có góp ý để đồ án em hồn thiện Lương Kim Doanh - KSTN - ĐTVT - K52Page Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel Xin trân trọng cảm ơn trường Đại học Bách khoa Hà Nội, Trung Tâm Đào Tạo Tài Năng, Viện Điện Tử Viễn Thông suốt năm qua dạy bảo cung cấp cho em kiến thức tảng có ích phục vụ cho q trình thực đồ án sống sau Xin chân thành cảm ơn TS Nguyễn Tài Hưng, người trực tiếp hướng dẫn em thực đồ án này, PGS.TS Nguyễn Hữu Thanh, TS.Trương Thu Hương dìu dắt, giúp đỡ tận tình bảo em suốt thời gian thực đồ án Xin cảm ơn tập thể bạn nhóm Green Network, phịng nghiên cứu C9 – 201 nghiên cứu, chia sẻ suốt thời gian qua Cảm ơn tập thể lớp KSTN – ĐTVT – K52 suốt thời gian học tập bạn quãng thời gian quên đời Cuối cùng, xin gửi lời cảm ơn tới gia đình, bố mẹ, anh em, tảng, người theo sát, chăm sóc động viên cho suốt đời Dù nào, thành đạt thiếu công ơn sinh thành dạy dỗ gia đình Hà Nội, Tháng năm 2012 Sinh viên Lương Kim Doanh Lương Kim Doanh - KSTN - ĐTVT - K52Page Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel TÓM TẮT ĐỒ ÁN Các hệ thống trung tâm liệu phát triển cách nhanh chóng để đáp ứng nhu cầu sử dụng Internet ngày tăng cộng đồng mạng Do việc phát triển kĩ thuật mạng, kĩ thuật lưu lượng nhằm nâng cao khả lưu trữ, hoạt động trung tâm liệu trở thành vấn đề cấp thiết, thu hút quan tâm nhiều nhà nghiên cứu Tuy nhiên việc nghiên cứu gặp khó khăn hiểu biết hạn chế lưu lượng chảy trung tâm liệu Tập trung vào vấn đề này, em thực đề tài tốt nghiệp nghiên cứu lưu lượng trung tâm liệu, phân tích đặc điểm mức truyền thông mạng mức truyền thông ứng dụng, đưa mơ hình lưu lượng phù hợp cho trung tâm liệu vừa nhỏ Căn vào kết nghiên cứu, em hoàn chỉnh phát lưu lượng D-ITG xây dựng giả lập mơ hình lưu lượng hồn chỉnh Mininet Cuối cùng, em đánh giá hoạt động mơ hình ABSTRACT Nowadays, data centers are growing rapidly to satisfy the tremendous traffic demand driven by the exponential development and popularity of the Internet The development of networking technologies and traffic engineering to improve storage capability and performance of data centers have attracted world-wide reseachers However, these researchers have encountered many challenges caused by the limited understanding about traffic in data centers In this thesis, my researches focus on the data center traffic, analyzing its features in network-communication level and application-communication level, providing an appropriate traffic model for small and medium data centers Based on the research results, I have complemented the D-ITG traffic generator and built up a Lương Kim Doanh - KSTN - ĐTVT - K52Page Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel virtual traffic model in Mininet environment Finally, I have evaluated the operation of the proposed model MỤC LỤC DANH SÁCH HÌNH VẼ Lương Kim Doanh - KSTN - ĐTVT - K52Page Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel DANH SÁCH BẢNG BIỂU Lương Kim Doanh - KSTN - ĐTVT - K52Page Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel DANH SÁCH CÁC THUẬT NGỮ VÀ TỪ VIẾT TẮT Viết tắt Tiếng Anh Tiếng Việt VMs QoS Virtual Machines Quality of Service Switch Router Core Aggregation Edge Network Address Translation Internet Protocol Secure Socket Layer Virtual Local Arena Network D Equal Cost Multi Path Media Access Control Pseudo Media Address Control Information Technology Máy ảo Chất lượng dịch vụ Chuyển mạch Bộ định tuyến Lõi Tích hợp Biên Chuyển đổi địa mạng Giao thức Internet NAT IP SSL VLAN D-ITG ECMP MAC PMAC IT Mạng cục ảo Bộ phát lưu lượng Đa đường cân tải Giao thức điều khiển truy nhập Địa MAC giả Công nghệ thông tin Lương Kim Doanh - KSTN - ĐTVT - K52Page 10 Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel Mean = 474717,8201 kbit/s Standard Deviation = 57250,9448 kbit/s Bảng 5.22: Kết đánh giá module Logistic với k =4 CDF Lưu lượng yêu cầu Lưu lượng near (h1-h2) Lưu lượng mid (h1-h4) Lưu lượng far (h1h10) Logistic Logistic Logistic Logistic Mean 539,1224 Mbit/s 417218,58825 kbit/s 474353,8932 kbit/s 474717,8201 kbit/s Standard Deviation 69,4337 Mbit/s 113500,98047 kbit/s 66039,16478 kbit/s 57250,9448 kbit/s Như lưu lượng mơ có hàm CDF tuân theo phân bố Logistic Tuy nhiên có sai lệch giá trị Mean giá trị Standard Deviation gói truyền lưu lượng với tốc độ lớn cỡ 500 Mbit/s Đây nhược điểm DITG 5.2.2.2 Đánh giá kết với đồ hình Fattree, k = Bảng 5.23: Kết đánh giá module Logistic với k =6 CDF Lưu lượng yêu cầu Lưu lượng near (h1-h2) Lưu lượng mid (h1-h10) Lưu lượng far (h1h108 5.3 Logistic Logistic Logistic Logistic Mean 539,1224 Mbit/s 415918,21166 kbit/s 403033,09046 kbit/s 333636,37135 kbit/s Standard Deviation 69,4337 Mbit/s 73610,65128 kbit/s 107571,02331 kbit/s 85558,25013 kbit/s Kết luận chương Như chương đánh giá độ xác module xây dựng thêm (module lognormal module logistic) phát lưu lượng theo Lương Kim Doanh - KSTN - ĐTVT - K52Page 98 Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel mơ hình near traffic, mid traffic far traffic với topo mạng Fattree, k = Fattree, k = KẾT LUẬN ĐỒ ÁN VÀ HƯỚNG PHÁT TRIỂN TƯƠNG LAI Đồ án thu kết sau: - Thứ nhất, tác giả tìm hiểu kiến thức trung tâm liệu sâu nghiên cứu đặc điểm lưu lượng trung tâm liệu Lương Kim Doanh - KSTN - ĐTVT - K52Page 99 Nghiên cứu, đánh giá mô hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel - Thứ hai, tác giả đưa mơ hình lưu lượng phù hợp cho trung tâm - liệu vừa nhỏ Cuối cùng, tác giả xây dựng module nhằm phát traffic giống với thực tế xây dựng môi trường thực - nghiệm để đánh giá kết đạt Kết đạt cịn có hạn chế Hướng phát triển đề tài là: Ứng dụng kết mơ hình lưu lượng vào dự án “Tiết kiệm lượng cho - trung tâm liệu xanh” nhằm đạt kết cuối Đưa hệ thống triển khải thiết bị thật ( switch tích hợp openflow card NetFPGA) TÀI LIỆU THAM KHẢO B Heller, S Seetharaman, P Mahadevan, Y Yiakoumis, P Sharma, S Banerjee, N McKeown, “Elastic tree: Saving Energy in Data Center Networks”, USENIX NSDI, April, 2010 M Al-Fares, A Loukissas, and A Vahdat “A Scalable, Commodity Data Center Network Architecture” In ACM SIGCOMM, pages 63-74, 2008 C Guo, G Lu, D Li, H Wu, X Zhang, Y Shi, C Tian, Y Zhang, and S Lu “BCube: A High Performance, Server-centric Network Architecture for Modular Data Centers” In ACM SIGCOMM, pages 75-86, 2008 Lương Kim Doanh - KSTN - ĐTVT - K52Page 100 Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel U.S Environmental Protection Agency’s Data Center Report to Congress Available: http://tinyurl.com/2jz3ft, truy cập lần cuối ngày 03/06/2012 The OpenFlow Switch Available: http://www.openflow.org , truy cập lần cuối ngày 03/06/2012 Nick McKeown, Tom Anderson, Hari Balakrishnan, Guru Parulkar, Larry Peterson, Jenifer Rexford, Scott Shenker, Jonathan Turner “OpenFlow: Enabling Innovation in Campus Networks” March 14, 2008 NOX Controller Available: http://www.noxrepo.org/, truy cập lần cuối ngày 03/06/2012 Mininet Available: http://yuba.stanford.edu/foswiki/bin/view/OpenFlow/Mininet , truy cập lần cuối ngày 03/06/2012 Open vSwitch: An Open Virtual Switch Available: http://openvswitch.org/ , truy cập lần cuối ngày 03/06/2012 10 Lxc linux containers Available: http://lxc.sf.net truy cập lần cuối ngày 03/06/2012 11 Lognormal distribution Available: http://en.wikipedia.org/wiki/Log- normal_distribution truy cập lần cuối ngày 03/06/2012 12 Theophilus Benson, Ashok Anand, Aditya Akella, Ming Zhang “Understanding Data Center Traffic Characteristics” Conference: ACM SIGCOMM Conference SIGCOMM , vol 40, no 1, pp 65-72, 2009 13 Theophilus Benson, Aditya Akella, David A Maltz “Network Traffic Characteristics of Data Centers in the Wild” Proceeding IMC '10 Proceedings of the 10th annual conference on Internet measurement 14 Murat Yuksel “Traffic generator for an On-line Simulator”, Computer Science Master Project summer 1999 15 Chuanxiong Guo, Haitao Wu, Kun Tan, Lei Shiy, Yongguang Zhang, Songwu Luz : “DCell: A scalable and Fault-Tolerant Network Structure for Data Centers” In SIGCOMM 2009 16 Radhika Niranjan Mysore, Andreas Pamboris, Nathan Farrington, Nelson Huang, Pardis Miri, Sivasankar Radhakrishnan, Vikram Subram “PortLand : A Scalable Fault- Tolerant Layer Data Center Network Fabric” In SIGCOMM 2009 Lương Kim Doanh - KSTN - ĐTVT - K52Page 101 Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel 17 Albert Greenberg, James R Hamilton, Navendu Jain, Srikanth Kandula, Changhoon Kim, Parantap Lahiri, David A Maltz, Parveen Pat “VL2: A Scalable and Flexible Data Center Network” In SIGCOMM 2009 18 Logistic distribution Available: http://en.wikipedia.org/wiki/Logistic_distribution truy cập lần cuối ngày 03/06/2012 19 Priya Mahadevan, Puneet Sharma, Sujata Banerjee, Parthasarathy Ranganathan “A Power Benchmarking Framework for Network Devices” Networking 2009: 795-808 20 Priya Mahadevan, Puneet Sharma, Sujata Banerjee, Parthasarathy Ranganathan “Energy Aware Network Operations” Proceeding INFOCOM'09 Lương Kim Doanh - KSTN - ĐTVT - K52Page 102 ... Nghiên cứu, đánh giá mơ hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel GIỚI THIỆU ĐỀ TÀI Tên đề tài: “ Nghiên cứu, đánh giá mơ hình hóa lưu lượng. .. hình hóa lưu lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel 1.2.3 Phân loại theo quy mô trung tâm liệu Theo quy mơ trung tâm liệu, phân trung tâm liệu thành... lượng trung tâm liệu dựa kết phân tích lưu lượng thu thập từ trung tâm liệu Viettel? ?? Mục tiêu: - Nghiên cứu đặc điểm lưu lượng trung tâm liệu đưa mơ - hình lưu lượng cho trung tâm lưu lượng Hoàn

Ngày đăng: 13/06/2014, 13:52

HÌNH ẢNH LIÊN QUAN

Hình 1.1: Trung tâm dữ liệu - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 1.1 Trung tâm dữ liệu (Trang 12)
Hình 1.2: Topo của một trung tâm dữ liệu điển hình - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 1.2 Topo của một trung tâm dữ liệu điển hình (Trang 15)
Hình 1.3: Kiến trúc FatTree (k=4) - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 1.3 Kiến trúc FatTree (k=4) (Trang 16)
Hình 1.4: Đặc tính tiêu thụ năng lượng của switch so với tải - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 1.4 Đặc tính tiêu thụ năng lượng của switch so với tải (Trang 24)
Hình 1.5: Định tuyến đơn đường 1.4.2 Định tuyến đa đường - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 1.5 Định tuyến đơn đường 1.4.2 Định tuyến đa đường (Trang 30)
Hình 1.6: Định tuyến ECMP - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 1.6 Định tuyến ECMP (Trang 31)
Hình 2.9: CDF của hiệu suất sử dụng link trong mỗi lớp 2.2.2.2 Phân tích dữ liệu mức giao tiếp ứng dụng - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 2.9 CDF của hiệu suất sử dụng link trong mỗi lớp 2.2.2.2 Phân tích dữ liệu mức giao tiếp ứng dụng (Trang 40)
Hình 2.12 là đồ thị thời gian inter-arrival theo dơn vị μs, ta có thể đưa ra - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 2.12 là đồ thị thời gian inter-arrival theo dơn vị μs, ta có thể đưa ra (Trang 42)
Hình 2.15: Đặc tính ON/OFF: lưu lượng trong trung tâm dữ liệu theo thời gian - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 2.15 Đặc tính ON/OFF: lưu lượng trong trung tâm dữ liệu theo thời gian (Trang 44)
Hình 3.17: Alpine 3804 Switch. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.17 Alpine 3804 Switch (Trang 49)
Hình 3.19: Tốc độ trung bình của dữ liệu web nhận được trong các ngày từ 26/10/2011 31/10/2011. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.19 Tốc độ trung bình của dữ liệu web nhận được trong các ngày từ 26/10/2011 31/10/2011 (Trang 51)
Hình 3.20: Tốc độ trung bình của dữ liệu web transmit của các ngày từ 26/10/2011 31/10/2011. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.20 Tốc độ trung bình của dữ liệu web transmit của các ngày từ 26/10/2011 31/10/2011 (Trang 52)
Hình 3.23: Link Utilization của dữ liệu video nhận được trong các ngày từ 26/10/2011 31/10/2011. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.23 Link Utilization của dữ liệu video nhận được trong các ngày từ 26/10/2011 31/10/2011 (Trang 57)
Hình 3.24: Link Utilization của dữ liệu video transmit trong các ngày từ 26/10/2011 31/10/2011. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.24 Link Utilization của dữ liệu video transmit trong các ngày từ 26/10/2011 31/10/2011 (Trang 58)
Hình 3.25: CDF của hàm phân bố của dữ liệu video nhận được của các ngày trong tuần từ 26/10/2011 31/10/2011. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.25 CDF của hàm phân bố của dữ liệu video nhận được của các ngày trong tuần từ 26/10/2011 31/10/2011 (Trang 60)
Hình 3.26: Link Utilization của dữ liệu voice nhận được trong các ngày từ 26/10/2011 31/10/2011. - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.26 Link Utilization của dữ liệu voice nhận được trong các ngày từ 26/10/2011 31/10/2011 (Trang 63)
Hình 3.29: Link Utilization của dữ liệu Aggregation transmit trong các ngày từ 26/10/201131/10/2011 - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 3.29 Link Utilization của dữ liệu Aggregation transmit trong các ngày từ 26/10/201131/10/2011 (Trang 67)
Hình 4.32: Khả năng gửi nhiều flow của ITGSend - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 4.32 Khả năng gửi nhiều flow của ITGSend (Trang 71)
Hình 4.33: ITGRecv - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 4.33 ITGRecv (Trang 72)
Hình 4.36: Mối quan hệ giữa phân bố normal và phân bố lognormal - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 4.36 Mối quan hệ giữa phân bố normal và phân bố lognormal (Trang 76)
Hỡnh 4.35: CDF của phõn bố lognormal (với à=0 và σ thay đổi) - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
nh 4.35: CDF của phõn bố lognormal (với à=0 và σ thay đổi) (Trang 76)
Hình 5.40: Mô hình hoạt động của OpenFlow switch - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.40 Mô hình hoạt động của OpenFlow switch (Trang 84)
Hình 5.42 mô tả topo mạng với các switch OpenFlow và NOX controller, ở đây các - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.42 mô tả topo mạng với các switch OpenFlow và NOX controller, ở đây các (Trang 90)
Hình 5.45: Near Traffic – Lưu lượng chảy qua duy nhất một switch - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.45 Near Traffic – Lưu lượng chảy qua duy nhất một switch (Trang 94)
Hình 5.47: Far traffic - Lưu lượng chảy giữa hai pod khác nhau - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.47 Far traffic - Lưu lượng chảy giữa hai pod khác nhau (Trang 95)
Hình 5.46:Mid traffic - Lưu lượng chảy trong một pod - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.46 Mid traffic - Lưu lượng chảy trong một pod (Trang 95)
Hình 5.48: CDF của lưu lượng thực nghiệm của Near Traffic (h1-h2), k=4 - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.48 CDF của lưu lượng thực nghiệm của Near Traffic (h1-h2), k=4 (Trang 96)
Hình 5.49: CDF của lưu lượng thực nghiệm của Near Traffic (h1-h2), k=4 - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.49 CDF của lưu lượng thực nghiệm của Near Traffic (h1-h2), k=4 (Trang 97)
Hình 5.50: CDF của lưu lượng thực nghiệm của Near Traffic (h1-h2), k=4 - ĐỒ ÁN TỐT NGHIỆP ĐẠI HỌC: NGHIÊN CỨU, ĐÁNH GIÁ VÀ MÔ HÌNH HOÁ LƯU LƯỢNG TRONG TRUNG TÂM DỮ LIỆU DỰA TRÊN KẾT QUẢ PHÂN TÍCH LƯU LƯỢNG THU THẬP TỪ TRUNG TÂM DỮ LIỆU VIETTEL
Hình 5.50 CDF của lưu lượng thực nghiệm của Near Traffic (h1-h2), k=4 (Trang 97)

TỪ KHÓA LIÊN QUAN

TÀI LIỆU CÙNG NGƯỜI DÙNG

TÀI LIỆU LIÊN QUAN

w