Để đánh giá đƣợc mô hình mạng lựa chọn chúng ta sử dụng mô hình mạng dùng các tham số của ngày hôm trƣớc để dự báo giá của ngày hôm sau (sau đây đƣợc gọi là mô hình 1 point). So sánh kế quả với mô hình mạng dự trên quy tắc 5 điểm trên (sau đây đƣợc gọi là mô hình 5 point). So sánh đƣợc thực hiện trên mã giao dich KCZ, sử dụng tập dữ liệu đánh giá năm 2013.
Mô hình mạng 1 point đƣợc sử dụng có các thông số kỹ thuật mạc định của mã nguồn mở. Hệ số bias =1, mạng có mô hình nhƣ Hình 4.2. Mạng sẽ dừng học khi đạt một trong hai tiêu chuẩn đánh giá là lỗi MSE = 0.000299 và số lần học là 8000 lần.
Chúng ta cùng quan sát biểu đồ dự đoán của mạng 1 point và mạng 5 point trong Hình 4.5 và 4.6.
48
Hình 4.5: Kết quả dự báo và giá trị thực mạng 1 point
Hình 4.6: Kết quả dự báo và giá trị thực mạng 5 point
Quan sát đồ thị Hình 4.5 ta thấy giá trị dự đoán của mạng đƣờng màu xanh biến động lên xuống xung quanh đƣờng giá trị thực đƣờng màu đỏ. Xét trên toàn đƣờng đi, giá trị giữa hai điểm có khoảng cách rõ. Trên đồ thị Hình 4.6 đƣờng giá trị thực màu đỏ, đƣờng dự báo màu xanh. Ta thấy đƣờng màu xanh biến thiên xung quanh đƣờng màu đỏ. Các giá trị dự đoán và gia trị thực có khoảng cách nhỏ ít nhận thấy trên đồ thị. Bằng quan sát biểu đồ đƣờng thẳng ta thấy mạng 5 point có giá trị dự báo chính xác hơn mạng 1 point. Cụ thể hai đƣờng giá trị thực và dự đoán trên đồ thị sát nhau hơn.
Quan sát biểu đồ tƣơng quan giữa hai mạng Hình 4.7 và Hình 4.8 ta thấy rằng. Trên đồ thị tƣơng quan của mạng 1 point các điểm nằm sát trên đƣờng trung bình. Tuy nhiên vẫn còn điểm ngoại lại nằm xa đƣờng trung bình. Khảng cách giữa đƣờng biên lớn nhất tới đƣờng trung bình là lớn. Trong biểu đồ tƣơng quan mạng 5 point ta thấy các điểm nằm sát đƣờng trung bình hơn mạng 1 point, khảng cách từ đƣờng biên lớn
49 về tới đƣờng trung bình là nhỏ hơn. Quan quan sát biểu đồ tƣơng quan ta thấy độ ổn định của mạng 5 point trên các điểm có khoảng cách cách đều đƣờng trung bình hơn, và khoảng cách tới đƣờng trung bình nhỏ hơn. Bảng sẽ mô tả so sánh trên các thông số cụ thể.
Hình 4.7: Biểu đồ tương quan KCZ 13- 1 point
Hình 4.8: Biểu đồ tương quan KCZ13- 5 point
100 105 110 115 120 125 130 135 100 105 110 115 120 125 130 135 100 105 110 115 120 125 130 135 100 105 110 115 120 125 130 135
50 Mạng 1 point Mạng 5 point
Sai số quân phƣơng (MSE) 9.759472912 3.191979148 Sai số tuyệt đối (MAE) 2.428571459 1.464473169 Hệ số tƣơng quan (r) 0.91400 0.96785
Bảng 4.7: So sánh mạng 1 point và 5 point
So sánh về giá trị lỗi bình quân ta thấy mạng 1 point lớn hơn mạng 5 point gấp 3 lần giá trị. So sánh trên sai số tuyệt đối thì mạng 5 point gấp 1.66 lần mạng 1 point. Thực hiện so sánh với một số mã giao dịch khác ta thu đƣợc giá trị trong Bảng 4.8:
Mã giao dịch
Mạng 1 point Mạng 5 point
Lỗi MSE Hệ số tƣơng quan
Lỗi MSE Hệ số tƣơng quan KCN 91.10655933 0.95912 4.923479839 0.98060 CTN 41.97306720 0.58605 2.695210526 0.85310 SBN 1.289069908 0.55724 0.067341959 0.94320 CCN 7990.879611 0.75407 562.3320663 0.96312
Bảng 4.8: Bảng so sánh mạng 1 point và 5 point trên các mã giao dịch
Từ kết quả trên cho thấy mạng 5 point hoạt động hiệu quả hơn so với mạng 1 point. Đồng thời kết quả đánh giá trên các hệ số lỗi và hệ số tƣơng quan chính xác hơn mạng 1 point.