Phân tích và đánh giá kết quả

Một phần của tài liệu Phương pháp đồng huấn luyện và ứng dụng (Trang 67)

Các kết quả của các thử nghiệm được tổng hợp trong bảng 10 và bảng 11. Số liệu được trình bày ở đây là tỉ lệ lỗi thử nghiệm được lấy trung bình trên 5 phần dữ liệu huấn luyện, thử nghiệm và không có nhãn ngẫu nhiên.

Bảng 10 so sánh tỉ lệ lỗi trung bình của một bộ phân lớp đơn (CL1, CL2, CL3, CL4) khi huấn luyện chỉ với dữ liệu đã được gán nhãn với các bộ phân lớp được huấn luyện với mô hình bán giám sát ở trên. các tác giả chỉ trình bày kết quả của thuật toán MCS/CO2 dùng luật kết hợp trung bình („M‟) và điểm giữa („D‟), khi luật kết hợp cực đại cho các kết quả không thoả đáng. Các cột bóng mờ trong bảng cho biết các trường hợp khi dùng dữ liệu không gán nhãn đã giảm được lỗi phân lớp. Rõ ràng, các bộ phân lớp được huấn luyện dùng giải thuật MCS/CO1&2 thường làm tốt hơn các bộ phân lớp được huấn luyện bằng phương pháp có giám sát thuần tuý, đặc biệt cho trường hợp có rất ít dữ liệu có nhãn.

Bảng 10 . So sánh kết quả của các bộ phân lớp đơn

Mặt khác, bảng 11 lại so sánh kết quả sau bước kết nối cuối cùng của 4 máy phân lớp được huấn luyện với kỹ thuật có giám sát và với phương pháp bán giám sát kể trên.

Ở đây, các tác giả biểu diễn các kết quả của sự hợp nhất dùng luật hợp nhất cực đại, trung bình, giá trị giữa và tích, được chỉ ra trong bảng bởi các cột Max, Mn, Md và Pro tường ứng.

Bảng 11. Kết quả sau khi hợp nhất đầu ra cuối cùng của các bộ phân lớp.

Hình 27 đưa ra kết quả cải thiện độ chính xác trong các bộ phân lớp đơn với kỹ thuật bán giám sát MCS/CO1 và MCS/CO2 (với phép hợp nhất trung bình và giá trị giữa), với L có kích cỡ là 5, 10, 15, 20, 25 và 30.

Một lần nữa, sự cải thiện so với mô hình có giám sát thuần tuý trở nên rõ ràng với số lượng ít các dữ liệu đã gán nhãn. Phương pháp MCS/CO2 thường thực thiện tốt hơn MCS/CO1.

Hình 27. Biểu đồ so sánh kết quả của MCS với các kỹ thuật có giám sát.

Mặt khác, hình 28 đưa ra kết quả sự cải thiện của mô hình bán giám sát so với kỹ thuật MCS cơ bản, với tập L có các kích cỡ 5, 10, 15, 20, 25 và 30. Kết quả được trình bày với luật hợp nhất lớn nhất (max), nhỏ nhất (min), giá trị giữa (median) và tích (product). Rõ ràng mô hình MCS/CO1 mặc dù tạo ra sự giảm lỗi ấn tượng cho từng bộ phân lớp độc lập, kết quả hợp nhất của nó không có bất kỳ tiến bộ nào thậm chí có tác động tiêu cực tới tỉ lệ lỗi. Điều này có thể giải thích bởi sự thực rằng thuật toán huấn luyện gây cho các bộ phân lớp tình trạng độc lập để trở thành lỗi, nghĩa là các bộ phân lớp được huấn luyện theo cách mà chúng tạo ra cùng một lỗi đồng thời. Các nghiên cứu tương lai sẽ chú ý tới vấn đề này nhiều hơn. Thuật toán MCS/CO2, mặt khác vẫn làm giảm lỗi so với kỹ thuật MCS thông thường khi dùng kết quả ra hợp nhất.

Hình 28: Kết quả đã hợp nhất của các bộ phân lớp khi huấn luyện với MCS.

Một phần của tài liệu Phương pháp đồng huấn luyện và ứng dụng (Trang 67)