7. Kết quả và đánh giá (Results and evaluation)
7.3.Đánh giá hệ thống
Phần này, trình bày đánh giá chi tiết thuật toán phục hồi. Chúng tôi đã thử nghiệm thuật toán với các bốn bộ dữ liệu ontology chuẫn, khác nhau, có sẵn. Việc thử nghiệm hệ thống trên bốn bộ dữ liệu khác nhau là để chứng minh hệ thống có thể sử dụng với nhiều ontology khác nhau và trong các môi trường không kiểm soát. Một lý do khác cho thử nghiệm này bao hàm nhiều cạnh của sự thay đổi ontology có thể xảy ra. Như ta có thể thấy trong bảng 4 và 5, các ontology khác nhau kết quả sự thay đổi cũng khác nhau. Ví dụ: ontology OMV và ontology SWRC có các thuộc tính và axiom prospective thay đổi nhiều hơn, SWETO có nhiều thay đổi trên các lớp và CRM có thay đổi hỗn hợp.
Quan trọng là quá trình ghi lại các thay đổi giữa các phiên bản ontology khác nhau. Để ghi lại những thay đổi trong CHL, ChangeTracer đã được cấu hình với Protégé, sau đó các thay đổi tương ứng được thực hiện trên các ontology để ghi lại trong CHL. Thông tin chi tiết về những thay đổi, các kiểu biến đổi, sự phụ thuộc, trình tự thích hợp và các hiệu ứng được phân tích bằng tay. Việc xác nhận phân tích sự thay đổi giữa hai phiên bản ontology là những thay đổi hoàn toàn và đúng đắn, phương thức difference() của lớp
Model trong Jena API giống như thao tác Compare của thuật toán Prompt được chúng tôi sử dụng. Việc ghi nhận sự thay đổi được sử dụng để đánh giá hệ thống được đưa ra dưới đây. Vì một số thay đổi sẽ thuộc nhiều loại nên tổng số sự thay đổi nhỏ hơn tổng số sự thay đổi chi tiết của từng loại.