5.4.1.1. IOU
IoU – Intersection over Union là một số liệu để định lượng phần trăm trùng lặp giữa mặt nạ được dán nhãn và đầu ra của dự đoán và được tính theo công thức (23). Với A là tổng số điểm ảnh của mặt nạ được dán nhãn; B là tổng số điểm ảnh của mặt nạ đầu ra dự đoán.
IoU =
∩
∪
5.4.1.2. FLOPs
Để đánh giá tốc độ của mô hình, nhóm đếm xem có bao nhiêu tính toán trong đó, được gọi là FLOPs – floating point operations per second.
5.4.1.3. Độ chính xác điểm ảnh
Để đánh giá độ chính xác của mỗi phân lớp (class) nhóm sử dụng công thức (15). TP viết tắt của từ true positive đại diện cho một điểm ảnh được dự đoán đúng thuộc phân loại đã cho. TN – true negative đại diện cho một điểm ảnh được dự đoán đúng nhưng không thuộc phân loại đã cho. Và tương tự với FP (fasle positive), FN (false negative), chúng lần lượt biểu hiện cho một điểm ảnh được dự đoán sai nhưng thuộc phân loại đã cho và không thuộc phân loại đã cho.
=
5.4.1.4. Mà trận tương quan (Confusion matrix) cho nhiều lớp
Về cơ bản, confusion matrix thể hiện có bao nhiêu điểm dữ liệu thực sự thuộc vào một class, và được dự đoán là rơi vào một lớp. Để hiểu rõ hơn, hãy xem bảng dưới đây:
57
Hình 5. 13 Ví dụ cho ma trận tương quan
Có tổng cộng 10 điểm dữ liệu. Chúng ta xét ma trận tạo bởi các giá trị tại vùng 3x3 trung tâm của bảng.
Ma trận thu được gọi là confusion matrix. Nó là một ma trận vuông với kích thước mỗi chiều bằng số lượng lớp dữ liệu. Giá trị tại hàng thứ i, cột thứ j là số lượng điểm lẽ ra thuộc vào class i nhưng lại được dự đoán là thuộc vào class j. Như vậy, nhìn vào hàng thứ nhất (0), ta có thể thấy được rằng trong số bốn điểm thực sự thuộc lớp 0, chỉ có hai điểm được phân loại đúng, hai điểm còn lại bị phân loại nhầm vào lớp 1 và lớp 2.
5.4.1.5. Tỉ lệ báo động nhầm, tỉ lệ bỏ sót (FPR và FNR)
FPR và FNR dựa vào bốn yếu tố: the false positive (FP), the true positive (TP), the false positive (FP) the false negative (FN). TP và FP lần lượt là số lần phát hiện biển báo chích xác và không chính xác của từng loại biển báo. TN và FN lần lượt là số lần phát hiện biển báo không phải là loại cần quan tâm chích xác và không chính xác. Công thức tính FPR và FNR như bên dưới:
FPR = FNR =
58