min Ee [n] Ex [n]
1.4.3.1Phương pháp đánh giá chủ quan (MOS)
Kỹ thuật này đánh giá chất lượng thoại sử dụng đối tượng là một số lượng lớn người nghe, sử dụng phương pháp thống kê để tính điểm chất lượng. Điểm đánh giá bình quân của nhiều người được tính là điểm Mean Opinion Scoring (MOS). Kỹ thuật thực hiện tính điểm MOS được mô tả trong khuyến nghị P.800 của ITU. Khuyến nghị P.830 thể hiện các phương pháp cụ thể để đánh giá chất lượng thoại cho các bộ mã hóa. Cả hai khuyến nghị ITU này mô tả: phương thức đánh giá, cách tính điểm theo phương thức đánh giá chủ quan, giá trị của điểm, tính chất của các mẫu thoại được sử dụng để đánh giá và các điều kiện khác mà việc kiểm tra chất lượng được thực hiện.
Phương thức đánh giá theo MOS có thể được thực hiện theo các bài kiểm tra hội thoại hai chiều hoặc bài nghe một chiều. Các bài kiểm tra nghe một chiều sử dụng các mẫu thoại chuẩn. Người nghe nghe mẫu truyền qua một hệ thống và đánh giá chất lượng tổng thể của mẫu dựa trên
thang điểm cho trước. P.800 định nghĩa một số hình thức đánh giá chất lượng thoại theo phương pháp chủ quan:
Bài kiểm tra hội thoại (Conversation Opinion Test).
Đánh giá phân loại tuyệt đối (Absolute Category Rating (ACR) Test). Phương thức phân loại theo suy hao (Degradation Category Rating (DCR)). Phương thức phân loại so sánh (Comparison Category Rating (CCR)).
Mỗi phương thức trên có một thang điểm đánh giá. Ví dụ: phương thức đánh giá hội thoại và ACR đều có thang điểm tương tự gọi là điểm hội thoại và điểm chất lượng nghe. Trong phương thức hội thoại, người nghe được hỏi về quan điểm của họ đối với kết nối đang sử dụng. ACR hỏi chủ thể về chất lượng thoại. Thang điểm cho cả hai phương thức trên như sau:
Điểm đánh giá Chất lượng thoại
5 Rất tốt
4 Tốt
3 Chấp nhận được
2 Tồi
1 Rất tồi
Đây là thang điểm từ 1-5 thông thường được sử dụng để tính MOS.
Ví dụ thứ hai là điểm nỗ lực nghe trong phương thức ACR (ACR Listening Effort Score). Trong phương thức này, chủ thể được yêu cầu đánh giá nỗ lực của họ thực hiện để hiểu ngữ nghĩa của các câu chuẩn sử dụng làm mẫu. Thang điểm được cho như sau:
Điểm đánh giá Mức độ cố gắng cần thực hiện để hiểu câu
5 Không cần cố gắng
4 Cần chú ý nhưng không cần cố gắng nhiều
3 Cần tương đối tập trung
2 Cần tập trung
1 Không hiểu câu mẫu
Hiển nhiên, các thương thức cho điểm theo MOS có một số nhược điểm như sau:
Phương thức này mang tính chất chủ quan vì kết quả phụ thuộc vào nhiều yếu tố không thể kiểm soát của chủ thể như: trạng thái tâm lý, thái độ đối với bài kiểm tra và trình độ văn hóa. Trên thực tế, phương thức đánh giá chất lượng thoại theo thang điểm MOS không phải là phương thức nhất quán.
Khi cần thực hiện đo thường xuyên các tham số chất lượng thì việc sử dụng phương pháp đánh giá chất lượng này là không thực tế.
Những hạn chế của phương pháp đánh giá chất lượng thoại dựa trên MOS cho thấy cần có một phương thức đánh giá khách quan, phương pháp này có thể thực hiện một cách tự động để đánh giá chất lượng thoại.