CHƯƠNG 3 : KẾT QUẢ NGHIÊN CỨU
3.3. Đánh giá độ phân biệt của từng item
Phân tích độ phân biệt là chỉ ra mức độ khác biệt trong cách trả lời item ở những mẫu người khác nhau. Khơng giống như phân tích độ khó, phân tích độ phân biệt thích hợp cho hầu hết các kiểu trắc nghiệm.
Đối với những trắc nghiệm đánh giá năng lực (còn gọi là trắc nghiệm đánh giá kết quả bộc lộ tối đa - maximal peformance tests), sự phân tích độ phân biệt của item nhằm xác định từng item có năng lực phân biệt giữa những
người làm tốt trắc nghiệm và những người làm không tốt. Một item có độ phân biệt tốt là khi trả lời item đó, hầu hết những người có điểm trắc nghiệm cao trả lời đúng, đồng thời những người có điểm trắc nghiệm thấp trả lời sai.
Có nhiều kỹ thuật đánh giá độ phân biệt của item, tuy nhiên có thể xem có hai cách thường được sử dụng nhất:
- Đánh giá chỉ số phân biệt của item (item disrimination index);
- Đánh giá tương quan điểm item với điểm trắc nghiệm (item – total correlation).
Độ phân biệt được xác định từ kết quả so sánh điểm trắc nghiệm của hai nhóm người có điểm số cao và thấp rút ra từ hai mẫu riêng rẽ hoặc từ một mẫu. Nếu lấy từ một mẫu hãy chọn (khoảng 1/3 hay 1/4 ) số người làm trắc nghiệm có điểm cao nhất và số người làm trắc nghiệm có điểm thấp nhất. Sau khi xác định được hai nhóm có điểm cao và điểm thấp, hãy tính tỷ lệ % số người trả lời đúng trên từng item cho mỗi nhóm. Chỉ số phân biệt của item được tính theo cơng thức sau:
Số người trả lời đúng Số người trả lời đúng ở nhóm điểm cao ở nhóm điểm thấp D = ---------------------------- - --------------------------- Tổng số người trả lời Tổng số người trả lời ở nhóm điểm cao ở nhóm điểm thấp
D: Độ phân biệt của item
Với các trắc nghiệm đánh giá năng lực, ta có thể giải thích sự thay đổi các giá trị của D như sau: Nếu item có câu trả lời khó cho những người ở nhóm điểm thấp mà dễ cho những người ở nhóm điểm cao, thì khi đó chỉ số D là tiếp cận 1,0 (item có độ phân biệt lý tưởng). Nếu item có câu trả lời khó ngang bằng cho cả hai nhóm thì chỉ số D tiếp cận 0,0 (item khơng có độ phân biệt hay độ phân biệt kém). Nếu item có câu trả lời dễ cho những người ở nhóm điểm thấp mà lại khó cho nhóm người điểm cao thì chỉ số phân biệt D
tiếp cận – 1,0, khi đó item vẫn có độ phân biệt lý tưởng nhưng khơng giống như mong đợi.
Phương pháp đánh giá độ phân biệt bằng cách đánh giá tương quan giữa item và toàn bộ trắc nghiệm Nếu trắc nghiệm và item cùng đo một đặc tính hay một cấu trúc thì điểm trả lời trên item sẽ tương quan với tổng số điểm của trắc nghiệm. Cũng vậy, nếu các item cùng đo một đặc tính hay một cấu trúc thì chúng sẽ tương quan với nhau. Cơng thức tính tương quan điểm item và điểm của trắc nghiệm như sau:
X: Điểm của item được phân tích Y: Điểm tổng của các item cịn lại
: Điểm trung bình của các item được phân tích : Điểm trung bình của trắc nghiệm
: Độ lệch chuẩn của điểm trên item được phân tích : Độ lệch chuẩn của điểm trắc nghiệm
Giá trị của hệ số tương quan càng tiệm cận 1,0 càng chứng tỏ item và trắc nghiệm có tính đồng nhất cao, tức là cùng đo một đặc tính. Với các trắc nghiệm đánh giá năng lực, giá trị tương quan càng gần 1,0 sẽ cho biết càng có nhiều người có điểm trắc nghiệm cao trả lời đúng item đó. Ngược lại giá trị tương quan càng gần -1,0 sẽ cho biết càng có nhiều người có điểm trắc nghiệm thấp trả lời đúng item đó.
Kết quả đánh giá độ phân biệt của từng item được thể hiện cụ thể qua bảng 3.6:
Bảng 3.6: Đánh giá độ phân biệt của item Các item Chỉ số phân biệt (Disc) Các item Chỉ số phân biệt (Disc) Item 1 0.00 Item 21 0.40 Item 2 0.20 Item 22 0.32 Item 3 0.13 Item 23 0.36 Item 4 0.19 Item 24 0.26 Item 5 0.30 Item 25 0.38 Item 6 0.27 Item 26 0.35 Item 7 0.30 Item 27 0.35 Item 8 0.37 Item 28 0.30 Item 9 0.36 Item 29 0.48 Item 10 0.37 Item 30 0.41 Item 11 0.32 Item 31 0.46 Item 12 0.22 Item 32 0.57 Item 13 0.30 Item 33 0.40 Item 14 0.36 Item 34 0.57 Item 15 0.29 Item 35 0.46 Item 16 0.31 Item 36 0.38 Item 17 0.19 Item 37 0.31 Item 18 0.28 Item 38 0.45 Item 19 0.29 Item 39 0.36 Item 20 0.44 Item 40 0.18
Nhìn vào bảng 3.6 ta thấy đa số các item có độ phân biệt nằm trong khoảng từ 0,2 đến 0,4 đáp ứng các tiêu chuẩn đo lường. Ngoại trừ item 1, chỉ số phân biệt Disc <0,00, item này cần phải được chỉnh sửa.