III. THỂ THỨC NGHIÊN CỨU GIAI ĐOẠN ĐỊNH CHUẨN:
4. Phân loại trắc nghiệm theo độ phân cách:
4.1.Trắc nghiệm tri giác 1:
Bảng 15. Các trị số Rpbis của 40 câu trắc nghiệm tri giác 1
Từ bảng 15 ta thấy:
- Phân bố tần số theo chỉ số phân cách:
+ Có 18 câu đạt độ phân cách rất tốt, chiếm tỷ lệ 45% + Có 6 đạt độ phân cách khá tốt, chiếm tỷ lệ 15%
+ Có 12 câu đạt độ phân cách trung bình, chiếm tỷ lệ 30% + Có 4 đạt độ phân cách kém và cần sửa, chiếm tỷ lệ 10%
Hay nói cách khác có 90% câu có độ phân cách trong toàn bài trắc nghiệm. - Có 4 câu đạt độ phân cách không cao (mặc dù không có câu nào có độ phân cách âm), đó là các câu 13, 14, 15, 20. Ta hãy xem xét nội dung câu trắc nghiệm và bảng phân bố tần số các lựa chọn dưới đây:
Câu 13: Lựa chọn: 0 1 Missing Tần số : 37 161 1 Tỷ lệ %: 18.6 80.9 Pt-biserial: -0.04 0.04 Xác suất: NS NS
Câu 13 thuộc tiểu nghiệm các từ. Nội dung câu trắc nghiệm là phân biệt phát âm của hai từ đã cho giống nhau hay khác nhau.
VƯỢT VƯỢC
Trả lời: (giống nhau) (khác nhau)
Nghiệm thể nào chọn khác nhau được 1 điểm, nghiệm thể nào chọn giống nhau thì không được điểm nào. Nhìn vào bảng phân bố tần số các lựa chọn ta thấy chỉ có 1 nghiệm thể bỏ không làm được câu trắc nghiệm này, còn lại có 37 nghiệm thể (chiếm 18.6%) làm sai và có 161 nghiệm thể (chiếm 80.9%) làm đúng. Các thông số này chưa đủ để chứng tỏ có sự phân cách cao giữa nhóm làm sai và làm đúng câu trắc nghiệm, vì vậy cần chỉnh sửa nội dung của câu này để tăng độ khó của câu lên. Tuy nhiên cũng cần lưu ý rằng nhóm làm sai có độ phân cách âm, còn nhóm làm đúng có độ phân cách dương, điều này chứng tỏ câu trắc nghiệm này cũng có ưu điểm của nó.
Câu 14:
Lựa chọn: 0 1 Missing
Tỷ lệ %: 7.0 92.5 Pt-biserial: -0.16 0.15
Xác suất: <.05 <.05
Câu 14 cũng thuộc tiểu nghiệm các từ. Nội dung của câu 14 là phân biệt phát âm của hai tiếng đã cho giống nhau hay khác nhau.
LÀNG NÀNG
Trả lời: (giống nhau) (khác nhau)
Nghiệm thể nào chọn giống nhau không được điểm, còn nghiệm thể nào chọn khác nhau được 1 điểm. Trong bảng phân bố tần số các lựa chọn ta thấy ngoài 1 nghiệm thể bỏ không làm câu này có 14 em làm sai (chiếm 7%) và 184 em làm đúng (chiếm 92.5%). Độ phân cách giữa nhóm làm đúng và nhóm làm sai không cao (.15) và nhóm làm sai có độ phân cách âm (-.16) và có ý nghĩa ở mức xác suất <.05, vì vậy câu này tạm chấp nhận được. Nhưng cần lưu ý chỉnh sửa lại nội dung để tăng độ khó của câu lên.
Câu 15:
TRƯỜN TRƯỜNG
Trả lời: (giống nhau) (khác nhau)
Cũng giống như phân tích của các câu trên. Ta cũng cần chú ý là nghiệm thể muốn làm đứng câu trắc nghiệm này cần phải phân biệt được phát âm của hai tiếng cuối (N và NG). Do số lương nghiệm thể bỏ qua không làm câu này ít (1 em) và số lượng nghiệm thể làm sai câu này không nhiều (25 em, chiếm 12.6%) nên độ phân cách giữa em làm được và em không làm được kém.
4.2. Trắc nghiệm tri giác 2:
Từ bảng 16 ta thấy:
- Phân bố tần số theo chỉ số phân cách:
+ Có 17 câu đạt độ phân cách rất tốt, chiếm tỷ lệ 42.5% + Có 7 câu đạt độ phân cách khá tốt, chiếm tỷ lệ 17.5% 4 + Có 14 câu đạt độ phân cách trung bình, chiếm tỷ lệ 35% + Có 2 câu đạt độ phân cách kém, chiếm tỷ lệ 5%
Hay nói cách khác có 95% câu có độ phân cách trong toàn bài trắc nghiệm. - Có 2 câu đạt độ phân cách không cao (.15)(mặc dù không có câu nào có độ phân cách âm), đó là các câu 14 và 31. Ta hãy xem xét nội dung câu trắc nghiệm và bảng phân bố tần số các lựa chọn dưới đây:
Câu 14: Lựa chọn: 0 1 Missing 57 Tần số : 65 230 Tỷ lệ %: 21.8 77.2 Pt-biserial: -0.11 0.15
Xác suất: NS <.01
Câu 14 là câu thuộc trắc nghiệm các từ. Nội dung của câu này là nghiệm thể cần phải phân biệt 2 từ đã cho:
CHẾCH CHẾT
Trả lời: (GIỐNG NHAU) (KHÁC NHAU)
Nếu trả lời khác nhau thì được 1 điểm, nếu trả lời giống nhau thì không được điểm nào. Nhìn vào bảng phân bố tần số ở trên ta thấy nhóm làm đúng có độ phân cách dương là .15 và ở mức xác suất <,01, nhóm làm sai có độ phân cách âm là -.11. Điều này có nghĩa là câu trắc nghiệm này tuy có độ phân cách tương đối tháp nhưng vẫn có thể chấp nhận được. Nếu muôn điều chỉnh, ta có thể thay đổi nội dung lựa chọn để tăng độ khó lên. Câu 31: Lựa chọn: 0 1 2 Missing Tần số : 74 0 214 1 Tỷ lệ %: 21.8 0.0 71.8 Pt-biserial: -0.11 NA 0.15 Xác suất: NS NA <.05
Câu 31 thuộc tiểu nghiệm tìm ký tự. Tương tự như câu 14, độ phân cách của nhóm làm đúng là .15 và của nhóm làm sai là -.11. Tuy nhiên độ phân cách của nhóm làm đúng có mức xác suất là <.05 nên ta cần xem kỹ lại nội dung câu trắc nghiệm xem có gì không ổn. Câu trắc nghiệm này có 6 ký tự và Ì ký tự bên trái để nghiệm thể lựa chọn xem ký tự nào trong 6 ký tự đã cho giống với nó.
Đáp án của câu trắc nghiệm này là 2, nhưng có thể nhiều nghiệm thể sẽ bị nhầm với đáp án 6 nếu không nhìn kỹ các ký hiệu. Vì vậy dẫn đến kết quả là số nghiệm thể bỏ không làm câu này chỉ có 1, nhưng số nghiệm thể làm sai câu này lại nhiều (74 em,
chiếm tỷ lệ 24.8%). Chính vì thế đã tạo nên tình trạng là mức độ phân cách giữa nhóm làm sai và làm đúng không cao.