1.5.1.1. Mục đích phân tích câu hỏi:
Việc phân tích câu hỏi có 3 mục đích:
- Kết quả bài thi có thể giúp ta đánh giá mức độ thành công của công việc. - Việc giảng dạy và học tập có thể thay đổi phương pháp, lề lối làm việc. - Việc phân tích câu hỏi để xem SV trả lời mỗi câu như thế nào, từ đó sửa đổi các câu hỏi để bài TN có thể đo lường thành quả một cách hữu hiệu hơn.[8]
1.5.1.2. Phương pháp phân tích câu hỏi
Trong phương pháp phân tích câu hỏi của một bài TNKQ về thành quả học tập, chúng ta thường so sánh câu trả lời của SV ở một câu hỏi với điểm chung của toàn bài. Chúng ta mong có nhiều SV ở nhóm điểm cao và ít SV ở
nhóm điểm thấp trả lời đúng câu hỏi. Nếu kết quả không như vậy, có thể câu hỏi viết chưa được chuẩn hoặc vấn đề chưa được dạy đúng mức.
Để xét mối tương quan giữa cách trả lời mỗi câu hỏi với điểm tổng quát chúng ta có thể lấy 25 ÷33% SV nhóm điểm cao nhất và 25 ÷ 33% sinh viên nhóm điểm thấp nhất để lập thành hai nhóm giỏi (H) và nhóm kém (L) số còn lại 34 ÷ 50% lập thành nhóm trung bình (M). Trong phương pháp phân tích câu hỏi ta cần đếm số câu trả lời cho mỗi câu trong bài. Trong các câu trả lời cho sẵn ở mỗi câu, ta cần biết có bao nhiêu SV chọn mỗi câu sai và bao nhiêu SV không trả lời. Khi đếm sự phân bố các câu trả lời như thế ở nhóm điểm cao, điểm thấp và điểm trung bình chúng ta có thể suy ra:
- Mức độ khó của câu hỏi.
- Mức độ phân biệt nhóm giỏi và nhóm kém của mỗi câu hỏi. - Mức độ lôi cuốn của các câu trả lời cho sẵn ở mỗi câu hỏi. Lập bảng sau: Câu hỏi số (1) Các phương án trả lời (2) Số SV của nhóm giỏi chọn (3) Số SV của nhóm TB chọn (4) Số SV của nhóm yếu chọn (5) Tổng số SV chọn (6) Số SV giỏi trừ đi số SV nhóm yếu chọn (7) 1 A B C D Bỏ trống Tổng cộng
Ta cần xét xem các câu mồi (sai) có hiệu nghiệm không? Nếu cột cuối cùng có giá trị âm tuyệt đối càng lớn thì câu mồi càng hay. Nếu cột cuối cùng bằng 0 cần xem lại câu trả lời mồi đó, vì nó không phân biệt được nhóm giỏi và kém. Câu trả lời đúng bao giờ cũng có giá trị dương cao. Khi phân tích ta cần
tìm hiểu xem có khuyết điểm nào trong chính câu hỏi hoặc trong phương pháp giảng dạy không.
1.5.1.3. Độ khó của mỗi câu hỏi (kí hiệu là DV)
Độ khó của một câu hỏi là tổng số SV trả lời đúng câu ấy trên tổng số SV dự thi.
DV = Số sinh viên trả lời đúng câu i Tổng số sinh viên dự thi
Độ khó của câu hỏi bao hàm nhiều ý nghĩa quan trọng. Thứ nhất, nó cho thấy rằng, thay vì độ khó theo đặc tính nội tại đó của câu, người ta có thể định nghĩa nó căn cứ vào tần số tương đối của người làm đã trả lời câu hỏi ấy. Thứ hai, tính chất khó dễ là một đặc tính của cả câu hỏi lẫn của người làm.
0 ≤ DV ≤ 1. Nếu DV = 0 thì câu hỏi khó quá, DV = 1 thì câu hỏi quá dễ. Những câu hỏi loại này không có giá trị đánh giá cần xem lại. Thông thường , nếu 0,4 ≤ DV ≤ 0,6 thì : Câu hỏi được coi là đạt yêu cầu về độ khó.
1.5.1.4. Độ khó vừa phải của một câu hỏi.
Độ khó vừa phải của câu hỏi = 100 +(số câu trắc nghiệm/số lựa chọn) (%) 2
Độ khó vừa phải là trung bình cộng của 100% và độ may rủi .
VD: Một câu trắc nghiệm có 4 phương án lựa chọn ở trong bài thi với số câu là 40 thì độ may rủi là: 40/4 = 10(%)
Thì độ khó vừa phải là: 55% 2
10100+ = 100+ = =
Một bài thi có giá trị và đáng tin cậy thường là những bài gồm các câu hỏi có độ khó xấp xỉ bằng độ khó vừa phải.
1.5.1.5. Độ phân biệt của một câu hỏi (kí hiệu là DI).
Độ phân biệt của câu hỏi có thể có cách tính như sau:
* Cách tiến hành:
- Sắp xếp các bài kiểm tra theo tổng điểm từng bài từ cao đến thấp - Chia tập bài thành 3 hạng:
+ 27% số bài có điểm cao nhất (nhóm H). + 27% số bài có điểm thấp nhất (nhóm L). + 46% số bài có điểm trung bình (nhóm M).
- Tính độ phân biệt của một câu hỏi theo công thức:
%) ) ( H L max L H n n n n DI − − = . -1≤ DI ≤ 1.
Với nH: Số SV trong nhóm H trả lời đúng nL: Số SV trong nhóm L trả lời đúng
(nH - nL)max =nH : ứng với khi toàn bộ SV nhóm H trả lời đúng và không có SV nào của nhóm L trả lời đúng.
Thang đánh giá độ phân biệt theo Dương Triệu Tống:
Chỉ số DI (độ phân biệt) Đánh giá câu
Từ 0,40 trở lên Rất tốt
Từ 0,30 đến 0,39 Khá tốt nhưng có thể làm tốt hơn nữa Từ 0,20 đến 0,29 Tạm được, cần hoàn chỉnh
Dưới 0,19 Kém, cần loại bỏ hay sữa lại
1.5.1.6.Tiêu chuẩn để chọn câu hỏi hay
Để có các câu hỏi phù hợp, chúng ta phân tích các câu hỏi có các tính chất sau:
- Độ khó khoảng 40% đến 60%.
- Độ phân biệt dương khá cao, thường chọn DI > 0,3.
- Các câu trả lời mồi có tính hiệu nghiệm (nhất là lôi cuốn được SV nhóm kém).
Chú ý rằng:
- Sự phân tích câu hỏi chỉ có ý nghĩa khi mỗi SV có đủ thời gian để thử làm mọi câu hỏi.
- Sự phân tích câu hỏi giúp chúng ta biết khuyết điểm của câu hỏi, tình hình học tập của SV trong công việc giảng dạy.[8]