Dựa vào kết quả th đƣợc, chúng tôi nhận thấy đề khảo sát chủ yếu đánh giá năng lực thí sinh ở mức thấp, khơng thể phân biệt nhóm thí sinh ở năng lực trung bình và cao. Tƣơng tự nhƣ vậy với ba mã đề cịn lại, kết quả đƣợc mơ tả ở phụ lục 6. Sau khi phân tích, chúng tơi thu đƣợc kết quả các mã đề đều mới chỉ đánh giá đƣợc năng lực của nhóm thí sinh ở mức thấp, các câu hỏi hầu hết có độ khó ở mức trung bình, thấp, độ phân biệt chƣa cao.
2.4.2. Kết quả thực nghiệm lần 2
Sau khi chạy thử nghiệm lần 1, chúng tơi tiến hành chuẩn hóa đề thi bằng cách loại bỏ những câu hỏi chƣa đƣợc và chỉnh sửa những câu hỏi chƣa tốt. Với 240 câu hỏi của 4 mã đề lần 1, sau q trình loại bỏ và chỉnh sửa chúng tơi thu đƣợc khoảng 200 câu hỏi để đƣa vào đề kiểm tra lần 2. Ở lần thử nghiệm này chúng tôi tiến hành thử nghiệm với 2 mã đề 101 và 102.
Dữ liệu thử nghiệm đề văn 101 lần 2 gồm 157 học sinh tham gia, khơng có dự liệu missing. Kết quả cho thấy có 9 câu (những câu tam giác đỏ) cần đƣợc điều chỉnh hoặc loại bỏ. Xem xét chi tiết từng câu, nhận thấy tất cả các câu hỏi đều không thoả mãn độ phân biệt theo lý thuyết cổ điển (Discr>0.2). Về độ khó, hầu hết các câu hỏi này cũng thuộc nhóm quá dễ (C1, C5, C8, C9, C11, C13, C16, b <
-3). Biểu diễn phân tích nhân tố của các câu hỏi này cũng không đáp ứng yêu cầu, có sự chênh lệch lớn giữa đƣờng lý thuyết và thực nghiệm (xem trƣờng hợp với câu hỏi 1).
Hình 2.8 . Kết quả phân tích sự phù hợp với lý thuyết IRT (items fit) và các tham số (tóm lược)
Để có nhận định chung về đề thi, chúng tối tiến hành phân tích phổ điểm theo thang năng lực và hàm thông tin của đề thi. Kết quả cho thầy năng lực trung
bình của thí sinh là 0,07 gần với mức năng lực trung bình lý thuyết, phân bố năng lực của thí sinh có dáng điệu chuẩn và số câu hỏi đáp ứng mơ hình là 55/60 câu. Hàm thơng tin có đỉnh đạt xấp xỉ 13, độ tin cậy bằng 0.81 đáp ứng yêu cầu.
Giá trị Trung bình 0.07 Trung vị 0.01 Độ lệch chuẩn 0.08 Phƣơng sai 0.17
Hình 2.9 Phân bố điểm năng lực và hàm thông tin của đề thi theo lý thuyết IRT
1. Phân bố điểm