CHƯƠNG 2 PHƯƠNG PHÁP NGHIÊN CỨU
2.2.4.1.Phân tích sự phù hợp của dữ liệu với mơ hình Rasch
2.2. Xây dựng bộ công cụ đánh giá
2.2.4.1.Phân tích sự phù hợp của dữ liệu với mơ hình Rasch
Ta sử dụng mơ hình Rasch với phần mềm Quest để phân tích bộ cơng cụ thử nghiệm NL GQVĐ của HS gồm 19 câu hỏi trắc nghiệm khách quan và 17 câu hỏi tự luận. Sau khi thi xong, tiến hành thu nhận bài thi và kết quả bài thi được nhập bằng tay vào máy tính. Dữ liệu này được đưa vào phần mềm Quest. Chương trình Quest xử lý sẽ cho ta các kết quả như mức độ phù hợp của các câu hỏi với mơ hình Rasch, NL của HS so với độ khó của câu hỏi, độ tin cậy của đề thi và các chỉ số đặc trưng cho từng câu hỏi như độ khó, độ phân biệt, hệ số tương quan giữa câu hỏi thi với toàn bài, độ tin cậy, sai số.
Khi dữ liệu phù hợp với mơ hình Rasch thì trị số kỳ vọng của các bình phương trung bình (mean square) xấp xỉ bằng 0 và độ lệch chuẩn SD xấp xỉ bằng 1. Bảng 2.2 minh họa mức độ phù hợp của bộ công cụ thử nghiệm với mô hình Rasch.
Bảng 2.2. Mức độ phù hợp của bộ cơng cụ thử nghiệm với mơ hình Rasch
ánh giải pháp
người khác qua việc liên kết thơng tin có sẵn (Câu hỏi 32) phần tử đại diện, giải pháp cho vấn đề tương tự (Câu hỏi 33) Tổng số câu hỏi 12 3 13 5 3 36
----------------------------------------------------------------------------------------------------- -------------------------------
Summary of item Estimates
========================= Mean .00 SD 1.70 SD (adjusted) 1.69 Reliability of estimate .99 Fit Statistics ===============
Infit Mean Square Outfit Mean Square Mean 1.00 Mean 1.18
SD .12 SD 1.33 Infit t Outfit t Mean .13 Mean -.13 SD 1.81 SD 2.20 0 items with zero scores
0 items with perfect scores
======================================================== Summary of case Estimates
========================= Mean 1.42
SD (adjusted) .85 Reliability of estimate .70 Fit Statistics
===============
Infit Mean Square Outfit Mean Square Mean .97 Mean 1.18
SD .25 SD 5.05 Infit t Outfit t Mean .07 Mean .13 SD .93 SD .70 0 cases with zero scores 0 cases with perfect scores
=============================================
- Từ các số liệu về giá trị trung bình (Mean) và độ lệch chuẩn (SD) có được từ file GQVD5.map khi xử lý dữ liệu bằng phần mềm, kết quả cho thấy dữ liệu dùng để phân tích là phù hợp với mơ hình Rasch.
- Các thơng tin về kết quả tính tốn cho thấy NL trung bình của mẫu HS (Case estimate) tham gia bài kiểm tra là 1.42 lớn hơn nhiều so với độ khó chung của bài kiểm tra. Độ tin cậy của tính tốn rất có tin cậy vì có giá trị bằng 0,99.
- Kết quả cho thấy, khơng có câu hỏi nào mà tất cả HS đều trả lời không đúng và khơng có câu hỏi nào mà có tất cả HS đều trả lời đúng; khơng có HS nào khơng trả lời đúng bất kỳ câu hỏi nào và khơng có HS nào trả lời đúng tất cả mọi câu hỏi.