Kết quả kiểm tra theo mô hình Rasch bằng cách sử dụng phần mềm Quest

Một phần của tài liệu Nghiên cứu bộ tiêu chí đánh giá chất lượng cán bộ hỗ trợ đào tạo và nghiên cứu thử nghiệm tại trường Đại học sư phạm kỹ thuật thành phố Hồ Chí Minh (Trang 69)

7. Cấu trúc của Luận văn

2.4.5. Kết quả kiểm tra theo mô hình Rasch bằng cách sử dụng phần mềm Quest

Quest cho toàn bộ phiếu hỏi sau khi đã hiệu chỉnh

Sau khi kiểm định bảng hỏi bằng độ tin cậy Cronbach Alpha và phân tích nhân tố EFA có 16 câu hỏi bị loại, 27 câu hỏi còn lại được đưa vào đánh giá bằng mô hình Rasch thông qua việc sử dụng phần mềm chuyên dụng QUEST.

Kết quả ước tính phù hợp thống kê

Khao sat su can thiet

--- Item Estimates (Thresholds) 23/ 8/14 13:32

Trang 66

all on mynhan (N = 99 L = 27 Probability Level= ,50) --- Summary of item Estimates

========================= Mean ,04 SD ,75 SD (adjusted) ,38 Reliability of estimate ,26 Fit Statistics ===============

Infit Mean Square Outfit Mean Square Mean 1,04 Mean 1,17 SD ,37 SD ,62 Infit t Outfit t Mean ,02 Mean ,38 SD 1,71 SD 1,77 0 items with zero scores 0 items with perfect scores

Kết quả ước tính trường hợp

Khao sat su can thiet

--- Case Estimates 23/ 8/14 13:32

all on mynhan (N = 99 L = 27 Probability Level= ,50) --- Summary of case Estimates

========================= Mean 1,24 SD 1,02 SD (adjusted) ,95 Reliability of estimate ,87 Fit Statistics ===============

Infit Mean Square Outfit Mean Square Mean 1,25 Mean 1,12 SD ,95 SD ,90 Infit t Outfit t Mean ,46 Mean ,14 SD 1,86 SD 1,53 0 cases with zero scores 0 cases with perfect scores

Theo kết quả được cung cấp ở trên về các điều kiện cần kiểm tra trước khi phân tích ta thấy:

- Ước tính phù hợp thống kê (Summary of item Estimates): giá trị Mean = 0,04 bằng với giá trị Mean điều kiện (bằng hoặc gần 0,00) và SD = 0,75 nhỏ hơn giá trị SD điều kiện (bằng hoặc gần 1,00). Giá trị Mean của Infit Mean Square và Outfit Mean Square lần lượt 1,04 và 1,17 gần với giá trị Mean điều kiện (bằng hoặc gần 1,00); giá trị SD của Infit Mean Square và Outfit Mean Square lần lượt là 0,37 và

Trang 67

0,62 gần bằng với SD điều kiện (bằng hoặc gần 0,00). Do đó, ta có thể kết luận: dữ

liệu phù hợp với mô hình Rasch.

- Ước tính trường hợp (Summary of case Estimates): Giá trị Mean của Infit Mean Square và Outfit Mean Square lần lượt là 1,25 và 1,12 gần bằng với giá trị Mean điều kiện (bằng hoặc gần 1,00); giá trị SD của Infit Mean Square là 0,95 và 0,9 lớn

hơn SD điều kiện (bằng hoặc gần 0,00). Do đó, ta có thể kết luận: dữ liệu phù hợp

với mô hình Rasch.

Như vậy, có thể khẳng định rằng toàn bộ câu hỏi có Mean và SD đáp ứng đủ điều kiện cần thiết cho việc thiết lập mô hình đáp ứng với lý thuyết mô hình Rasch. Do đó, dữ liệu hoàn toàn phù hợp với mô hình Rasch.

Kiểm tra mức độ phù hợp của các câu hỏi do mô hình cung cấp, ta có:

Khao sat su can thiet

---Item Fit 23/ 8/14 13:32

all on mynhan (N = 99 L = 27 Probability Level= ,50) --- --- INFIT MNSQ ,36 ,40 ,45 ,53 ,63 ,77 1,00 1,30 1,60 1,90 2,20 2,50 2,80 ---+---+---+---+---+---+---+---+---+---+---+---+- ---+- 1 item 1 . | . * 2 item 2 . | . * 3 item 3 . *| . 4 item 4 . * | . 5 item 5 . *| . 6 item 6 . | * . 7 item 7 . * | . 8 item 8 . * | . 9 item 9 . | * . 10 item 10 . * . 11 item 11 . | * . 12 item 12 . * | . 13 item 13 . * | . 14 item 14 . * | . 15 item 15 . * | . 16 item 16 . |* . 17 item 17 * | . 18 item 18 . * | . 19 item 19 . * | . 20 item 20 . * . 21 item 21 . | * . 22 item 22 . * | . 23 item 23 .* | . 24 item 24 . * | . 25 item 25 . * | . 26 item 26 . | * . 27 item 27 . * | . ==========================================================================================================================

Trang 68

Từ kết quả phân tích trên cho thấy, có 25/27 câu hỏi có giá trị Infit MNSQ nằm trong khoảng [0,77; 1,30], có nghĩa là chúng tạo thành một cấu trúc. Trong đó, có câu 1 và câu 2 nằm ngoài khoảng cho phép nên biến ngoại lai này bị loại. Ta tiến hành loại bỏ 2 câu này và chạy lại chạy lại Quest. Kết quả chạy Quest sau khi loại bỏ câu 1 và câu 2 như sau:

Trang 69

Khao sat su can thiet ---

Item Fit 23/ 8/14 13:35 all on mynhan2 (N = 99 L = 25 Probability Level= ,50)

---INFIT MNSQ ,63 ,67 ,71 ,77 ,83 ,91 1,00 1,10 1,20 1,30 1,40 1,50 1,60 ---+---+---+---+---+---+---+---+---+---+---+---+- ---+- 3 item 3 . | * . 4 item 4 . * | . 5 item 5 . * . 6 item 6 . | *. 7 item 7 . * | . 8 item 8 . * | . 9 item 9 . | * . 10 item 10 . | * . 11 item 11 . | * . 12 item 12 . |* . 13 item 13 . * | . 14 item 14 . * | . 15 item 15 . * | . 16 item 16 . | * . 17 item 17 . * | . 18 item 18 . * | . 19 item 19 . * | . 20 item 20 . | * . 21 item 21 . | * . 22 item 22 . * | . 23 item 23 . * | . 24 item 24 . * | . 25 item 25 . * | . 26 item 26 . | * . 27 item 27 . * | . ========================================================================================================

Kết quả chạy Quest lần 2 sau khi loại bỏ 2 câu 1 và 2, ta thấy các câu còn lại đều có giá trị Infit MNSQ nằm trong khoảng cho phép.

Qua kết quả phân tích độ tin cậy, phân tích nhân tố và kiểm tra mức độ phù hợp của các tiêu chí thì Bộ tiêu chí còn lại 25/43 tiêu chí. Đây là những câu hỏi có độ tin cậy khá cao và được đưa vào nghiên cứu thử nghiệm.

Trang 70

Chương 3: THỬ NGHIỆM BỘ TIÊU CHÍ ĐÁNH GIÁ CHẤT LƯỢNG

Một phần của tài liệu Nghiên cứu bộ tiêu chí đánh giá chất lượng cán bộ hỗ trợ đào tạo và nghiên cứu thử nghiệm tại trường Đại học sư phạm kỹ thuật thành phố Hồ Chí Minh (Trang 69)

Tải bản đầy đủ (PDF)

(101 trang)