1.1 .Tổng quan vấn đề nghiên cứu
1.1.1 .Các nghiên cứu về biến độc lập – Yếu tố ảnh hưởng đến học tập
2.4. Thang đo và đánh giá thang đo
2.4.1. Điều tra thử nghiệm
Phiếu khảo sát sau khi hoàn thành được tiến hành khảo sát thử để đánh giá chất lượng bộ công cụ và trên cơ sở đó điều chỉnh bộ công cụ (nếu cần thiết).
2.4.1.1. Mẫu điều tra thử nghiệm
Thử nghiê ̣m phiếu khảo sát trên mẫu 30 SV các khóa 46 (sinh viên năm thứ 1), khoá 45 (sinh viên năm thứ 2) và khoá khoá 44 (sinh viên năm thứ 3). Phương pháp chọn mẫu là chọn mẫu ngẫu nhiên không theo tỷ lệ (mỗi khóa lấy ngẫu nhiên 10 SV).
2.4.1.2. Quy trình khảo sát
Tác giả đến các lớp được chọn điều tra để hướng dẫn về mục đích, ý nghĩa của việc khảo sát này và giải thích ý nghĩa của từng câu hỏi, từng nhân tố trong phiếu hỏi cho SV. Cho sinh viên trả lời các phiếu khảo sát trong 20 phút sau đó thu lại. Cụ thể, tổng số phiếu khảo sát phát ra là 35 phiếu, tổng số phiếu thu về là 35 phiếu.
2.4.1.3. Phân tích số liệu điều tra thử nghiệm
Các phiếu được khảo sát thử nghiệm được sử dụng để đánh giá chất lượng của bộ công cụ đo lường. Việc đánh giá này được thực hiện qua 3 bước:
Bước 1: Xử lý thô các phiếu khảo sát thu thập được, số phiếu sau khi xử lý đạt yêu cầu là 32 phiếu.
Bước 2: Mã hóa các thông tin và nhập số liệu vào phần mềm SPSS; Bước 3: Phân tích số liệu
Bước 3 được thực hiện với việc sử dụng 2 phần mềm chuyên dụng trong phân tích xử lý số liệu khảo sát là SPSS và QUEST. Trong đó, sử dụng phần mềm SPSS để xác định độ tin cậy của phiếu khảo sát và sự tương quan giữa các câu hỏi. Sử dụng phần mềm QUEST để khẳng định lại độ tin cậy của phiếu khảo sát và sự phù hợp giữa các câu hỏi trong cấu trúc của phiếu hỏi.
2.4.1.4. Kết quả phân tích số liệu thử nghiệm
Sử dụng Cronbach Alpha để kiểm tra độ tin cậy của các mục hỏi trong bảng hỏi để tìm ra các hệ số sau:
- Hệ số Cronbach Alpha: thang đo được chấp nhận khi hệ số Cronbach Alpha đạt từ 0,6 trở lên (Nunnally, 1978; Peterson, 1994; Slater, 1995).
- Các biến quan sát có hệ số tương quan biến tổng (Corrected Item- Total Correlation) nhỏ hơn 0,3 sẽ bị loại (Nunnaly 1994).
- Các biến quan sát có hệ số Alpha nếu bỏ đi mục hỏi (Alpha if Item Deleted) lớn hơn hệ số Cronbach’s Alpha sẽ bị loại (Hoàng Trọng 2008)
* Phân tích bằng phần mềm SPSS (Xem thêm tại phụ lục số 2)
Độ tin cậy
Bảng 2.2. Độ tin cậy và tƣơng quan của từng biến với nhân tố của tổng biến quan sát
Cronbach's Alpha Tổng số biến quan sát
0,913 36
Lớn nhất Nhỏ nhất Tương quan của từng câu hỏi với nhân tố (biến tổng) 0,824 0,576 Cronbach’s Alpha nếu loại đi một câu hỏi 0,893 0,816
Kết quả phân tích cho thấy phiếu khảo sát có độ tin cậy Cronbach’s Alpha = 0,913. Hệ số Cronbach’s Alpha nếu loại bất kỳ một biến nào đó dao động trong khoảng 0,908 đến 0,913, hệ số tương quan của từng câu hỏi với
phiếu khảo sát (biến tổng) dao động trong khoảng từ 0,331 đến 0,906. Điều này cho thấy phiếu khảo sát có độ tin cậy cao, các câu hỏi trong phiếu khảo sát có sự tương quan với nhau và tương quan với phiếu khảo sát.
* Phân tích bằng phần mềm Quest (Xem chi tiết tại phụ lục số 3)
Trong Tập bài giảng Môn hình Rasch và Phân tích dữ liệu bằng phần mềm Quest năm 2011 (tr. 43 và 44) của Tiến sĩ Phạm Xuân Thanh chỉ rõ để dữ liệu phù hợp với mô hình Rasch thì khi phân tích dữ liệu bằng phần mềm QUEST giá trị mean trong Summary of item Estimates phải bằng hoặc gần bằng 0,0; giá trị SD phải bằng hoặc gần bằng 1,00. Giá trị mean trong Fit Statistics phải bằng hoặc gần bằng 1 và SD phải bằng hoặc xấp xỉ bằng 0 [19].
Tác giả sử dụng phần mềm Quest để phân tích chất lượng bộ công cụ khảo sát nhằm khẳng định lại độ tin cậy của phiếu khảo sát.
Phieu khao sat ---
Item Estimates (Thresholds)
all on phieukhaosat (N = 35 L = 36 Probability Level= .50) ---
Summary of item Estimates ========================= Mean .00 SD .97 SD (adjusted) .90 Reliability of estimate .88 Fit Statistics ===============
Infit Mean Square Outfit Mean Square Mean .98 Mean .96 SD .18 SD .20 ============================================================================== TEST --- Case Estimates
all on test (N =35 L = 36 Probability Level= .50) ---
--- Summary of case Estimates
========================= Mean 1.13 SD .96 SD (adjusted) .83 Reliability of estimate .79 Fit Statistics ===============
Infit Mean Square Outfit Mean Square Mean .99 Mean .96 SD .24 SD .17
================================================================================
Kết quả phân tích cho thấy
Giá trị Mean (Summary of item Estimates) = 0,00 Giá trị SD (Summary of item Estimates) = 0,97
Giá trị Mean trong Infit Mean Square và Outfit Mean Square lần lượt là 1,04; 1,05; 1,03; 1,04
Giá trị SD trong Infit Mean Square và Outfit Mean Square lần lượt là 0,18; 0,20; 0,24; 0,17
Khi dữ liệu phù hợp với mô hình Rasch thì trị số kỳ vọng của các bình phương trung bình (mean square) xấp xỉ bằng 1 và trị số kỳ vọng t xấp xỉ bằng 0. Từ các số liệu về giá trị trung bình Mean và độ lệch chuẩn SD có được từ file Test.map khi xử lý dữ liệu bằng phần mềm Quest, ta thấy dữ liệu dùng để phân tích là phù hợp với mô hình Rasch.
Độ tin cậy của phiếu khảo sát (Reliability of estimate) là 0,88 chứng tỏ phiếu khảo sát có độ tin cậy tương đối cao. Điều này thể hiện các câu hỏi đều phù hợp, tức là điểm các câu hỏi có tính đồng nhất và đều đóng góp độ tin cậy của toàn phép đo.
Bên cạnh sự phù hợp của dữ liệu với mô hình, kết quả phân tích bằng phần mềm Quest còn cho thấy sự phù hợp của từng câu hỏi với mô hình Rasch và giữa các câu hỏi với nhau thông qua biểu đồ Items Fit. Trong biểu đồ Items Fit, mỗi câu hỏi biểu thị bằng dấu *. Những câu hỏi nằm trong hai
đường chấm thẳng đứng có giá trị trung bình bình phương độ phù hợp Infit MNSQ nằm trong khoảng (0,77; 1,30) sẽ phù hợp với mô hình Rasch. Nếu câu hỏi nào không phù hợp thì loại bỏ.
Phieu khao sat ---
Item Fit
all on phieukhaosat (N = 35 L = 36 Probability Level= .50) --- INFIT MNSQ .71 .77 .83 .91 1.00 1.10 1.20 1.30 ---+---+---+---+---+---+---+--- 1 item 1 . * | . 2 item 2 . | * . 3 item 3 . | * . 4 item 4 . * | . 5 item 5 . * | . 6 item 6 . * | . 7 item 7 . |* . 8 item 8 . | * . 9 item 9 . | * . 10 item 10 . * | . 11 item 11 . *| . 12 item 12 . | * . 13 item 13 . | * . 14 item 14 . | * . 15 item 15 . * | . 16 item 16 . *| . 17 item 17 . | * . 18 item 18 . | . 19 item 19 . | * . 20 item 20 . * | . 20 item 20 . * | . 21 item 21 . | * . 22 item 22 . * | . 23 item 23 . | * . 24 item 24 . |* . 25 item 25 . * | . 26 item 26 . | * . 27 item 27 . * | . 28 item 28 . * | . 29 item 29 . * | . 30 item 30 . * | . 31 item 31 . * | . 32 item 32 . | * . 33 item 33 . | * . 34 item 34 . * | . 35 item 35 . | * . 36 item 36 . * | . ================================================================================
Kết quả hiển thị trong biểu đồ Items Fit cho thấy tất cả 36 câu hỏi trong phiếu khảo sát được phân tích đều có giá trị Infit MNSQ nằm trong khoảng cho phép (từ 0,77 – 1,30), hơn nữa giá trị Infit MNSQ của tất cả các câu hỏi thì đều tập trung rất gần giá trị 1.0, chứng tỏ các câu hỏi có tính phù hợp cao với mô hình phân tích.
Sau khi phân tích chất lượng bộ phiếu hỏi bằng phần mềm SPSS và phần mềm Quest có thể kết luận như sau:
Phiếu khảo sát có độ tin cậy đạt yêu cầu các thông tin thu được khi sử dụng bộ công cụ này là đáng tin cậy với 36 biến được sử dụng để tiến hành khảo sát chính thức.