10. Cấu trúc của luận văn
2.2.4.1. Điều tra thử nghiệm
Phiếu khảo sát sau khi hoàn thành sẽ được tiến hành khảo sát thử để đánh giá
chất lượng bộcông cụ và trên cơ sở đó điều chỉnh bộcông cụ(nếu cần thiết).
- Mẫuđiều tra thửnghiệm:
Phiếu khảo sát được thử nghiệm trên mẫu 75 SV các khóa tuyển sinh 2012, 2011 và 2010 các ngành đại học sư phạm hệ chính quy đang học tại Trường.
Phương pháp chọn mẫu là chọn mẫu ngẫu nhiên không theo tỷ lệ (mỗi khóa lấy ngẫu nhiên 25 SV).
- Quy trình khảo sát:
Tác giả đến các lớp được chọn điều tra để hướng dẫn về mục đích, ý nghĩa
của việc khảo sát này và giải thích ý nghĩa của từng câu hỏi, từng nhân tố trong phiếu hỏi cho SV. Cho sinh viên trảlời các phiếu khảo sát trong 30 phút sau đó thu
lại. Cụ thể, tổng số phiếu khảo sát phát ra là 75 phiếu, tổng số phiếu thu về là 75 phiếu.
- Phân tích sốliệu điều tra:
Các phiếu khảo sát thu về từ đợt khảo sát thử nghiệm sẽ được sử dụng để đánh giá chất lượng của bộcông cụ đo lường. Việc đánh giá này được thực hiện qua
3 bước:
Bước 1: Xử lý thô các phiếu khảo sát thu thập được, số phiếu sau khi xửlý
đạt yêu cầu là 75 phiếu.
Bước 3: Phân tích sốliệu: Sửdụng 2 phần mềm chuyên dụng trong phân tích xửlý sốliệu khảo sát là SPSS và QUEST. Sửdụng phần mềm SPSS để xác định độ
tin cậy của phiếu khảo sát và sự tương quan giữa các câu hỏi. Sử dụng phần mềm
QUEST đểkhẳng định lại độtin cậy của phiếu khảo sát và sựphù hợp giữa các câu hỏi trong cấu trúc của phiếu.
- Kết quảphân tích sốliệu thửnghiệm:
Sửdụng Cronbach Alpha đểkiểm tra độtin cậy của các mục hỏi trong bảng hỏi đểtìm ra các hệsốsau:
- Hệ số Cronbach Alpha: thang đo được chấp nhận khi hệ số Cronbach Alpha
đạt từ0,6 trởlên (Nunnally, 1978; Peterson, 1994; Slater, 1995).
- Các biến quan sát có hệ số tương quan biến tổng (Corrected Item-Total Correlation) nhỏ hơn 0,3 sẽbịloại (Nunnaly 1994).
- Các biến quan sát có hệsốAlpha nếu bỏ đi mục hỏi (Alpha if Item Deleted) lớn hơn hệsốCronbach’s Alpha sẽbịloại (Hoàng Trọng 2008) [29].
Trong nghiên cứu này, thang đo năng lực tự học của sinh viên bao gồm 11 câu (từ câu 1 đến câu 11được thiết kế theo thang đo Likertvới 5 mức độ); các câu hỏi khác (từcâu 12đến câu 15) phục vụ cho đánh giá mức độ ảnh hưởng của các yếu tố bên trong và bên ngoài đến năng lực tự học của sinh viên. Do đó, việc phân tích chất lượng phiếu khảo sát bằng các phần mềm được thực hiện đối với 11 câu hỏi
đầu tiên của phiếu khảo sát. Cụ thể, tác giả sử dụng phần mềm SPSS 16.0 để tính toán hệ số Cronbach Alpha cho toàn thang đo và giá trị Cronbach Alpha nếu như
loại bỏbớt một mục hỏi nào đó.
Kết quả phân tích cho thấy phiếu khảo sát (11 câu với 50 biến) có độ tin cậy
Cronbach's Alpha = 0.890. Hệ số Cronbach's Alpha nếu loại bất kỳ một biến nào đó dao động trong khoảng từ 0.856 đến 0.896. Như vậy có thể thấy, trong số 50 biến
tiến hành khảo sát có những biến không đóng góp độ tin cậy cho phiếu khảo sát.
Cần xem xét những biến nào không đóng góp vào độ tin cậy của thang đo để điều chỉnh hoặc loại bỏ ra khỏi phiếu khảo sát.Bảng phân tích Crobach Alpha (chi tiết tại phụ lục2) cho thấy các biến 25, 29, 34 làm cho độ tin cậy của thang đo tăng
lên khi loại bỏcác biến này đi. Cụ thể là khi loại bỏbiến 25 độ tin cậy của thang đo
sẽ là 0.905, loại bỏ biến 29 độ tin cậy của toàn thang đo sẽ là 0.897 và khi loại bỏ
biến 34 sẽ làm độ tin cậy của toàn thang đo tăng lên là 0.895. Ba biến này không
đóng góp gì cho độ tin cậy của thang đo nên cầnloại bỏ ba biến này ra khỏi phiếu
khảo sát. Kết quả phân tích Cronbach Alpha sau khi loại bỏ 3 biến này cho kết quả
cronbach Alpha bằng 0.907. Như vậy, phiếu khảo sát có độ tin cậy cao.
Kiểm tra tương quan giữa tổng điểm của từng người và điểm của từng mục hỏi
của phiếu khảo sát (sau khi đã loại bỏ 3 biến25, 29, 34) cho thấy hệ số tương quan
nàydao động trong khoảng từ 0.311đến 0.642.
Từ kết quả phân tích bằng phần mềm SPSS có thể thấy các câu hỏi trong phiếu
khảo sát (đã loại bỏ 3 biến 25, 29, 34) có mối tương quan tốt, tất cả các câu hỏi đều đóng góp vào độ tin cậy của kết quả khảo sát và các câu hỏi cũng giúp phân biệt đượcnhững sinh viên có năng lực tự học tốt và những sinh viên có năng lực học tập
yếu, kém.
Tác giả sử dụng phần mềm QUEST để phân tíchchất lượng bộ công cụ khảo sát
nhằmkhẳng định lại độ tin cậy của phiếu khảo sát.
Trong Tập bài giảng Môn hình Rasch và Phân tích dữ liệu bằng phần mềm
QUEST năm 2011(trang số 43 và 44) của Tiến sĩ Phạm Xuân Thanh chỉ rõ để dữ
liệu phù hợp với mô hình RASCH thì khi phân tích dữ liệu bằng phần mềm QUEST giá trị mean trong Summary of item Estimatesphải bằng hoặc gần bằng 0,00, giá trị
SD phải bằng hoặc gần bằng 1,00. Giá trị mean trong Fit Statistics phải bằng hoặc gần bằng 1 và SD phải bằng hoặc xấp xỉbằng 0 [22].
Kết quảphân tích bằng phần mềm QUEST đối với dữliệu thu được qua đợt khảo sát thử nghiệm bằng phiếu khảo sát cho thấy giá trị mean trong Summary of item Estimates là 0,00, giá trịSD bằng 0,92 và giá trịmean trong Infit Mean Square
đạt 1,00 và mean trong Outfit Mean Square 1,01. Độ tin cậy Reability of estimates bằng 0,94. Với kết quả này có thể kết luận dữ liệu khảo sát phù hợp với mô hình Rasch.
Bảng 2.2.4.1.1.Kết quảphân tích chất lượng phiếu khảo sát bằng phần mềm QUEST.
Summary of item Estimates ========================= Mean .00 SD .92 SD (adjusted) .91 Reliability of estimate .94 Fit Statistics ===============
Infit Mean Square Outfit Mean Square Mean 1.00 Mean 1.01 SD .14 SD .19
Summary of case Estimates ========================= Mean -.41 SD .93 SD (adjusted) .92 Reliability of estimate .92 Fit Statistics ===============
Infit Mean Square Outfit Mean Square Mean 1.05 Mean 1.02 SD .39 SD .43
Infit t Outfit t Mean .08 Mean -.06 SD 1.75 SD 1.51
Kiểm tra mức độ phù hợp của từng câu hỏi với nhau. Các câu hỏi nằm trong
khoảng đồng bộ cho phép từ 0,77 đến 1,30 thì được giữ lại để tiến hành điều tra cho đợt khảo sát chính thức, những câu hỏi nào nằm ra ngoài khoảng đồng bộ này thì cần phải sửa chữa lại hoặc loại bỏ ra khỏi phiếu khảo sát.
Kết quả phân tích cho thấy các câu hỏi có mối tương quan tốt, nhưng đã phát hiện ra 3 biến ngoại lai nằm ra khỏi khoảng đồng bộ cho phép đó là biến “25, 29, 34”. Ba biếnnày cũng chính là ba item làm giảm độ tin cậy của thang đo khi phân
tích bằng phần mềm SPSS. Bản đồ “Map” do phần mềm QUEST tạo ra cho phép
PHAN TICH PHIEU KHAO SAT TEST LVTA ---
Item Fit 13/ 2/13 18:42
all on PTICHTEST (N = 75 L = 50 Probability Level= .50) --- INFIT MNSQ .63 .67 .71 .77 .83 .91 1.00 1.10 1.20 1.30 1.40 1.50 ---+---+---+---+---+---+---+---+---+---+---+---+- 1 item 1 . * | . 2 item 2 . * | . 3 item 3 . | * . 4 item 4 . * | . 5 item 5 . *| . 6 item 6 . | * . 7 item 7 . * | . 8 item 8 . * | . 9 item 9 . * | . 10 item 10 . * | . 11 item 11 . * | . 12 item 12 . * | . 13 item 13 . | * . 14 item 14 . * | . 15 item 15 . | * . 16 item 16 . * | . 17 item 17 . * | . 18 item 18 . * | . 19 item 19 . * | . 20 item 20 . * | . 21 item 21 . | * . 22 item 22 . |* . 23 item 23 . | * . 24 item 24 . | * . 25 item 25 * . | . 26 item 26 . * | . 27 item 27 . | * . 28 item 28 . | * . 29 item 29 . | . * 30 item 30 . * | . 31 item 31 . | * . 32 item 32 . * | . 33 item 33 . * | . 34 item 34 . | . * 35 item 35 . | * . 36 item 36 . * | . 37 item 37 . | * . 38 item 38 . * | . 39 item 39 . * | . 40 item 40 . * | . 41 item 41 . * | . 42 item 42 . * | . 43 item 43 . | * . 44 item 44 . * | . 45 item 45 . | * . 46 item 46 . * | . 47 item 47 . * | . 48 item 48 . * | . 49 item 49 . * | . 50 item 50 . * | . ==========================================================================================================================
Hình 2.2.4.1.1.Bản đồthể hiện mức độ phù hợp của các câu hỏi
Cần xem xét lại ba câu hỏi này, tìm ra lý do mà các câu hỏi này nằm trong khoảng đồng bộ cho phép từ đó có ra quyết định điều chỉnh hay loại bỏ những câu hỏi này ra khỏi phiếu điều tra.
Biến 25: “Đặt câu hỏi cho giáo viên ngay khi phát hiện vấn đề trong bài giảng” (Kĩ năng nghe giảng)
Biến 29: “Ghi vào một vởriêng” (Kĩ năng ghi bài giảng)
Biến 34: “Bảo vệ đến cùng ý kiến của mình” (Kĩ năng làm việc nhóm) Có thểgiải thích lý do 3 item này nằm ngoài khoảng đồng bộ cho phép như sau:
Đối với biến 25: Biến này không đồng nhất khía cạnh đánh giá về kĩ năng
nghe giảng với các biến còn lại trong câu hỏi số 6. Trong khi 4 biến còn lại trong
thang đo này tập trung vào nội dung cần phải chú ý khi nghe giảng, thì biến 25 lại
đềcập đến việc SV đặt câu hỏi cho GV khi phát hiện vấn đề.
Đối với biến 29: Biếnnày không đồng nhất khía cạnh đánh giá vềkĩ năng ghi
bài giảng với 04 biến còn lại trong câu hỏi số7. Trong khi 4 biến còn lại trong thang
đo này tập trung vào nội dung cần phải ghi, thì biến 25 lại đề cập đến công cụ mà
SV dùng đểghi bài.
Đối với biến 34: Biến này không đồng nhất khía cạnh đánh giá về kĩ năng
làm việc nhóm với 05 biến còn lại trong câu hỏi số8. Trong khi 5 biến còn lại trong
thang đo này đều thểhiện các hành vi tích cực trong kĩ năng làm việc nhóm thì biến này lại đưa ra một hành vi tiêu cực trái với các biến còn lại trong nhóm.
Trên cơ sởnhững phân tích này, tác giảquyết định loại bỏ3 biến này ra khỏi phiếu khảo sát. Phiếu khảo sát chuyển từ 50 biến xuống còn 47 biến. Chạy lại
chương trình Quest để đánh giá mức độ phù hợp của các câu hỏi sau khi đã loại bỏ
3 biến (25, 29, 34). Kết quảchạy lại phần mềm QUEST như sau:
PHAN TICH PHIEU KHAO SAT TEST LVTA ---
Item Fit 13/ 2/13 19:50
all on PTICHTEST (N = 75 L = 50 Probability Level= .50) --- INFIT MNSQ .63 .67 .71 .77 .83 .91 1.00 1.10 1.20 1.30 1.40 1.50 ---+---+---+---+---+---+---+---+---+---+---+---+- 1 item 1 . * | . 2 item 2 . * | . 3 item 3 . | * . 4 item 4 . * | . 5 item 5 . *| . 6 item 6 . | * . 7 item 7 . * | . 8 item 8 . * | . 9 item 9 . * | . 10 item 10 . * | . 11 item 11 . * | . 12 item 12 . * | . 13 item 13 . | * . 14 item 14 . * | . 15 item 15 . | * . 16 item 16 . * | . 17 item 17 . * | . 18 item 18 . * | . 19 item 19 . * | . 20 item 20 . * | . 21 item 21 . | * . 22 item 22 . |* . 23 item 23 . | * . 24 item 24 . | * . 25 item 25 . * | . 26 item 26 . | * . 27 item 27 . | * . 28 item 28 . * | . 29 item 29 . | * . 30 item 30 . * | . 31 item 31 . * | .
33 item 33 . * | . 34 item 34 . | * . 35 item 35 . * | . 36 item 36 . * | . 37 item 37 . * | . 38 item 38 . * | . 39 item 39 . * | . 40 item 40 . | * . 41 item 41 . * | . 42 item 42 . | * . 43 item 43 . * | . 44 item 44 . * | . 45 item 45 . * | . 46 item 46 . * | . 47 item 47 . * | . ==========================================================================================================================
Hình 2.2.4.1.2.Mức độ phù hợp của các câu hỏi sau khi đã loại bỏ 3 biến (25, 29, 34)
Kết quảchạy lại Quest sau khi đã loại bỏ3 item cho thấy 47 biến trong bộphiếu
đã tạo thành 1 cấu trúc (47 biến này có INFIT MNSQ nằm trong khoảng 0,77 và 1,30) vì vậy 47 biến này có thể được sửdụng đểkhảo sát trong đợt điều tra chính thức.
Sau khi phân tích chất lượng bộ phiếu hỏi bằng phần mềm SPSS và phần mềm QUEST có thểkết luận như sau:
Phiếu khảo sát có độtin cậy đạt yêu cầu các thông tin thu được khi sử dụng bộcông cụ này là đáng tin cậy.
Phiếu khảo sát có 3 biếnkhông đạt yêu cầu (biến 25, biến 29, biến 34) không
đóng góp vào độ tin cậy của thang đo và nằm ngoài khoảng đồng bộ cho phép INFIT MNSQ, cần phải loại bỏ3 biến này ra khỏi phiếu khảo sát.