Phân tích bằng mơ hình Rasch các nhân tố trong cấu trúc đánh giá công tác chủ nhiệm lớp cho thấy các câu hỏi trong 3 nhân tố đều nằm trong miền cho phép. Điều này cho thấy, các câu hỏi trong từng nhân tố đều đo cùng một mục đích và có kết quả tương đồng với kết quả phân tích bằng phần mềm SPSS và AMOS trước đó.
2.3.2.2. Sản phẩm sau thử nghiệm
Nội dung bộ chỉ số chính thức
Trên cơ sở sử dụng phần mềm SPSS, QUEST để xác định độ tin cậy của bộ công cụ, độ ổn định của cấu trúc thang đo và tính logic giữa các câu hỏi trong phiếu, tác giả đã hoàn chỉnh bộ chỉ số và tiến hành điều tra chính thức.
77
- Phần I (thông tin chung): phần này bao gồm các câu hỏi nhằm xác định năm sinh, giới tính, số năm đảm nhận công tác chủ nhiệm, tổ chuyên môn đang sinh hoạt, kết quả xếp loại của giáo viên.
- Phần II (nội dung bộ chỉ số): phần này bao gồm 3 nội dung chính:
Nội dung 1: Đánh giá về cơng tác tìm hiểu, phân loại HS của người GVCN gồm tổng cộng 7 biến quan sát thuộc 3 vùng nội dung.
Nội dung 2: Đánh giá về công tác chỉ đạo, tổ chức thực hiện các nội dung giáo dục gồm tổng cộng 17 biến quan sát. GV trả lời bằng cách đánh dấu vào duy nhất một lựa chọn được cho là phù hợp nhất với bản thân.
Nội dung 3: Đánh giá về công tác xây dựng tập thể HS lớp chủ nhiệm. GV cũng trả lời bằng cách đánh dấu vào duy nhất một lựa chọn được cho là phù hợp nhất với bản thân.
2.3.3. Độ tin cậy và hiệu lực của phiếu khảo sát dành cho HS
2.3.3.1. Thử nghiệm phiếu khảo sát
Sau khi nhập và làm sạch dữ liệu, sử dụng phần mềm SPSS đánh giá độ tin cậy của phiếu khảo sát ta thu được kết quả:
Bảng 2.7: Đánh giá độ tin cậy của phiếu khảo sát dành cho HS thử nghiệm
Hệ số Cronbach's Alpha Tổng số biến quan sát
0,897 18
Bé nhất Lớn nhất
Tương quan của từng câu hỏi với phiếu (biến tổng) 0,407 0,721
Cronbach’s Alpha nếu loại một câu hỏi 0,886 0,896
Kết quả phân tích ở bảng 2.7 cho thấy phiếu khảo sát có độ tin cậy Cronbach’s Alpha=0.897. Hệ số Cronbach’s Alpha nếu loại bất kỳ một biến nào đó dao động trong khoảng từ 0,886 đến 0,896 (không vượt quá giá trị 0,897 là độ tin cậy chung của cả phiếu khảo sát), hệ số tương quan của từng câu hỏi với phiếu khảo sát (biến tổng) ở mức rất cao đều lớn hơn 0,4 và dao động từ 0,407 đến 0,721. Điều này có thể dễ dàng kết luận rằng phiếu lấy ý kiến này có độ tin cậy cao, các câu hỏi đều có mối tương quan với nhau và tương quan thuận với kết quả của cả phiếu khảo sát.
78
Với 18 câu hỏi dành HS đánh giá về hoạt động chủ nhiệm lớp của GV từ cấp độ rất thấp đến cao trên thang đo 4 mức của mẫu thử nghiệm 100 HS, sau khi đưa vào phần mềm QUEST phân tích thu được kết quả:
Bảng 2.8: Kết quả phân tích chất lượng phiếu khảo sát bằng phần mềm QUEST Summary of item Estimates Summary of item Estimates
========================= Mean .01 SD 1.24 SD (adjusted) 1.09 Reliability of estimate .87 Fit Statistic ===============
Infit Mean Square Outfit Mean Square Mean 1.00 Mean .96 SD .16 SD .28
Summary of case Estimates
========================= Mean .45 SD 1.06 SD (adjusted) 1.25 Reliability of estimate .88 Fit Statistics ===============
Infit Mean Square Outfit Mean Square
Mean .99 Mean .96 SD .08 SD .05
Trong biểu đồ Item Fit sau đây, mỗi giá trị về mức độ phù hợp của các câu hỏi với nhau được đánh dấu bằng dấu *. Những câu hỏi nằm trong 2 đường chấm thẳng đứng có giá trị bình phương trung bình MNSQ nằm trong khoảng 0,77-1,30 là được chấp nhận và được coi là phù hợp với mơ hình. Những câu hỏi nào nằm ngồi vùng này sẽ bị loại bỏ hoặc cần phải xem xét lại.
79
PHIEU HOC SINH -------------------------------------------------------------------------------------------
ItemFit all on phieuhsthunghiem (N = 100 L = 18 Probability Level= .50) ------------------------------------------------------------------------------------------- INFIT MNSQ .77 .83 .91 1.00 1.10 1.20 1.30 ----------+---------+---------+---------+---------+---------+---------+---------+------ 1 item 1 . | * . 2 item 2 . | * . 3 item 3 . * | . 4 item 4 . | * . 5 item 5 . | * . 6 item 6 . | * . 7 item 7 . | * . 8 item 8 . * | . 9 item 9 . * | . 10 item 10 . | * . 11 item 11 . * | . 12 item 12 . * | . 13 item 13 . | * . 14 item 14 . * | . 15 item 15 . * | . 16 item 16 . * | . 17 item 17 .* | . 18 item 18 . * | . =======================================================================================
Hình 2.11: Bản đồ thể hiện mức độ phù hợp của các câu hỏi
Dựa vào biểu đồ ở hình 2.11 ở trên ta thấy 18 câu hỏi trong phiếu khảo sát đều nằm trong khoảng cho phép, khơng có xuất hiện biến ngoại lai nào do đó chúng đã tạo thành một cấu trúc đo. Do đó ta có thể sử dụng tất cả 18 câu hỏi này cho đợt khảo sát chính thức.
2.3.3.2. Sản phẩm sau thử nghiệm
Trên cơ sở sử dụng phần mềm QUEST để xác định độ tin cậy của bộ công cụ, độ ổn định của cấu trúc thang đo và tính logic giữa các câu hỏi trong phiếu, tác giả đã hoàn chỉnh phiếu khảo sát và tiến hành điều tra chính thức.
Phiếu chính thức bao gồm 2 phần nội dung chính:
- Phần I (thông tin chung): phần này bao gồm các câu hỏi nhằm xác định khối lớp, giới tính, kết quả xếp loại học lực và hạnh kiểm rèn luyện, chức vụ lớp, chức vụ đoàn hiện tại trong lớp.
- Phần II (nội dung phiếu khảo sát): phần này bao gồm 2 nội dung chính: Nội dung 1: Lấy ý kiến của HS về mức độ quan trọng của các hoạt động giáo dục tồn diện của GVCN, sự nhìn nhận của các em về khái niệm hoạt động giáo dục toàn diện ở GV.
80
Kết luận chương 2
Trong chương 2, tác giả đã khái quát một số phương pháp nghiên cứu được sử dụng trong luận văn và tiến hành xây dựng quy trình nghiên cứu, thiết kế và thử nghiệm, đánh giá chất lượng bộ công cụ khảo sát trên mẫu đại diện bằng phần mềm QUEST, CONQUEST và SPSS. Kết quả cho thấy bộ chỉ số có độ tin cậy cao. Qua phân tích đã phát hiện 4 câu hỏi khơng đạt chất lượng cần phải xem xét, chỉnh sửa lại cho phù hợp. Sau khi chỉnh sửa, hoàn thiện 4 câu hỏi này và phân tích lại bằng SPSS, QUEST tồn bộ câu hỏi trong bộ chỉ số đều nằm trong một cấu trúc logic, đo đúng các nội dung mà công cụ được thiết kế để đo. Thang đo này đạt đủ điều kiện để sử dụng trong phân tích và đánh giá chất lượng cơng tác chủ nhiệm lớp của giáo viên ở trường phổ thơng.
Bên cạnh đó, tác giả cũng đã thiết kế thành cơng phiếu khảo sát thu thập ý kiến của giáo viên về mức độ đồng ý các năng lực cần thiết ở người GVCN để công tác này có chất lượng và phiếu khảo sát lấy ý kiến đánh giá của HS về kết quả của hoạt động chủ nhiệm của GV. Qua đánh giá thử nghiệm bằng phần mềm QUEST và SPSS, 2 phiếu khảo sát này có độ tin cậy rất cao, các câu hỏi đều có mối tương quan trong với nhau cùng tạo thành một cấu trúc, đo đúng nội dung cần đo.
81
Chương 3. KẾT QUẢ NGHIÊN CỨU ĐÁNH GIÁ CHẤT LƯỢNG
CÔNG TÁC CHỦ NHIỆM LỚP TRƯỜNG THPT HÙNG VƯƠNG 3.1. Kết quả đánh giá công tác GVCN dựa trên bộ tiêu chí
3.1.1. Đánh giá tiêu chuẩn 1
Ở nội dung này, tác giả đưa ra 7 biến quan sát để đánh giá về cơng tác tìm hiểu, phân loại HS lớp chủ nhiệm của GV tại trường THPT Hùng Vương. Với thang đo chạy từ 1 đến 4 điểm, chỉ số của tiêu chuẩn này được tính bằng tổng điểm của 7 biểu hiện này. Giá trị của chỉ số đầu tiên này sẽ chạy từ 7 (giá trị thấp nhất) cho đến 27 (giá trị cao nhất). Càng gần giá trị 27 thì chất lượng cơng tác này của GV càng tốt và ngược lại. Kết quả điều tra là số lượng mẫu: 62; giá trị trung bình: 20,4; độ lệch chuẩn: 2,883; giá trị lớn nhất: 26; giá trị nhỏ nhất: 13.
Để dễ dàng đánh giá các mức độ đạt được của GV trên tiêu chuẩn này tác giả đã tính tốn xây dựng thang đo đối chiếu 4 mức độ dựa trên giá trị khoảng cách:
Giá trị khoảng cách = (Giá trị lớn nhất có thể đạt được GV- Giá trị nhỏ nhất có thể đạt được của GV)/số mức = (27-7)/4=5.
Từ giá trị khoảng cách, ta xác định được các mức độ và ý nghĩa của các giá trị trung bình trong cơng tác tìm hiểu, phân loại HS theo 4 nhóm. Kết quả khảo sát về về tiêu chuẩn này của GVCN biểu diễn dưới thang đo 4 mức độ như sau:
Bảng 3.1: Thống kê mức độ ĐG cơng tác tìm hiểu, phân loại HS
STT Nhóm (mức độ) Khoảng điểm Số lượng Phần trăm Phần trăm cộng dồn
1 Trung bình 7-12 0 0 0
2 Trung bình-Khá 13-17 8 12,9 12,9
3 Khá 18-22 43 69,4 82,3
4 Tốt 23-27 11 17,7 100,0
Tổng 62 100,0
Bảng 3.1 cho thấy chất lượng về cơng tác tìm hiểu, phân loại HS của GVCN ở mức rất tốt, có đến 69,4% (xấp xỉ 70%) trên tổng số GV tự đánh giá mình ở mức khá, 17,7% số GV đánh giá tiêu chuẩn này ở mức tốt, chỉ có 12,9% GV tự đánh giá ở mức trung bình-khá và khơng có GV nào xếp loại mức trung bình. Như vậy, kết quả phân
82
tích trên cho thấy cơng tác này của GVCN trường THPT Hùng Vương ở mức từ khá trở lên.
Phỏng vấn sâu 1 GVCN tại trường cho biết: “Tìm hiểu và phân loại HS lớp chủ
nhiệm là việc làm thường niên của mỗi giáo viên được thực hiện ngay sau khi nhận lớp chủ nhiệm. Nếu làm tốt công tác này sẽ hỗ trợ rất nhiều trong công tác xây dựng và tổ chức các hoạt động giáo dục học sinh” (GV Tổ tự nhiên).
Phân tích sâu hơn với từng biến quan sát bằng phương pháp thống kê mô tả ta thu được kết quả ở bảng 3.2 bên dưới
Bảng 3.2: Thống kê mô tả với từng biến quan sát tiêu chuẩn 1
Nhân tố
Các biến
quan sát Nội dung Trung
bình Độ lệch chuẩn Tìm hiểu, phân loại HS lớp chủ nhiệm Tìm hiểu đặc điểm HS
Câu 1.1 Tìm hiểu về hồn cảnh sống của từng HS 3,05 0,459
Câu 1.2 Những đặc điểm về thể chất, sinh lí của từng HS 2,92 0,454
Câu 1.3 Những đặc điểm về tâm lí của mối HS 2,89 0,546
Câu 1.4 Nắm vững tính cách và những hành vi đạo đức HS 2,90 0,564
Tìm hiểu đối tượng và môi trường giáo dục
Câu 1.5 Hình thức thu thập thơng tin về học tập và rèn luyện đạo đức HS 2,90 0,620
Câu 1.6 Tìm hiểu và xây dựng hồ sơ học sinh 2,87 0,665
Câu 1.7 Tìm hiểu môi trường giáo dục 2,87 0,338
Dựa vào kết quả ở bảng 3.2, mức độ đánh giá về cơng tác tìm hiểu, phân loại HS của GV có chỉ số tương đối cao (xấp xỉ bằng 3 trên 4 mức điểm) và đồng đều (phương sai các câu hỏi gần ngang bằng nhau). Trong đó, tiêu chí về tìm hiểu hồn cảnh sống của từng HS (câu 1.1) có giá trị trung bình cao nhất (giá trị 3,05), tiêu chí về mơi trường giáo dục có giá trị trung bình thấp nhất trong nhóm (với giá trị 2,87). Cụ thể: câu 1.1 (trung bình: 3,05; độ lệch chuẩn: 0,459), câu 1.2 (trung bình: 2,92;
độ lệch chuẩn: 0,454), câu 1.3 (trung bình: 2,89; độ lệch chuẩn: 0,546), câu 1.4
(trung bình: 2,90; độ lệch chuẩn: 0,564), câu 1.5 (trung bình: 2,90; độ lệch chuẩn:
0,620), câu 1.6 (trung bình: 2,87; độ lệch chuẩn: 0,665), câu 1.7(trung bình:2,87;độ lệch chuẩn:0,338)
Tác giả tiếp tục phân tích tiêu chuẩn này giữa các tổ chun mơn để xem có tồn tại sự khác nhau hay không? Để thực hiện kiểm định về sự khác nhau này tác giả đã
83
phân tích sự phân bố của mẫu, xem xét mẫu có phân bố chuẩn hay không để sử dụng phương pháp kiểm định phù hợp.
Kiểm tra tính chuẩn trong phân phối mẫu bằng thủ tục thống kê tần số trong SPSS. Kết quả cho thấy giá trị Mean và Median bằng nhau đều bằng 33,00, độ xiên Skewness bằng 0,536 (độ xiên dao động từ -1 đến +1) do đó có thể kết luận phân phối này xấp xỉ phân phối chuẩn.