Kết quả kiểm tra theo mô hình Rasch bằng cách sử dụng phần mềm

Một phần của tài liệu ây dựng và Thử nghiệm Bộ chỉ số đánh giá chất lượng hoạt động quản lý sinh viên tại Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia Hà Nội (Trang 63)

8. Cấu trúc của luận văn

2.5.3.4.Kết quả kiểm tra theo mô hình Rasch bằng cách sử dụng phần mềm

Quest cho toàn bộ phiếu hỏi sau khi đã hiệu chỉnh

Sau khi kiểm đi ̣nh bảng hỏi bằng đô ̣ tin câ ̣y Cronbach’s Alpha và phân tích nhân tố EFA có 09 câu hỏi bi ̣ loa ̣i , 33 câu hỏi còn la ̣i đươ ̣c đưa vào đánh giá bằng mô hình Rasch thông qua viê ̣c sử du ̣ng phần mềm chuyên du ̣ng QUEST .

64

Bảng 2.15: Thống kê các tiêu chí đánh giá chất lượng hoạt động quản lý công tác SV sau khi đánh giá bằng phần mềm SPSS

STT Chỉ số

I. Nội dung 1: Công tác giáo dục chính trị tƣ tƣởng

1 ĐV4 Việc cấp sổ tay SV

2 ĐV6 Hiệu quả giải quyết công việc của cán bộ chuyên trách với SV 3 ĐV7 Thái độ, tác phong làm việc của cán bộ đối với SV

4 ĐV8 Việc tổ chức các hoạt động xã hội, tình nguyện (tiếp sức mùa thi, hiến máu nhân đạo, ...)

5 ĐV9 Việc tuyên truyền, tổ chức những hoạt động truyền thống của trường thông qua các phương tiện truyền thong đại chúng

6 ĐV10 Việc tổ chức các hoạt động giao lưu hợp tác giữa cán bộ, SV nhà trường với các tổ chức, các trường đại học trong nước và ngoài nước 7 ĐV11 Việc lưu giữ tư liệu và việc tổ chức hoạt động của phòng truyền

thống phục vụ khách và SV

II. Nội dung 2: Công tác quản lí SV

8 QT13 Việc tổ chức đón tiếp SV nhập học

9 QT14 Việc tổ chức học tập nội quy, quy chế và giới thiệu truyền thống của nhà trường cho SV

10 QT15 Phổ biến và thực hiện các chế độ chính sách hiện hành của Nhà nước và ĐHQGHN đối với SV

11 QT17 Việc tiếp nhận và giải quyết các công việc liên quan đến CTSV 12 QT18 Việc quản lý hồ sơ SV

13 QT19 Việc tổ chức và hướng dẫn đánh giá điểm rèn luyện cho SV 14 QT20 Công tác thi đua, khen thưởng và kỷ luật SV

15 QT21 Các thông tin về xử lý học vụ được triển khai kịp thời

16 QT22 Giới thiệu và hướng dẫn SV làm thủ tục xét và nhận học bổng

17 QT23 Việc khai thác, quản lý và sử dụng các học bổng ngoài ngân sách cho SV

65

STT Chỉ số

19 QT28 Công tác QLSV ngoại trú 20 QT29 Công tác QLSV nước ngoài

21 QT30 Việc thực hiện chế độ chính sách cho SV nước ngoài

III. Nội dung 3: Công tác hƣớng nghiê ̣p và tƣ vấn viê ̣c làm

22 ĐR31 Tư vấn, giới thiệu về ngành, chuyên ngành đào tạo của nhà trường cho học sinh THPT

23 ĐR32

Tổ chức các hoạt động tư vấn về phương pháp học tập, nội dung đặc điểm của ngành nghề và trình độ đang được đào tạo; các vấn đề về chính sách, pháp luật của nhà nước liên quan đến ngành nghề được đào tạo cho người học

24 ĐR33

Tổ chức câu lạc bộ hướng nghiệp, hoạt động ngoại khóa, giao lưu với đơn vị sử dụng lao động, giúp người học bổ sung kiến thức thực tế, kỹ năng nghề nghiệp (adsbygoogle = window.adsbygoogle || []).push({});

25 ĐR34 Thiết lập mạng lưới thông tin về việc làm giữa nhà trường và đơn vị sử dụng lao động

26 ĐR35 Tổ chức, tham gia các cuộc giao lưu, hội thảo, hội nghị, hội chợ về việc làm

27 ĐR36 Hỗ trợ cho SV trong quá trình thực tập tốt nghiệp

28 ĐR37 Hỗ trợ đào tạo các kỹ năng xin việc làm cho SV (như làm hồ sơ, phỏng vấn khi xin việc làm)

29 ĐR38 Tạo điều kiện thuận cho SV tìm kiếm công việc làm thêm trong quá trình học

30 ĐR39 Tổ chức giao lưu giữa cựu SV và SV chuẩn bị tốt nghiệp trao đổi về kinh nghiệm làm việc

31 ĐR40 Xây dựng mạng lưới Cựu SV

32 ĐR41 Việc tư vấn kịp thời về các vấn đề liên quan đến việc làm sau tốt nghiệp

33 ĐR42 Cung cấp đầy đủ các thông tin về công tác hướng nghiệp, tư vấn việc làm tại nhà trường

66

Kết quả ước tính phù hợp thống kê

DANH GIA HOAT DONG QUAN LI SINH VIEN ---

Item Estimates (Thresholds) 12/ 4/13 20:10

all on hoa (N = 311 L = 33 Probability Level= .50) ---

Summary of item Estimates ========================= Mean 0,00 SD 0,42 SD (adjusted) 0,40 Reliability of estimate 0,90 Fit Statistics ===============

Infit Mean Square Outfit Mean Square Mean 1,00 Mean 0,98 SD 0,14 SD 0,17 Infit t Outfit t Mean -0,11 Mean -0,24 SD 1,59 SD 1,43 0 items with zero scores

0 items with perfect scores

Kết quả ước tính trường hợp

DANH GIA HOAT DONG QUAN LI SINH VIEN ---

Case Estimates 12/ 4/13 20:10

all on hoa (N = 311 L = 33 Probability Level= 0,50) ---

Summary of case Estimates ========================= Mean -1,17 SD 1,09 SD (adjusted) 1,05 Reliability of estimate 0,92 Fit Statistics ===============

Infit Mean Square Outfit Mean Square Mean 1,00 Mean 0,99

SD 0,48 SD 0,46 Infit t Outfit t Mean -0,23 Mean -0,17 SD 1,90 SD 1,52 8 cases with zero scores

0 cases with perfect scores

Khi dữ liệu phù hợp với mô hình thì: Mean phải bằng hoặc gần 0,00 SD phải bằng hoặc gần 1,00

Mean phải bằng hoặc gần 1,00 SD phải bằng hoặc gần 0,00

Mean phải bằng hoặc gần 1,00 SD phải bằng hoặc gần 0,00

67

Theo kết quả được cung cấp ở trên về các điều kiện cần kiểm tra trước khi phân tích ta thấy: (adsbygoogle = window.adsbygoogle || []).push({});

- Ước tính phù hợp thống kê (Summary of item Estimates): giá trị Mean = 0,00 bằng với giá trị Mean điều kiện (bằng hoặc gần 0,00) và SD = 0,42 nhỏ hơn giá trị SD điều kiện (bằng hoặc gần 1,00). Giá trị Mean của Infit Mean Square và Outfit Mean Square đều bằng 1,00 và bằng với giá trị Mean điều kiện (bằng hoặc gần 1,00); giá trị SD của Infit Mean Square và Outfit Mean Square lần lượt là 0,14 và 0,17 gần bằng với SD điều kiện (bằng hoặc gần 0,00). Do đó, ta có thể kết luận:

dữ liệu phù hợp với mô hình Rasch.

- Ước tính trường hợp (Summary of case Estimates): Giá trị Mean của Infit Mean Square và Outfit Mean Square lần lượt là 1,00 và 0,99 gần bằng với giá trị Mean điều kiện (bằng hoặc gần 1,00); giá trị SD của Infit Mean Square là 0,48 và 0,49 lớ n hơn SD điều kiện (bằng hoặc gần 0,00). Do đó, ta có thể kết luận: dữ liệu

phù hợp với mô hình Rasch.

Như vậy, có thể khẳng định rằng toàn bộ câu hỏi có Mean và SD đáp ứng đủ điều kiện cần thiết cho việc thiết lập mô hình đáp ứng với lý thuyết mô hình Rasch. Do đó, dữ liệu hoàn toàn phù hợp với mô hình Rasch.

68

Kiểm tra mức độ phù hợp của các câu hỏi do mô hình cung cấp, ta có:

DANH GIA HOAT DONG QUAN LI SINH VIEN ---

Item Fit 12/ 4/13 20:10

all on hoa (N = 311 L = 33 Probability Level= .50) --- INFIT MNSQ .63 .71 .83 1.00 1.20 1.40 1.60 1.80 ---+---+---+---+---+---+---+---+--- 1 item 1 . | . * 2 item 2 . | * . 3 item 3 . | * . 4 item 4 . * | . 5 item 5 . | * . 6 item 6 . | * . 7 item 7 . * | . 8 item 8 . |* . 9 item 9 . * | . 10 item 10 . | * . 11 item 11 . *| . 12 item 12 . * . 13 item 13 . * | . 14 item 14 . * | . 15 item 15 . * . 16 item 16 . * | . 17 item 17 . * | . 18 item 18 * | . 19 item 19 . |* . 20 item 20 . * | . 21 item 21 . * | . 22 item 22 . | * . 23 item 23 . * | . 24 item 24 . * | . 25 item 25 . * | . 26 item 26 . * | . 27 item 27 . | * . 28 item 28 . | * . 29 item 29 . | * . 30 item 30 . * | . 31 item 31 . | * . 32 item 32 . | * . 33 item 33 . * | .

Từ kết quả phân tích cho thấy, độ tin cậy của tính toán đạt kết quả 90% là đáng tin cậy, 32/33 câu hỏi có giá trị Infit MNSQ nằm trong khoảng [0,77; 1,30], có nghĩa là chúng tạo thành một cấu trúc. Duy nhất có câu 4 “Việc cấp sổ tay SV” nằm ngoài khoảng cho phép nên biến ngoa ̣i lai này bi ̣ loa ̣i . Kết quả này khá phù hợp với kết quả đánh giá của nhóm lãnh đạo và CBQL (có đến 27% cán bộ lựa chọn mức phân vân và đây cũng là tiêu chí mà nhóm cán bộ đánh giá mức độ cần thiết thấp nhất trong nhóm công tác giáo dục chính trị tư tưởng). Nguyên nhân có thể là do việc cấp sổ tay SV cho từng bạn SV sẽ dẫn đến tình trạng lãng phí mà chỉ nên chọn giải pháp mỗi lớp chỉ phát chung vài quyển và các bạn chuyền tay nhau đọc như thế vừa tiết kiệm vừa tạo tâm lí tò mò cho SV.

69

Như vậy, kết quả kiểm tra theo mô hình Rasch bằng cách sử dụng phần mềm Quest, ta nhận thấy các dữ liệu đều phù hợp với mô hình Rasch . Có 32/33 câu hỏi đều nằm trong khoảng đồng bộ cho phép tạo thành một cấu trúc chung, phù hợp với đối tượng khảo sát.

Kết quả kiểm tra mức độ phù hợp của các câu hỏi sau khi loa ̣i bỏ câu 4:

DANH GIA HOAT DONG QUAN LI SINH VIEN_DIEU CHINH ---

Item Fit 13/ 4/13 10:25

all on hoa (N = 311 L = 32 Probability Level= .50) INFIT MNSQ .63 .71 .83 1.00 1.20 1.40 1.60 1.80 ---+---+---+---+---+---+---+---+--- 1 item 1 . | * . 2 item 2 . | * . 3 item 3 . | * . 4 item 4 . * | . 5 item 5 . | * . 6 item 6 . | * . 7 item 7 . * | . 8 item 8 . |* . 9 item 9 . * | . 10 item 10 . | * . 11 item 11 . *| . 12 item 12 . * . 13 item 13 . * | . 14 item 14 . * | . 15 item 15 . *| . 16 item 16 . * | . 17 item 17 . * | . 18 item 18 . * | . 19 item 19 . * . 20 item 20 . * | . 21 item 21 . * | . 22 item 22 . | * . 23 item 23 . * | . 24 item 24 . * | . 25 item 25 . * | . 26 item 26 . * | . 27 item 27 . | * . 28 item 28 . | * . 29 item 29 . | * . 30 item 30 . * | . 31 item 31 . | * . 32 item 32 . | * . 2.6. TIỂU KẾT CHƢƠNG 2.

Qua kết quả đánh giá đô ̣ tin câ ̣y , đô ̣ phân biê ̣t , phân tích nhân tố và kiểm đi ̣nh mức đô ̣ phù hợp của các tiêu chí bằng mô hình Rasch còn la ̣i 32/42 câu hỏi. Đây là các câu hỏi có đô ̣ tin câ ̣y khá cao, chỉ số độ phân biệt dương, các câu hỏi này phù hợp với mô hình Rasch và nằm t rong khoảng đồng bô ̣ cho phép . Điều đó chứng tỏ 32 câu (sau khi điều chỉnh ) trong bảng hỏi này có tính đồng hướng , đo đúng cái cần đo, tức là các câu hỏi này đều có chất lượng tốt. Cụ thể:

70

- Giá trị độ tin cậy Cronbach’s Alpha rất cao , cả 03 nhóm đều lớn hơn 0,80

và dao động trong khoảng từ 0,848 đến 0,937;

- Trong phân tích nhân tố các biến trong từng nhóm nô ̣i dung đều có giá tri ̣ KMO lớn hơn 0,50, mức ý nghĩa nhỏ hơn 0,05 đồng thời tại các mức giá trị Eigenvalues lớn hơn 1 và phương sai trích lớn hơn 50%.

- Các câu hỏi đều có chỉ số độ phân biệt dương và có giá trị lớn hơn 0,3, dao

Một phần của tài liệu ây dựng và Thử nghiệm Bộ chỉ số đánh giá chất lượng hoạt động quản lý sinh viên tại Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia Hà Nội (Trang 63)