Chương 2: PHƯƠNG PHÁP NGHIÊN CỨU
2.5. Kiểm tra độ tin cậy, tính hiệu lực của công cụ đo lường
2.5.2. Độ tin cậy và tính hiệu lực của bảng hỏi dành cho nhà tuyển dụng
Bộ phiếu hỏi đánh giá mức độ thích ứng công việc của sinh viên tốt nghiệp ngành kế toán dành cho cán bộ quản lý cũng được xây dựng gồm 33 câu hỏi , sau khi đưa vào khảo sát thử nghiệm trên mẫu là 30 , số liệu được nhập vào SPSS và chạy trong phần mềm phân tích Quest cho kết quả sau:
luan van thu nghiem NTD1 ---
---
Item Fit
all on thunghiem (N = 30 L = 33 Probability Level= .50) ---
---
INFIT MNSQ .63 .67 .71 .77 .83 .91 1.00 1.10 1.20
1.30 1.40 1.50 1.60
---+---+---+---+---+---+---+---+---+--- ---+---+---+---+-
1 item 1 . * |
2 item 2 . | * 3 item 3 . * | 4 item 4 . * | 5 item 5 . * | 7 item 7 . | * 8 item 8 . * | 9 item 9 . | * 10 item 10 . | * 11 item 11 . | 12 item 12 . | 13 item 13 . * | 14 item 14 . | * 15 item 15 . | * 16 item 16 . | * 17 item 17 . | * 18 item 18 . *|
19 item 19 . * | 20 item 20 . * | 21 item 21 . * | 22 item 22 . * 23 item 23 . * | 24 item 24 . | * 25 item 25 . * | 26 item 26 * . | 27 item 27 . | * 28 item 28 . | * 29 item 29 . * | 30 item 30 . * | 31 item 31 . | * 32 item 32 . * 33 item 33 . * |
Kết quả thử nghiệm cho thấy các Item 11, 12, 26 cần phải sửa chữa lại - Item 11: Khả năng giao tiếp
- Item12: Khả năng chịu đựng áp lực công việc - Item 26: Thái độ tích cực đóng góp cho Quý tổ chức
Với cách thiết kế như vậy nhà tuyển dụng đã không hiểu rõ nội dung câu hỏi dẫn đến Item 11, 12, 26 rơi ra ngoài khoảng đồng bộ cho phép (INFIT MNSQ 0.77 - 1.30).
Sửa lại ba câu trên:
- Item 11: Khả năng giao tiếp ( Thể hiện ở thái độ, phong cách trong giao tiếp ứng xử).
- Item 12: Khả năng chịu áp lực công việc khi làm việc với các con số và môi trường làm việc.
- Item 26: Thái độ tích cực đóng góp cho Quý tổ chức (thể hiện ở mức độ sẵn sang với công việc, không ngại khó khăn, làm việc hết mình vì lợi ích của tổ chức).
Sau khi sửa chữa, điều chỉnh nội dung các câu nằm ngoài khoảng đồng bộ thích hợp, chúng tôi đã tiến hành khảo sát trên diện rộng với 50 cán bộ quản lý các Cơ quan/ Doanh nghiệp kết quả được thể hiện như sau:
DANH GIA NTD ---
Case Estimates
all on NHA TUYEN DUNG (N = 50 L = 33 Probability Level= .50) ---
Summary of case Estimates
=========================
Mean .02 SD .98 SD (adjusted) .93 Reliability of estimate .92
Fit Statistics
===============
Infit Mean Square Outfit Mean Square
Mean 1.00 Mean .99 SD .48 SD .48 Infit t Outfit t Mean -.23 Mean -.16 SD 1.89 SD 1.53 0 cases with zero scores
0 cases with perfect scores
==============================================================
Khi dữ liệu phù hợp với mô hình Rasch thì trị số kỳ vọng của các bình phương trung bình (mean square) xấp xỉ bằng 1 và trị số kỳ vọng t xấp xỉ bằng 0.
Từ các số liệu về giá trị trung bình Mean và độ lệch chuẩn SD ở trên, ta thấy dữ liệu dùng để phân tích là hoàn toàn phù hợp với mô hình Rasch. Độ tin cậy của tính toán rất cao, có giá trị bằng 92%.
*) Kiểm tra mức độ phù hợp của các câu hỏi
Trong biểu đồ Item Fit sau đây, mỗi câu trắc nghiệm biểu thị bằng dấu *.
Những câu trắc nghiệm nằm trong hai đường chấm thẳng đứng có giá trị trung bình bình phương độ phù hợp INFIT MNSQ nằm trong khoảng (0.77 - 1.30) sẽ phù hợp với mô hình Rasch. Nếu câu trắc nghiệm nào không phù hợp thì loại bỏ ra khỏi tính toán.
Biểu đồ 2.3. Minh họa sự phù hợp của các câu hỏi
DANH GIA NTD
--- all on ntd (N = 50 L = 33 Probability Level= .50)
---
INFIT MNSQ .63 .67 .71 .77 .83 .91 1.00 1.10 1.20 1.30
1.40 1.50 1.60
---+---+---+---+---+---+---+---+---+-- 1 item 1 . * | . 2 item 2 . | * . 3 item 3 . | * . 4 item 4 . * | . 5 item 5 * . | .
6 item 6 . * | . 7 item 7 . | * . 8 item 8 . *| . 9 item 9 . | * . 10 item 10 . | * . 11 item 11 . | * . 12 item 12 . | * . 13 item 13 . * | . 14 item 14 . | * . 15 item 15 . |* . 16 item 16 . *| . 17 item 17 . * | . 18 item 18 . * | . 19 item 19 . * | . 20 item 20 . * | . 21 item 21 . * | . 22 item 22 . * . 23 item 23 . * | . 24 item 24 . | * . 25 item 25 . *| . 26 item 26 . * | . 27 item 27 . | * . 28 item 28 . | * . 29 item 29 . * | . 30 item 30 . * | . 31 item 31 . * | . 32 item 32 . * | . 33 item 33 . * | .
=====================================================================================================
Theo như biểu đồ 2.3. thì item số 5 là biến ngoại lai vì có chỉ số INFIT MNSQ không nằm trong khoảng (0.77 - 1.30). Loại bỏ ba item này ra khỏi phép tính và tính toán lại, ta có kết quả như sau:
Case Estimates
all on NHA TUYEN DUNG(N = 50 L = 32 Probability Level= .50) ---
Summary of case Estimates
=========================
Mean .02 SD .96 SD (adjusted) .91 Reliability of estimate .92 Fit Statistics
===============
Infit Mean Square Outfit Mean Square
Mean 1.00 Mean .99 SD .49 SD .49 Infit t Outfit t Mean -.23 Mean -.17 SD 1.89 SD 1.52 0 cases with zero scores
0 cases with perfect scores
===========================================================================
Biểu đồ 2.4. Minh họa sự phù hợp của các câu hỏi sau khi loại bỏ cá thể ngoại lai
DANH GIA NTD ---
Item Fit
all on ntd (N = 50 L = 32 Probability Level= .50) ---
----INFIT MNSQ .63 .67 .71 .77 .83 .91 1.00 1.10 1.20 1.30
1.40 1.50 1.60
---+---+---+---+---+---+---+---+---+---+--- ---+---+---+-
1 item 1 . * | .
2 item 2 . | * . 3 item 3 . | * . 4 item 4 . * | . 6 item 6 . * | . 7 item 7 . | * . 8 item 8 . *| . 9 item 9 . | * . 10 item 10 . | * . 11 item 11 . | * . 12 item 12 . | * . 13 item 13 . * | . 14 item 14 . | * . 15 item 15 . *| . 16 item 16 . * | . 17 item 17 . * | . 18 item 18 . * | . 19 item 19 . * | . 20 item 20 . * | . 21 item 21 . * | . 22 item 22 . * | . 23 item 23 . * | . 24 item 24 . | * . 25 item 25 . * | . 26 item 26 . * | . 27 item 27 . | * . 28 item 28 . | * . 29 item 29 . * | . 30 item 30 . * | . 31 item 31 . * | . 32 item 32 . * | . 33 item 33 . * | .
========================================================================================================
32 câu còn lại đều có INFIT MNSQ ở trong khoảng (0.77-1.30) do đó chúng đã tạo thành môt cấu trúc đo, hình trên cho thấy không còn một biến ngoại lai nào tồn tại. Điều này có nghĩa là các câu hỏi được sử dụng trong đợt khảo sát này đã đo được đúng cái cần đo.