III. NGUYấN TẮC, PHƯƠNG PHÁP VÀ QUY TRèNH XÂY DỰNG
5. Người học
1.4.4. Điều chỉnh cỏc cõu trắc nghiệm chưa phự hợp
Theo lý thuyết về độ phõn cỏch của cõu trắc nghiệm tiờu chớ, một cõu trắc nghiệm tiờu chớ khụng cú khả năng phõn cỏch khụng nhất thiết phải loại bỏ nếu cõu
Hỡnh 3.2. Biểu đồ phõn bố độ phõn cỏch của cỏc cõu trắc nghiệm
52% 22% 15% 11% Độ phõn cỏch rất tốt Độ phõn cỏch tốt Độ phõn cỏch chấp nhận được Độ phõn cỏch kộm D ≤ 0.19 D = (0.2 ữ 0.29) D ≥ 0.40 D = (0.3 ữ 0.39)
ấy phản ỏnh một thuộc tớnh quan trọng nào đú của tiờu chớ đó được ấn định trước. Vỡ thế, một cõu trắc nghiệm rất tốt cú thể là những cõu cú chỉ số phõn cỏch là 0 hay rất thấp.
Vỡ độ phõn cỏch của một cõu trắc nghiệm liờn quan đến độ khú của cõu trắc nghiệm ấy. Do vậy, cần phải đối chiếu độ phõn cỏch của cõu hỏi với độ khú của chỳng để xem xột mức độ hợp lý của mối quan hệ giữa hai đại lượng này.
Theo lý thuyết trờn, việc phõn tớch 11 cõu hỏi cú độ phõn cỏch kộm để đưa ra nội dung cần chỉnh sửa được thể hiện trong bảng 3.13
Bảng 3.13. Phõn tớch cỏc cõu trắc nghiệm cú độ phõn cỏch kộm
và nội dung cần chỉnh sửa
Số TT Cõu hỏi Độ khú Độ phõn cỏch Nhận xột
1 A46 0.73 0 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
2 B3 0.87 0,125 Cõu hỏi quỏ dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
3 B13 0.73 0 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
4 B27 0.8 0,125 Cõu hỏi quỏ dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
5 B31* 0.5 0,125 Cõu hỏi cú độ khú trung bỡnh - độ phõn
cỏch kộm: cần xem xột lại 6 B35 0.57 0 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh 7 C1 0.62 0 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh 8 C20 0.72 0,125 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
9 C25* 0.48 0,125 Cõu hỏi cú độ khú trung bỡnh - độ phõn
cỏch kộm: cần xem xột lại
10 C33 0.52 0 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
11 C36 0.72 0,125 Cõu hỏi dễ - độ phõn cỏch kộm: hợp lý, khụng cần điều chỉnh
Như vậy, khi xem xột mối quan hệ giữa độ khú và độ phõn cỏch của 11 cõu hỏi trong bảng 3.13, kết quả là: Cú 09 cõu cú mối quan hệ giữa độ khú và độ phõn cỏch là hợp lý do vậy khụng cần điều chỉnh. 02 cõu hỏi cú độ khú trung bỡnh, độ phõn cỏch kộm: mối quan hệ giữa hai đại lượng là cú vấn đề nờn cần xem xột lại cỏc cõu hỏi này: Phõn tớch cõu trắc nghiệm B31. Đỏp ỏn a* b c d Tổng Nhúm cao 5 0 4 0 9 Nhúm thấp 4 0 4 1 9 - a là đỏp ỏn đỳng. - b, c, d là mồi nhử.
- Độ khú của cõu là 0.5, độ phõn cỏch là 0.125. Đõy là cõu hỏi cú độ khú trung bỡnh và độ phõn cỏch kộm.
Từ đỏp ỏn cho thấy :
- Việc chọn đỏp ỏn đỳng a tương quan thuận với tiờu chớ như mong muốn nhưng sự phõn biệt khụng đỏng kể.
- Về đỏp ỏn mồi nhử
+ Cõu b khụng cú học sinh lựa chọn, khụng cú sự phõn biệt giữa hai nhúm. + Cõu c số học sinh của nhúm cao và nhúm thấp lựa chọn bằng nhau nờn khụng cú sự phõn biệt. Đỏng lưu ý là số học sinh của nhúm cao lựa chọn mồi nhử c bằng với cõu đỳng a và bằng với nhúm thấp. Nếu cõu c cũng đỳng, cú thể cho cõu này cú hai lựa chọn đỳng.
+ Cõu c tương quan nghịch với tiờu chớ như mong muốn.
Kết luận : Mồi nhử c cần diễn đạt rừ ràng để trỏnh liểu lầm và mồi nhử d điều chỉnh cho hấp dẫn hơn.
Phõn tớch cõu trắc nghiệm C25 : Đỏp ỏn a b c* d Tổng Nhúm cao 0 1 4 3 8 Nhúm thấp 0 2 3 4 8 - c là đỏp ỏn đỳng. - a, b, d là mồi nhử.
- Độ khú của cõu là 0.48, độ phõn cỏch là 0.125. Đõy là cõu hỏi cú độ khú trung bỡnh và độ phõn cỏch kộm.
Từ đỏp ỏn cho thấy :
- Việc chọn đỏp ỏn đỳng c tương quan thuận với tiờu chớ như mong muốn nhưng sự phõn biệt khụng đỏng kể.
- Về đỏp ỏn mồi nhử
+ Cõu cõu b, d tương quan nghịch với tiờu chớ như mong muốn, riờng cõu a cả nhúm cao và nhúm thấp khụng cú học sinh lựa chọn.
Kết luận : Cần điều chỉnh mồi nhử d cho rừ ràng hơn.
Căn cứ kết quả phõn tớch 02 cõu hỏi cú độ phõn cỏch khụng phự hợp với độ khú, người nghiờn cứu đó tiến hành điều chỉnh cỏc cõu hỏi này theo những yờu cầu đó xỏc định được khi tiến hành phõn tớch ở trờn.
* Nhận xột chung về kết quả phõn tớch cỏc cõu hỏi trắc nghiệm.
- Kết quả phõn tớch độ khú :
Từ kết quả phõn tớch độ khú của cỏc cõu hỏi, cú thể nhận xột như sau:
+ Cỏc cõu hỏi cú nội dung đỏnh giỏ ở cỏc mức độ “Biết”, “Hiểu” cú tỷ lệ học sinh làm đỳng khỏ cao. Đõy là những kiến thức mang tớnh cơ bản của nghề hoặc những kiến thức liờn quan trực tiếp đến quỏ trỡnh thực hành cỏc sản phẩm trong chương trỡnh đào tạo.
+ Đối với cỏc cõu hỏi cú nội dung đỏnh giỏ nhằm mục tiờu “Vận dụng” thỡ tỷ lệ học sinh làm đỳng là khỏ thấp. Những nội dung này yờu cầu học sinh phải tư duy, phõn tớch và liờn hệ với kiến thức đó học, vận dụng vốn kinh nghiệm tớch lũy trong quỏ trỡnh thực hành nghề, quỏ trỡnh lao động.
+ Vỡ cỏc cõu hỏi được biờn soạn dựa trờn những tiờu chớ và tiờu chuẩn thực hiện được xỏc định trong tiờu chuẩn kỹ năng nghề, nờn mức độ khú của cõu hỏi cần phự hợp với mức độ khú của nhiệm vụ học tập mà cõu hỏi đang nhằm đo lường. Do vậy, cỏc cõu hỏi ở mức độ “quỏ dễ” hay “quỏ khú” khụng phải khụng cú giỏ trị, điều cần làm ở đõy là đối chiếu độ khú của cõu hỏi với mức độ khú của nhiệm vụ học tập để xem xột mức độ phự hợp, trờn cơ sở đú mới điều chỉnh nội dung cõu hỏi nếu thấy cần thiết.
+ Cũng từ kết quả phõn tớch độ khú cỏc cõu trắc nghiệm, để nõng cao chất lượng học tập yờu cầu cỏc giỏo viờn cần quan tõm hơn cỏc hoạt động nhận thức của học sinh thụng qua cỏc hoạt động học thực hành. Gắn cỏc nội dung học tập với cỏc cụng vệc nghề nghiệp thực tiễn, tăng cường tổ chức cỏc hoạt động tự học và rốn luyện theo hướng vận dụng kiến thức vào thực hiện những cụng việc cụ thể cú sự kiểm soỏt của giỏo viờn,…
- Kết quả phõn tớch độ phõn cỏch:
+ Theo lý thuyết về phõn tớch cõu trắc nghiệm tiờu chớ, độ phõn cỏch của một cõu trắc nghiệm liờn quan đến độ khú của cõu trắc nghiệm ấy. Cõu hỏi cú mức độ khú càng cao thỡ cú độ phõn cỏch càng rừ ràng. Ngược lại, cõu hỏi cú mức độ khú thấp (cõu dễ hoặc quỏ dễ) thỡ độ phõn cỏch sẽ kộm, thậm chớ khụng cú độ phõn cỏch.
+ Với những cõu hỏi cú phõn cỏch kộm (trừ cỏc cõu cú độ phõn cỏch õm), cần phải đối chiếu độ phõn cỏch với độ khú của chỳng để xem xột mức độ phự hợp của mối quan hệ này. Nếu mối quan hệ giữa hai đại lượng khụng phự hợp thỡ cần phải điều chỉnh lại cõu hỏi.
Tổng hợp kết quả phõn tớch cỏc cõu trắc nghiệm như sau :
- Số cõu hỏi khụng cần chỉnh sửa 196
- Số cõu hỏi cần chỉnh sửa cỏc mồi nhử hoặc cỏch diễn đạt 02 - Số cõu hỏi cần biờn soạn và thử nghiệm lại 12
+ Sau khi điều chỉnh 02 cõu hỏi cú độ phõn cỏch khụng phự hợp với độ khú, tổng số cõu hỏi đó đảm bảo cỏc tiờu chuẩn của trắc nghiệm tiờu chớ là 198 cõu. Cỏc cõu hỏi này sẽ chớnh thức được sử dụng để thành lập ngõn hàng cõu hỏi trắc nghiệm đỏnh giỏ kiến thức cho modul Thực hành trang bị điện.