[r]
(1)Đánh giá câu hỏi
(2)I- Đánh giá câu hỏi đề Trắc nghiệm, xây dựng quỹ câu hỏi
Chất l ợng câu hỏi trắc nghiệm đ ợc đánh giá thông qua loại đại l ợng sau:
1/ Độ khó (hoặc Độ dễ) :
Tỷ lệ thí sinh trả lời cho ta số đo gần độ khó (độ dễ) câu hỏi.
Cơng thức để tính độ khó (độ dễ) : Số thí sinh làm đúng
(3)Thang độ khó (độ dễ)
Thang phân loại Độ khó ( độ dễ ) qui ớc nh sau :
(4)*Nên dùng câu trắc nghiệm có FV nằm khoảng :
25% < FV < 75%
*Ngoµi khoảng, dùng cách chọn lọc tuỳ theo mục tiêu trắc nghiệm:
-Nu tuyn sinh, nên thêm số câu có FV > 75%
(5)2/ Độ phân biƯt :
Phân bố tỷ lệ thí sinh trả lời sai
các thí sinh thuộc nhóm khá, nhóm trung bình nhóm cho ta số đo t ơng đối Độ phân biệt câu hỏi
Cơng thức để tính Độ phân biệt:
Số thí sinh làm - số thí sinh yu lm ỳng
(6)Thang phân loại §é ph©n biƯt quy íc nh sau:
- Tỷ lệ thí sinh nhóm nhóm trả lời nh thì Độ phân biệt Khơng
- Tỷ lệ thí sinh nhóm trả lời khơng nhiều nhóm Độ phân biệt Âm
- Tỷ lệ thí sinh nhóm trả lời nhiều nhóm thì Độ phân biệt D ơng.
(7)3/ Phân tích câu trắc nghiƯm
Giả sử phân tích câu trắc nghiệm thứ X thi có câu b/ là câu Các câu a/, c/, d/, e/ f/ câu nhiễu.
KÕt qu¶ thi cđa 150 thÝ sinh đ ợc trình bầy bảng sau :
Câu trả lời a/ b/* c/ d/ e/ f/ Tæng
Nhãm kh¸ 22 13 50 Nhãm TB 15 20 50 Nhãm kÐm 23 50
(8)II- Phân tích trắc nghiệm :
(9)Thí dụ: Bảng thông kê kết thi
sinh viên sinh viên TB sinh viên đúng stt A B C D E F H I J K L M N O P Q R S T U V X Y W Z ts%(FV) _ 1 1 1 1 1 1 1 1 1 18/72% 0 1 1 1 1 1 1 1 1 1 1 1 23/92% 0 0 0 0 0 1 1 1 1 1 1 1 14/56% 1 1 1 1 1 1 0 1 16/64% 1 0 1 0 1 1 0 0 1 12/48% 1 1 0 0 0 1 1 1 1 15/60% 0 1 1 1 0 1 1 0 0 1 13/52% 0 1 0 0 1 1 0 1 1 13/52% 0 0 0 0 0 1 1 1 1 1 1 1 14/56% 10 0 0 0 1 0 0 1 1 1 1 12/48% 11 0 0 0 1 0 1 1 1 1 13/52% 12 0 0 0 1 1 1 0 1 1 12/48% 13 0 0 0 0 1 1 1 1 1 1 13/52% 14 0 0 0 0 1 1 1 1 1 1 14/56% 15 0 0 1 0 1 0 1 1 1 12/48% 16 0 0 0 0 1 1 1 1 1 12/48% 17 0 0 0 0 1 1 0 1 1 1 12/48% 18 0 0 0 1 0 1 1 1 1 1 13/52% 19 0 0 0 0 1 1 1 1 11/44% 20 0 0 0 1 0 1 1 1 1 1 14/56% 21 0 0 0 1 1 0 1 1 1 1 1 15/60% 22 0 0 0 1 1 0 1 1 1 1 13/52% 23 0 0 0 1 1 0 1 1 1 1 12/48% 24 0 0 0 1 0 0 1 1 1 1 12/48% 25 0 0 0 0 0 0 0 0 0 1 0 1 05/20% _ ts 8 10 11 12 13 13 14 15 15 15 15 17 17 17 19 20 23 23 25
% 8% 24% 32% 52% 60% 68% 76% 92% 100%(DI)
(10)
a/ §é tin cậy trắc nghiệm:
H s t ng quan tỷ lệ trả lời đúng/ sai lần trắc nghiệm đề trắc nghiệm t ơng đ ơng Độ tin cậy trắc nghiệm
HƯ sè t ¬ng quan đ ợc tính công thức sau:
x y
x y - -
N
R = -
( x)2
(11)T ¬ng quan cặp hai tập số liệu A B (NA=NB) (t ơng quan thứ hạng) (Rank-Difference Correlation, t ¬ng quan Spearman rho):
d2
HÖ số t ơng quan cặp : rp = - - N(N2 - 1)
(12)Z X Y X
2 Y2 XxY t.h¹ng
X t.h¹ng
Y d t.h¹ng d 2 t.h¹ng
A 30 25 900 625 750 4 6 -2 4
B 34 38 1156 1444 1292 2 2 0 0
C 32 30 1024 900 960 3 4 -1 1
D 47 40 2209 1600 1880 1 1 0 0
E 20 7 400 49 140 9 10 -1 1
F 24 10 576 100 240 7 9 -2 4
G 27 22 729 484 594 5 7 -2 4
H 25 35 625 1225 875 6 3 3 9
(13)- HÖ sè t ¬ng quan spearson: 753 , , 683 , 1254 , 697 ] 10 277 8356 ].[ 10 247 7355 [ 10 277 247 7539
2
sp r
- HƯ sè t ¬ng quan Spearman:
782 , 218 , 990 216 ) 100 ( 10 36 rho
r
(14)
* Số đo độ tin cậy:
- Tr ờng hợp xác định độ tin cậy trắc nghiệm lần (test - retest):
Sử dụng hệ số t ơng quan tính theo cơng thức tính r hay rp, để đánh giá độ tin cậy lần trắc nghiệm cùng đề cho N thí sinh dự thi.
(15)b Độ giá trị trắc nghiệm
L s o mc mà trắc nghiệm đo đ ợc mục đích mà định đo, độ giá trị trắc nghiệm.
Căn vào mục tiêu trắc nghiệm, chia độ giá trị trắc nghiệm thành 3 loại chính:
- Độ giá trị nội dung: phản ánh mức độ trắc nghiệm có trắc nghiệm đ ợc mục tiêu, đủ nội dung môn học đề không.
- Độ giá trị tiêu chí: phản ánh mức độ trắc nghiệm đo đợc theo tiêu chí định sẵn (tiêu chí chuẩn đốn, tiêu chí tuyển chọn)
(16)