3.1. Độ g iá trị
Độ giá trị là khái niệm cho biết mức độ m à một bài trắc nghiệm đo được đúng cái mà nó định đo. Độ giá trị nói đến tính hiệu quà của một bài trắc nghiệm trong việc đạt được những mục đích xác định. Khái niệm giá trị chỉ có ý nghĩa khi ta xác định rõ ta m uốn đo luờng cái gì và với nhóm người nào.
Đề bài trắc nghiệm có giá trị cao, cần phải xác định tỉ mỉ mục tiêu cần đo lường qua bài trẳc nghiệm và bám sát mục tiêu đó trong quá trình xây dựng ngân hàng câu trắc nghiệm cũng như khi tổ chức kì thi.
Có nhiều loại độ giá trị: - Độ giá trị cấu trúc - Độ giá trị nội dung - Độ giá trị tiên đoán - Độ giá trị đồng thời ’ ■■2. Dộ tin cậy
Độ tin cậy được đinh nghĩa như là mức độ chính xác, sự ôn định của phep đo. Trong khoa học thống kê có nhiều phương pháp để đo lường độ tin cậy của roột đề TNKQ tuy nhiên khi đánh giá cần chú ý đến sai số chuẩn, số thí sinh tham gia thi và đặc điểm thống kê của đề TNKQ.
3.3. Môi tương quan giữa độ giá trị và độ tin cậy
- Độ giá trị phản ánh m ức độ mà bài trắc nghiệm đo được cái mà nó định có, còn độ tin cậy phản ánh sự chính xác của phép đo.
- Độ giá trị liên quan đến mục đích của phép đo, còn độ tin cậy liên quan đên sự vững chãi của điểm số.
- Bài ứắc nghiệm có độ giá trị thì phải có độ tin cậy, song 1 bài trăc nghiệm có độ tin cậy cao chưa hẳn có độ giá trị cao.
- Phân tích bài ừấc nghiệm thuờng hay để độ tin cậy lên hàng đâu.
4. Qui trình th iết kế bài trắc nghiệm
B ước 1. X á c định mục đích, yêu cầu
M ỗi thời điểm tiến hành đánh giá có mục đích riêng. Thí dụ:
o Đ ánh giá “k h ở is ự " (Placem ent Evaluation) o Đ ánh giá theo tiến trình (Formative Evaluation) ° Đ ánh giá chẩn đoán (D iagnostic Evaluation) o Đ anh giá tổng kết (Sum m ative Evaluation)
Cân phải xác định rõ mục đích đánh giá để có được các đề kiểm tra có giá ữ ị. M ục
Đ ộ tin cậy thấp
(Ã)
G iá trị cao Độ tin cậ y ca o
(B)
Đ ộ tin cậy cao nhưng giá trị thấp
đích đánh giá là cơ sở để quyết định phương pháp hay hình thức đánh giá phù hợp.
Bước 2. Phân tích nội dung, xác định tiêu chuân, tiêu chí đánh giá
•> Những nội dung chỉ cần tái hiện hay tái nhận ❖ Những nội dung cần giải thích, cần minh hoạ
❖ Những ý tường phức tạp cần được phân tích, giải thích, áp dụng. Phân tích nội dung là cơ sở cho việc thiết lập ma trân kiến thức
Bước 3. Thiết lập ma trận hai chiều
Thiết lập ma trận hai chiều (bảng đặc trưng): gồm hai chiều, một chiều ghi tên chủ đề (nội dung), m ột chiều ghi các mức độ nhận thức cần đạt được.
Nội dung
Các mức độ đánh giá
Tổng
Nhận biêt Thông hiêu Vận dụng
TNKQ TL TNKQ TL TNKQ TL (adsbygoogle = window.adsbygoogle || []).push({});
ND1 ND2
Tông
Q ui trình thiết lập m a trận:
(1) Xác định tỉ lệ thời gian HS làm bài tự luận, TNKQ
(2) Xác định tổng số câu hỏi mỗi dạng (mỗi câu TNKQ cần khoảng tò 1,5 đến 2 phút để đọc và trà lời; mỗi câu hỏi TL cần khoảng 10 phút để suy nghĩ và trình bày lời giải).
(3) Xác định tổng số câu hỏi cho từng mục tiêu của đề
- X ác định số câu hỏi cho từng nội dung căn cứ vào mức độ quan trọng của nội dune đó tron2 chươna trình.
- X ác định số câu hỏi cho từng mức độ nhận thức, thông thường: Nhận biết 40%, Thông hiểu 35% , Vận dụng 25% trong tổng số câu hỏi phần TNKQ.
(4) X ác định số câu hòi trong từng ô của m a trận dựa trên bảng mục tiêu đã xây dựng bước trên.
(Các tỉ lệ trên có thể thay đổi nhàm thích hợp với từng m ôn học)
B ước 4. Thiết k ế câu hòi theo ma trận
- M ức độ khó và nội dung của câu hỏi được xây dựng dựa trên hệ thống mục tiêu đã xác định ở bước 2 và ma trận đã thiết kế ở bước 3.
- Vì hình thức TNKQ có nhiều dạng câu hỏi, căn cứ vào xác suất đoán mò của mỗi dạng mà ti lệ hợp lí nên là: 60% câu nhiều lưa chon: 20% câu ghép dôi: 10% £âu_điền thế vả 10% câu đủng/sai (tính theo tổng số câu TNKO~).
Bước 5. X ây dựng đáp án và biểu điểm a) B iểu điểm với hình thức TNKQ: có hai cách
- Cách 1 : Đ iểm tối đa toàn bài là 10 được chia đều cho số lượng câu hỏi toàn bài
- Cách 2: Điểm tối đa toàn bài bằng số lượng câu hỏi Y (nếu ứ ả lời đúng được 1 điểm, trả lời sai được 0 điểm). Qui về thang điểm 10 theo công thức:
X là số điểm đạt được của HS, Y là tông số điểm tối đa của đề.
b) Biêu điêm với hình thức kết hợp cà tự luận và TNKQ
Điem tôi đa toàn bài là 10. Sự phân phối điểm cho từng phần (trắc nghiệm khach quan, tự luận) tuân theo nguyên tắc:
+ Ti lệ thuận với thời gian dự định HS hoàn thành từng phần (được xây dựng khi thiết kế ma trận)
+ M ôi câu trăc nghiệm khách quan nếu trả lời đúng đều có số điểm như nhau.
Ví dụ: N êu ma trận thiết kế dành 60% thời gian cho tự luận, 40% thời gian cho trăc nghiêm khách quan thì điểm tối đa cho các câu hỏi tự luận là 6, các câu trăc nghiệm khách quan là 4. Và giả sử có 16 câu trắc nghiệm khách quan thì moi câu trà lờ i đ ú n g được 0.25 điểm.
B ước 6. D uyệt lại đề kiểm tra
C ần có sự góp ý của các chuyên gia về môn học để hoàn thiện câu trắc nghiệm.
- M ục đích: góp ý nhàm phát hiện ra những câu chưa đảm bảo yêu cầu về m ặt kiến thức; xem xét sự chính xác của thuật ngữ, của các mệnh đề của các câu.
Bước 7. Tiến hành kiểm tra.
Câu hỏi hướng dẫn ôn tập
1. Phân tích các cách tiếp cận để xây dựng một trắc nghiệm. Hãy lấy ví dụ về mục đích của m ột bài trắc nghiệm mà em cho là chúng làm theo cách tiếp cận theo chuân hoặc theo tiếp cận tiêu chí
2. Tại sao khi thiết kế một bài trắc nghiệm cần phải lập bàng ma trận kiến thức? Khi xác định trọng số cho bảng ma trận kiến thức cần căn cứ vào những cơ sở nào?
3. Thế nào là độ khó và độ phân biệt của một câu trắc nghiệm ? Nêu cách tính độ khó và độ phân biệt thông dụng nhất của một câu trấc nghiêm. (adsbygoogle = window.adsbygoogle || []).push({});
4. Bản chất của độ giá trị và độ tin cậy của bài trắc nghiệm. M ối quan hệ giữa độ giá trị và độ tin cậy.
5. Xây dựng một bảng đặc trưng cho bài trắc nghiệm kết quả học tập định kì một môn học nào đó.
6. M ột câu trắc nghiệm khách quan loại nhiều lựa chọn (nằm trong bài trắc nghiệm theo chuẩn) sau khi thử nghiệm đã thu được thông số sau:
Phương án A B c * D N hóm cao 12 0 20 8 N hóm thấp 18 0 12 10 (C* là phương án đúng)
Hãy phân tích các chi số của câu trắc nghiệm này và rút ra kết luận cần thiết. 7. M ột câu trắc nghiệm khách quan loại nhiều lựa chọn (nằm trong bài trắc nghiệm theo tiêu chí) sau khi thử nghiệm đã thu được thông số như sau:
Phương án A B* c D N hóm cao 18 15 6 1 N hóm thấp 20 10 8 2 (B* là phương án đúng)
Hãy phân tích các chì số của câu trắc nghiệm này và rút ra kết luận cần thiết. 8. Hãy tính độ tin cậy của một bài trắc nghiệm. Cho biết bài trắc nghiệm gồm 50 câu hỏi, giá trị trung bình của bài trắc nghiệm là 30, độ lệch chuẩn là 60.
9. M ột bài trắc nghiệm bao gồm 50 câu trắc nghiệm khách quan loại câu có 4 lựa chọn, giá trị trung bình của bài trắc nghiệm là 36.
- Hãy tính độ khó của bài trấc nghiệm.
- N hận xét chỉ số về độ khó của bài trắc nghiệm.
10. D ựa trên Chương trình và Phân p h ố i Chương trình, hãy thiết kế số lượng và xác định tỉ lệ các KT - KN cần kiếm tra và đánh giá từng m ôn học theo định kì cho 1 lớp ờ tiểu học.
11. Thiết kế m ột bộ đề TNKQ theo SOLO cho 2 môn Toán và Tiếng Việt kì Kiểm tra - Đánh giá cuối năm hai lớp 3 và 5.
TÀI LIỆU THAM KHẢO
1. PGS.TS. Phó Đức Hoà, Th.s. Chu Thị Hằng, Th.s. N guyễn Huyền Trang (2008). L í thuyết trắc nghiệm khách quan và thiết kế bài tập trắc nghiệm ở tiểu học.
NXB Qiáo (Jục, H à Nội.
2. Trần Thị Tuyết Oanh (2009). Đánh giá và đo lường kết quả học tập. NXB Đại học Sư phạm, Hà Nội.
3- GS.TSKH. Lâm Quang Thiệp. Đo lường và đánh giá kết quà học tập trong nhà trường
4. PGS.TS. Phó Đức H oà (2008). Đánh giả trong giáo dục tiếu học. NXB Đại học Sư phạm