một bài trắc nghiệm tiêu chuẩn hóa [24],[26]
1.3.5.1. Xây dựng bảng đặc trưng 2 chiều của môn học
Bảng đặc trưng này còn được gọi là ma trận kiến thức đối với môn học.
Bảng 1.4. Ma trận câu hỏi TNKQ đề KT Hóa học 12 (học kỳ I)
Mức độ và nội dung Biết Hiểu Vận dụng Tổng
Este – Lipit Cacbohidrat
Amin – Amino axit – Protein
Polyme và vật liệu polyme
Đại cương về kim loại
Tổng điểm điểm điểm 10 điểm
Có thể quan niệm các con số trong các ô của ma trận là tỷ lệ số câu hỏi trắc nghiệm cần có trong ngân hàng câu hỏi trắc nghiệm hay đề trắc nghiệm. Còn các đề trắc nghiệm để KT một phần kiến thức hoặc KT giữa học kỳ thì tùy theo yêu cầu mà xây dựng các ma trận kiến thức tương ứng.
1.3.5.2. Cá nhân viết câu hỏi
Phân công cho các GV, mỗi người chế tác một số câu trắc nghiệm theo các yêu cầu cụ thể về nội dung và về các mức độ nhận thức đã xác định, tùy theo sở trường của từng người, sao cho tổng số câu hỏi chế tác được sẽ phủ kín ma trận kiến thức. Việc chế tác câu hỏi trắc nghiệm của mỗi cá nhân là một quá trình lao động rất công phu, tỉ mỹ, người chế tác phải đọc đi đọc lại và tu sửa nhiều lần.
1.3.5.3. Trao đổi trong nhóm đồng nghiệp
Kinh nghiệm cho thấy việc trao đổi này rất quan trọng, giúp tác giả phát hiện và sửa chữa được nhiều sai sót mà bản thân không cảm thấy vì những cách suy nghĩ lối mòn của người khác.
1.3.5.4. Duyệt lại câu hỏi
Phải tổ chức đọc duyệt, biên tập và đưa các câu hỏi trắc nghiệm lưu vào các kho dữ liệu trong máy tính. Phải chọn người đọc duyệt là người vừa nắm vững chuyên môn của môn học vừa tương đối thành thạo trong việc chế tác các câu hỏi trắc nghiệm. Khi phát hiện các sai sót về chuyên môn hoặc về quy tắc chế tác câu hỏi trắc nghiệm, người đọc duyệt trao đổi lại với tác giả để tác giả chỉnh sửa. Sau khi chỉnh sửa, sẽ thu được một tập hợp các câu hỏi trắc nghiệm tương đối hoàn chỉnh và lưu trong máy vi tính. Tuy nhiên, đó chưa phải là ngân hàng câu hỏi trắc nghiệm vì chưa được định cỡ.
1.3.5.5. Làm đề trắc nghiệm khách quan và trắc nghiệm thử
Làm các đề TNKQ và tổ chức trắc nghiệm thử trên các nhóm HS, các nhóm này là các mẫu đại diện cho tổng thể đối tuợng thiết kế. Các đề TNKQ thử là các đề tương đối ngắn, cần đảm bảo thời gian đầy đủ cho HS hoàn thành các đề trắc nghiệm. Cần lưu ý thuật ngữ “trắc nghiệm thử” được sử dụng ở đây để chỉ một khâu trung gian trong quá trình xây dựng ngân hàng câu hỏi trắc nghiệm. Trong thực tế, phải tạo tình huống để HS làm thật, vì chỉ khi họ làm thật hết mình thì mới ĐG được các câu hỏi TNKQ.
1.3.5.6. Chấm và phân tích kết quả trắc nghiệm thử
Chấm và phân tích thống kê các kết quả trắc nghiệm thử để định cỗ các câu hỏi TNKQ. Việc sử dụng phân tích thống kê ứng với công nghiệm nào (cổ điển hay hiện đại) để phân tích kết quả và định cỡ câu hỏi TNKQ sẽ được thể hiện ở khâu này. Quá trình phân tích thống kê và định cỡ câu hỏi trắc nghiệm sẽ cho 2 loại kết quả: một là cung cấp các tham số của câu hỏi trắc nghiệm, hai là phát hiện các câu hỏi trắc nghiệm có chất lượng kém.
1.3.5.7. Chỉnh lý các câu hỏi trắc nghiệm khách quan để đưa vào ngân hàng
Xử lý các câu hỏi TNKQ chất lượng kém: hoặc là sửa đổi, tu chỉnh; hoặc là loại bỏ nếu chất lượng quá kém không thể sửa đổi được. Các câu hỏi được tu chỉnh xong lại được đưa vào kho lưu trữ. Qua bước này, ngân hàng câu hỏi TNKQ bước đầu hoàn chỉnh. Việc tổ chức trắc nghiệm thử và tu chỉnh các câu hỏi TNKQ có thể tổ chức rất nhiều lần, qua mỗi lần một số câu hỏi trong ngân hàng câu hỏi TNKQ được tu chỉnh, hoàn thiện và ngân hàng câu hỏi TNKQ được bổ sung. Như vậy, ngân hàng câu hỏi TNKQ không phải là kho lưu trữ chết cứng mà nó như là một sinh vật, có khả năng tăng trưởng theo thời gian.
1.3.5.8. Lập đề thi từ ngân hàng câu hỏi và tổ chức thi
Khi đã yên tâm về số lượng và chất lượng các câu hỏi trong ngân hàng câu hỏi TNKQ, có thể thiết kế các đề trắc nghiệm cho các kỳ thi chính thức. Cấu trúc của một đề TNKQ chính thức phải được thể hiện bằng một ma trận kiến thức đề TNKQ. Cũng như ở khâu phân tích kết quả TNKQ, chính ở khâu thiết kế đề trắc nghiệm này, việc sử dụng loại công nghệ trắc nghiệm sẽ được thể hiện.
Sau khi thiết kế được một đề TNKQ đáp ứng các mục tiêu đo lường, từ một đề có thể dễ dàng sinh ra nhiều phiên bản đề có cùng nội dung nhưng hình thức khác nhau bằng cách hoán đổi các phương án trả lời, nhằm hạn chế HS cóp bài của nhau. Quá trình thiết kế đề trắc nghiệm nói trên cũng cho phép tạo ra các đề TNKQ tương đương chứa các tập hợp câu hỏi TNKQ khác nhau, tức là các đề TNKQ giống nhau về cấu trúc nội dung và về các tham số thống kê.
1.3.5.9. Chấm thi và phân tích kết quả
Sau khi tổ chức thi chính thức, cũng phải tiến hành phân tích kết quả trắc nghiệm như ở kỳ trắc nghiệm thử. Quá trình này nhằm hai mục đích: một là thu các kết quả của kỳ thi (các điểm ĐG năng lực của từng HS), đó là mục tiêu quan trọng của kỳ thi; hai là vì công đoạn thi chính thức cũng đóng vai trò của công đoạn thi thử như trên, phát hiện các câu hỏi TNKQ xấu để tu chỉnh và tiếp tục đưa vào ngân
hàng câu hỏi TNKQ, thậm chí nếu có một vài câu hỏi TNKQ quá xấu thì có thể loại chúng ra khỏi số liệu chấm điểm chính thức.
Một tác dụng hết sức quan trọng của các kỳ thi tiêu chuẩn hóa đại trà là các thông tin thu được qua việc phân tích thống kê toàn bộ bài làm của HS là những số liệu hết sức quý báu để ĐG định lượng về tình hình giáo dục của từng khu vực, từng cộng đồng, từng nhóm thí sinh và ĐG xu thế phát triển chất lượng giáo dục theo thời gian.