Quy trình và kỹ thuật, thiết kế, câu hỏi thi trắc nghiệm, khách quan
Quy trình kỹ thuật thiết kế câu hỏi thi trắc nghiệm khách quan Câu hỏi thi trắc nghiệm khách quan có nhiều dạng câu hỏi: sai, điền khuyết, ghép hợp, đa lựa chọn trắc nghiệm đa lựa chọn sử dụng nhiều nhất, đòi hỏi kỹ thuật thiết kế phức tạp Loại câu hỏi: – sai: Là loại câu hỏi đưa phát biểu để học sinh đánh giá hay sai, dạng câu hỏi để trả lời có hay không Loại câu – sai thích hợp để gợi nhớ lại kiến thức với khối lượng kiến thức đáng kể khoảng thời gian nhanh chóng Tuy nhiên câu dẫn loại câu hỏi phải hoàn toàn rõ ràng để trả lời dứt khoát có hay không Điều tạo khó khăn áp dụng loại câu hỏi để kiểm tra trình độ hiểu biết cao Nó không tạo cho học sinh phân biệt sắc thái khác ý nghĩa Câu hỏi sai có hạn chế xác xuất đoán mò cao (50%) Ví dụ câu – sai: Khoanh tròn vào chữ Đ câu phát biểu cho đúng, vào chữ S câu sai: Hydrogen Sulphit Là chất khí nhiệt độ phòng Đ S Có mầu tím sẫm Đ S Cháy tự không khí Đ S Tạo thành dung dịch Bazơ nước Đ S Loại câu hỏi điền khuyết(điền vào chỗ trống): Loại câu đòi hỏi học sinh cung cấp câu trả lời hay từ cho câu hỏi trực tiếp hay câu nhận định chưa đầy đủ Ưu điểm loại câu khó tạo điều kiện để học sinh đoán mò học sinh phải nhớ lại nghĩ câu trả lời Tuy nhiên loại câu điền khó xây dựng cho rõ ràng Có thể có nhiều câu trả lời có giá trị để điền vào chỗ trống Điều gây khó khăn cho khâu chấm điểm Ví dụ câu điền vào chỗ trống: Tên dụng cụ dùng để đo nhiệt độ gì? …………… Con nhím biển thuộc loài …………… Loại câu hỏi ghép hợp hay ghép đôi Loại câu thường có hai dãy thông tin gọi câu dẫn câu đáp Chúng cần ghép lại với theo kiểu tương ứng – Hai dãy thông tin không nên có số câu cặp ghép cuối không đơn giản kết loại trừ liên tiếp Loại câu dễ viết dễ dùng Tuy nhiên soạn câu đo mức độ kiến thức cao đòi hỏi phải nhiều công phu Nếu có nhiều thông tin cột người làm test phải nhiều thời gian đọc lựa chọn tìm câu ghép đôi Bài trắc nghiệm khách quan với câu hỏi có nhiều phương án lựa chọn: hình thức đánh giá linh hoạt sử dụng để đánh giá kiến thức, kỹ năng, khả cấp độ tư học sinh… Thông thường, test dạng thường bao gồm số câu hỏi yêu cầu học sinh phải lựa chọn đáp án từ phương án cho câu hỏi có phương án nhất, phương án lại phương án sai/ phương án nhiễu Bài kiểm tra, thi với câu hỏi có nhiều phương án lựa chọn sử dụng với nhiều mục đích giáo dục khác nhau, chúng sử dụng thường xuyên lớp học để đánh giá thành tích học tập xếp loại học sinh Các mục đích khác dạng cung cấp thông tin phản hồi sức học, thành tích học tập tới học sinh, thông tin phản hồi giảng dạy tới giáo viên, chẩn đoán nhận thức sai lệch học sinh số vấn đề khác Mô tả dạng câu hỏi có nhiều phương án lựa chọn Một test có nhiều lựa chọn thường cấu thành nên từ câu hỏi (item) có nhiều lựa chọn bao gồm phần (gồm câu dẫn thường câu hỏi tình có vấn đề cần giải vàcác phương án trả lời Đôi phần, phần thức ba biểu đồ bảng số liệu, hình vẽ, tranh chứa thông tin liên quan đến câu dẫn, phương án trả lời VD 1: An cao Bình, Long cao Nam, Toàn cao Huệ, Toàn thấp Bình Long thấp Huệ thứ tự từ cao đến thấp là? A- An, Bình, Long, Nam, Toàn, Huệ B- Huệ, Long, Nam, An, Bình, Toàn C- An, Long, Nam,Bình, Toàn, Huệ D- An, Bình, Toàn, Huệ, Long, Nam VD 2: “Máy xe tình trạng xấu không đáng để sửa chữa nó” Câu có khả gần thật nhất? A- Tiền công sửa chữa máy cũ đắt tiền mua máy B- Dù cố gắng sửa phụ tùng thay C- Sửa máy cũ không làm tăng giá trị xe D- Chiếc xe giá trị VD 3: Cách tốt để phát thân giới xung quanh là: ABCD- Luôn tích cực có tinh thần trách nhiệm công việc giao Thường xuyên trò chuyện với người hiểu biết Tích cực hoạt động cố gắng thử sức qua nhiều tình thực tiễn Tìm đọc thật nhiều sách báo tạp chí Câu dẫn câu hỏi (item) có nhiều phương án lựa chọn thường câu hỏi hay tình sơ đồ, biểu đồ,yêu cầu học sinh phải thực nhiệm vụ Câu dẫn đặt câu hỏi, đưa vấn đề yêu cầu học sinh giải Các phương án lựa chọn mà từ học sinh chọn đáp án Có hai dạng phương án: “phương án đúng”/”đáp án” phương án lựa chọn xác tốt nhất/đúng nhất/phù hợp ; “phương án nhiễu” lựa chọn sai, thiếu xác gần Những tranh cãi dạng câu hỏi có nhiều phương án lựa chọn Nhiều người cho câu hỏi có nhiều phương án lựa chọn câu hỏi khách quan Tuy nhiên chúng “chủ quan” giống câu hỏi tự luận viết cách cẩu thả, chất lượng Thực câu hỏi tự luận có chất lượng hướng dẫn cách chấm điểm chi tiết khách quan số câu hỏi có nhiều phương án lựa chọn Tính chất chủ quan/khách quan không nằm dạng câu hỏi mà phụ thuộc nhiều vào cách viết câu hỏi cách chấm điểm học sinh, phải có kế hoạch đưa tính khách quan vào câu hỏi có nhiều phương án lựa chọn trước bắt tay vào viết câu hỏi (Dwyer, 1993) Một số người khác cho câu hỏi có nhiều phương án lựa chọn đánh giá kiến thức bề (VD: nhận biết, thông hiểu) Điều giáo viên chưa hiểu chưa có kỹ viết câu hỏi có chất lượng Các trắc nghiệm đánh giá trí tuệ (IQ, CQ, EQ…) nhà tâm lý học viết thường dùng câu hỏi có nhiều phương án lựa chọn Các nghiên cứu thành viên có trình độ cao đẳng, họ không viết câu hỏi có chất lượng (Guthrie, 1992; Lederhouse Lower, 1974; Mc Dougall, 1997), phần lớn câu hỏi có nhiều phương án lựa chọn họ biên soạn tập trung kiểm tra học sinh cấp độ ghi nhớ thông hiểu (Crooks, 1988: Shifflett.Phibbs & Sage 1997) Một số người khác cho câu hỏi có nhiều phương án lựa chọn sử dụng cho việc xếp loại Ý kiến xuất phát từ hiểu lầm cho đánh giá giảng dạy hai giai đoạn riêng biệt trình học tập Thực chất, giảng dạy mà đánh giá, quan trọng hơn, hai hoạt động yếu tố giúp cho việc học diễn Đa số giáo viên: “Đã tập trung nhiều vào chức xếp loại đánh giá, bỏ qua vai trò đánh giá giúp đỡ học sinh học tập” Có nhiều cách để thiết kế sử dụng câu hỏi có nhiều phương án lựa chọn với mục đích khuyến khích tinh lọc việc học, cung cấp thông tin giảng dạy xếp loại, phân lớp học sinh Quy trình thiết kế câu hỏi thi trắc nghiệm khách quan (có nhiều phương án lựa chọn) Trong đánh giá kiến thức, kỹ năng, giáo viên nên định hướng mục đích vào việc tìm nội dung học sinh nắm vững, nội dung học sinh mơ hồ mức độ nhận thức chúng đến đâu Điểm số kiểm tra học sinh cần phản ánh rõ điều Như bản, nguyên tắc việc biên soạn test có câu hỏi với nhiều phương án lựa chọn hoạt động theo hai cách: tối đa hoá khả học sinh việc thể chúng biết nội dung tối thiểu hoá khả ảnh hưởng nhân tố bên tới điểm số kiểm tra Cần hạn chế tối đa nhân tố ảnh hưởng tới khả tư học sinh câu hỏi dài, trúc trắc khó đọc, tình vòng vo gây mệt mỏi đọc Trong câu hỏi trắc nghiệm, cần loại bỏ câu hỏi “đoán mò” “đánh lừa” Dưới quy trình thiết kế trắc nghiệm khách quan có nhiều phương án lựa chọn: Bước Lập bảng ma trận nội dung chi tiết cho test Một vấn đề quan trọng giai đoạn việc tạo phù hợp nội dung giảng dạy chuẩn chương trình, nội dung kiểm tra nội dung giảng dạy để đảm bảo chương trình giảng dạy nội dung giảng dạy đánh giá Điều vấn đề công phù hợp dạy học đánh giá kết học tập học sinh Có nhiều ý kiến phàn nàn việc kiểm tra đánh giá xuất phát từ thiếu cân đối hai vấn đề Chẳng hạn học sinh phàn nàn chúng em không hiểu kiểm tra yêu cầu điều gì, điều chưa nhắc đến lớp học Một mô tả chi tiết các nội dung cần kiểm tra công cụ hữu ích cho thiết kế test hoạt động giảng dạy Một bảng ma trận chi tiết (Gronlund Linn, 1990) mô tả chi tiết nội dung, yêu cầu kiến thức, kỹ năng, cấp độ đánh giá Bảng thường bắt đầu với cột chứa đựng phạm vi nội dung kiểm tra liệt kê theo chủ đề, theo chương trình cách phân chia khác Một cột khác phân loại cách mà bạn muốn học sinh thể chứng tỏ chúng hiểu biết nội dung Cách phân loại cách truyền thống thang Bloom [4 cấp độ tư duy: nhận biết; thông hiểu; vận dụng; đánh giá) theo cách phân loại riêng bạn Cuối cùng, ô bảng có phân định tỷ trọng tương ứng với nội dung cách thể hiểu biết học sinh ứng với nội dung Ví dụ bảng ma trận chi tiết kiểm tra khoá học mở đầu môn vật lý (tổng điểm 50) Ví dụ cho thấy tỉ lệ % điểm số cho chủ đề cấp độ tư Có tổng cộng 50 câu hỏi kiểm tra Cấp độ tư Chủ đề Nhận biết Thông hiểu Vận dụng: mức độ thấp Vận dụng: mức độ cao Tổng cộng Công 2/50 = 4% 1/50 = 2% 0/50 = 0% 1/50 = 2% 4/50 = 8% Năng lượng Thế Động Cơ Điện Tổng cộng 2/50 = 4% 3/50 = 6% 5/50 = 10% 2/50 = 4% 12/50 = 24% 2/50 = 4% 2/50 = 4% 2/50 = 4% 0/50 = 0% 6/50 = 12% 1/50 = 2% 2/50 = 4% 1/50 = 2% 1/50 = 2% 5/50 = 10% 1/50 = 2% 10/50 = 20% 5/50 = 10% 2/50 = 4% 18/50 = 36% 2/50 = 2% 1/50 = 2% 2/50 = 4% 0/50 = 0% 5/50 = 10% 15/50 = 30% 6/50 = 12% Tổng điểm=50 10/50 = 20% 19/50 = 38% Một xây dựng bảng ma trận kiểm tra chi tiết, bạn sử dụng để lập kế hoạch cho việc giảng dạy biên soạn câu hỏi kiểm tra Sở dĩ bảng ma trận chi tiết có ích việc lập kế hoạch giảng dạy ghi lại tất nội dung mà bạn thấy quan trọng cách thức mà bạn mong muốn học sinh thể hiểu biết chúng nội dung Đồng thời cung cấp định liên quan tới kế hoạch giảng dạy bạn Còn mục đích khác tạo phù hợp giảng dạy, kiểm tra kết học tập, nội dung nhấn mạnh giảng dạy nhấn mạnh đánh giá Do đó, mô tả chi tiết cách thức hiệu để thống giảng dạy đánh giá (Nitko, 2001) Bước 2: Viết câu hỏi Vấn đề đáng quan tâm bước giáo viên tự viết câu hỏi hay sử dụng câu hỏi có sẵn ngân hàng câu hỏi kèm với sách giáo khoa Giáo viên gặp phải số rủi ro sử dụng ngân hàng câu hỏi xuất rộng rãi Trước hết, khác biệt bảng ma trận kiểm tra chi tiết giáo viên ngân hàng câu hỏi Giáo viên cần phải đảm bảo nội dung cần nhấn mạnh kiểm tra giữ nguyên Thứ hai, chắn câu hỏi ngân hàng câu hỏi thử nghiệm câu hỏi đúng, có chất lượng cao, phù hợp với học sinh Vì nên hạn chế phải xem xét kỹ lưỡng sử dụng câu hỏi ngân hàng câu hỏi a) Các nguyên tắc chung việc đề thi trắc nghiệm khách quan: • Xác định tổng số câu hỏi mà bạn muốn viết Vấn đề cần quan tâm là: phạm vi kiến thức mà bạn muốn đánh giá qua test, mức độ đánh giá, mức độ phức tạp câu hỏi thời gian làm kiểm tra Thường phút câu hỏi nhiều phút câu hỏi phức tạp (Gronlund, 1988, Oosterhof, 2001) • Sử dụng bảng ma trận kiểm tra chi tiết để xác định số lượng câu hỏi bạn cần viết ô • Tránh đưa câu hỏi có nội dung chung chung chi tiết Điều này, khía cạnh đó, phụ thuộc vào chuẩn kiến thức, kỹ không nên hỏi vấn đề rộng lớn vụn vặt • Đảm bảo câu hỏi kiển tra khái niệm/vấn đề Nếu câu hỏi kiểm tra hai nhiều khái niệm, bạn học sinh thực hiểu khái niệm chúng đưa đáp án • Quyết định xem câu hỏi bao quát hết phạm vi kiến thức kỹ cốt lõi cần đánh giá b) Các nguyên tắc viết câu dẫn cho câu hỏi có nhiều phương án lựa chọn: • Đưa “ý chính” câu hỏi vào câu dẫn, không nên đưa vào phương án lựa chọn • Sắp xếp câu dẫn hợp lý để tránh ngôn ngữ/cách diễn đạt lạ, không hợp lý cố gắng để đưa nhiều ý chủ đề vào câu dẫn đưa phương án lựa chọn ngắn gọn • Tránh từ ngữ mang tính chất phủ định “ngoại trừ”, “không” Nếu sử dụng từ ngữ này, bạn phải làm bật chúng cách in nghiêng, in đậm gạch chân Đánh dấu từ ngữ quan trọng “không”, “chỉ có”, “ngoại trừ” sử dụng chúng câu hỏi c) Nguyên tắc viết phương án lựa chọn cho câu hỏi có nhiều lựa chọn: • Câu hỏi khách quan đa lựa chọn có từ 3-5 phương án,thông thường nên có bốn phương án lựa chọn có phương án đúng/đúng Các phương án sai/ nhiễu phương án gần lỗi thường gặp học sinh Tuy nhiên ba phương án lựa chọn có chất lượng cho câu hỏi tốt bốn phương án có phương án nhiễu chất lượng (học sinh dễ nhận ra) • Các phương án lựa chọn nên có độ dài tương xứng Một phương án dài ngắn cách thái thu hút ý học sinh chúng bật dễ dàng nhận thấy • Các phương án lựa chọn phải phù hợp với câu dẫn mặt ngữ pháp • Tránh đưa phương án lựa chọn chồng chéo, có trùng lặp, nối tiếp với VD: Câu hỏi có chất lượng kém: Ở khoảng nhiệt độ nào, nước chất lỏng? a) 50 b) 50 100 c) -50 d) 100 150 (Lưu ý: phương án avà b có 0; phương án a c đềucó 100) Câu hỏi viết lại có chất lượng tốt hơn: Ở khoảng nhiệt độ nước chất lỏng? a) 50 b) 51 99 c) -50 d) 100 150 • Tránh đưa phương án “tất phương án đúng” - Nguyên tắc viết phương án lựa chọn câu hỏi có nhiều lựa chọn: “bí kíp” viết phương án đúng/đáp án • Đảm bảo đáp án viết dựa vào chủ đề/đoạn văn /hoặc phù hợp/nhất trí nội dung kiểm tra (những kiến thức, kỹ bản, cốt lõi giảng dạy lớp học cần đánh giá) • Tránh câu hỏi “gợi ý” “kết nối”, đáp án câu tìm thấy phụ thuộc vào câu khác Vấn đề thường gặp tập hợp câu hỏi để tạo thành test hoàn chỉnh bạn viết câu hỏi cho vài lớp học - Nguyên tắc viết phương án lựa chọn cho câu hỏi có nhiều lựa chọn: “bí kíp” viết phương án nhiễu • Phương án nhiễu đưa nhằm “thu hút” học sinh không hoàn toàn nắm vững nội dung/kiến thức Đây “thủ đoạn” hay “đánh lừa” “không công bằng” Nó xuất phát từ “tiền đề’ mục tiêu kiểm tra đánh giá tìm học sinh hiểu học sinh không hiểu Học sinh học nắm vững kiến thức chọn đáp án ngược lại học sinh không học, không hiểu không chọn đáp án • Tất phương án nhiễu phải có tính hợp lý Đó thường hiểu lầm sai sót học sinh thường mắc Sử dụng kiến thức, hiểu biết giáo viên lỗi thông thường mà học sinh hay mắc phải để viết phương án nhiễu cách làm khôn ngoan Ví dụ, giáo viên biết rằng, học sinh thường bỏ qua bước nhầm lẫn trình tính toán đó, đưa phương án nhiễu kết thiếu sót/ nhầm lẫn Cũng có nhiều nghiên cứu đưa dẫn chứng nhận thức sai thông thường khái niệm khoa học Bạn đưa nhận thức sai vào phương án nhiễu (Sadler, 1998) Bước Xây dựng trắc nghiệm khách quan: Dưới hướng dẫn giúp xây dựng, hoàn chỉnh kiểm tra trắc nghiệm khách quan: • Đưa hướng dẫn rõ ràng Nếu bạn sử dụng nhiều dạng câu hỏi khách quan, viết hướng dẫn riêng cho dạng câu hỏi • Sắp xếp câu hỏi theo nội dung, dạng câu hỏi, sau tăng dần mức độ khó (Gronlund, 1998) Quy luật đưa dựa nguyên tắc xử lý thông tin Sẽ dễ dàng cho học sinh chúng trả lời tất câu hỏi nội dung trước chuyển sang nội dung khác Học sinh thực nhiệm vụ trí óc tương tự với câu hỏi tương tự trước chuyển sang nhiệm vụ dạng câu hỏi khác Cuối cùng, xếp câu dễ trước câu khó để học sinh đạt số điểm định, có thêm tự tin làm test • Đảm bảo học sinh sử dụng hiểu biết, hạn chế tối đa “đoán mò” làm kiểm tra Nếu trắc nghiệm có nhiều câu, đa số học sinh phải đoán mò, lúc điểm số chúng không phản ánh điều chúng biết mà khả đoán mò, kỹ làm kiểm tra • Không tập hợp nhiều câu hỏi trang • Tránh sử dụng hai mặt giấy học sinh bỏ qua trang sau • Viết dòng hướng dẫn ngắn gọn, rõ ràng, dễ hiểu Bước Chấm điểm: Bạn sử dụng mẫu ghi chép đầy đủ (a full-credit model) để ghi lại tất câu trả lời sai học sinh Bạn sử dụng mẫu ghi chép không đầy đủ (a partial credit model) để ghi lại toàn đáp án học sinh số phương án nhiễu mà học sinh chọn Biến đổi linh hoạt dạng câu hỏi có nhiều phương án lựa chọn Đây thực điểm mạnh câu hỏi có nhiều lựa chọn Một số biến đổi hữu ích khiến câu hỏi đa lựa chọn trở thành dạng câu hỏi vô linh hoạt VD: Sự đa dạng đáp án đúng: - Đáp án rõ ràng phương án nhiễu rõ ràng sai - Đáp án lựa chọn tốt nhất/ gần nhất, phương án nhiễu, “gần đúng” VD: liên kết chuỗi câu hỏi từ liệu “tạo nguồn” Chẳng hạn, sử dụng đoạn văn/ câu chuyện, đồ thị/ bảng biểu thống kê…rồi đưa liên tiếp câu hỏi có nhiều phương án lựa chọn Dạng đặc biệt có tác dụng việc kiểm tra số kỹ tư khác Xử lý phân tích câu hỏi trắc nghiệm đa lựa chọn Về có hai phân tích tiến hành câu hỏi có nhiều lựa chọn: - Dạng phân tích thứ phân tích hình thức chấm điểm-liên quan tới việc chấm điểm kiểm tra để xác định thành tích học tập học sinh - Dạng phân tích thứ hai phân tích câu hỏi- liên quan tới việc phân tích chức câu hỏi Phân tích cách chấm điểm Có số cách thức chấm điểm học sinh dạng câu hỏi có nhiều lựa chọn Dưới hai cách: - Một cách ghi chép đầy đủ – ghi lại tất câu trả lời học sinh dù hay sai Tổng điểm học sinh sau tổng câu trả lời - Hai ghi chép phần - ghi lại toàn câu trả lời học sinh số phương án nhiễu mà học sinh lựa chọn Cách chấm điểm phát huy tác dụng tối đa câu hỏi có “đáp án xác nhất” câu hỏi mà học sinh chọn “hơn một” đáp án Ví dụ, bạn cho điểm học sinh học sinh chọn đáp án đáp án nhất, xác Vấn đề cuối việc chấm điểm “trọng số câu hỏi” Cách tiếp cận dễ dàng cho 01 điểm cho tất câu hỏi để chúng có “trọng lượng” Tuy nhiên, dựa vào bảng ma trận kiểm tra chi tiết yếu tố khác, giáo viên định tập trung vào số câu hỏi câu khác tăng điểm chúng tổng điểm kiểm tra Phân tích câu hỏi Khi biên soạn đề thi tiến hành kiểm tra, giáo viên thực số phân tích để đảm bảo chất lượng câu hỏi lần thi lần thi Mức độ khó: Câu hỏi khó hay dễ nhóm học sinh này? Độ khó câu hỏi tính theo tỉ lệ học sinh chọn đáp án tổng số thí sinh làm Mức độ khó thường dao động từ 0.00 đến 1.00 Tốt nên có hài hoà/pha trộn mức độ khó: vài câu khó cho học sinh giỏi, xuất sắc; vài câu dễ cho học sinh yếu số câu có mức độ khó trung bình Mức độ khó trung bình kiểm tra với hầu hết dạng câu hỏi có nhiều lựa chọn từ 0.6 đến 0.7 (Gronlund Linn, 1990) Mức độ phân biệt: Câu hỏi thể khác biệt học sinh nắm vững kiến thức học sinh chưa nắm vững kiến thức? Mức độ phân biệt tính hệ số tương quan điểm số câu hỏi tổng điểm khác 10 tỉ lệ học sinh có điểm số cao đưa đáp án học sinh có điểm số thấp đưa đáp án Mức độ phân biệt dao động từ -1.00 đến +1.00 Giá trị âm (1.00) có nghĩa tất học sinh điểm thấp có câu trả lời tất học sinh điểm cao có câu trả lời sai, điều xảy câu hỏi sai chức Giá trị dương (+1.00) có nghĩa tất học sinh điểm cao có câu trả lời tất học sinh điểm thấp có câu trả lời sai, lúc câu hỏi thực chức chúng Giá trị = “0” có nghĩa câu hỏi không phân biệt học sinh giỏi học sinh yếu Giá trị mong đợi mức độ phân biệt thường từ khoảng 0.3 đến 0.5 (Oosterhof, 2001) Phân tích phương án nhiễu: Học sinh chọn phương án cho câu hỏi? Thông thường, học sinh chia thành hai nhóm: nhóm điểm cao nhóm điểm thấp, tỉ lệ chọn phương án ghi lại Nhóm học sinh điểm cao thường chọn đáp án học sinh điểm thấp thường chọn phương án nhiễu Nếu điều ngược lại xảy ra, lúc phải xem lại câu hỏi có vấn đề với phương án nhiễu nên chúng gây khó khăn cho nhóm học sinh giỏi.(Oosterhof, 2001) Hệ số tin cậy:Độ tin cậy mức độ mà kết học sinh quán qua lần đánh giá (độ ổn định) Độ tin cậy đánh giá theo mức độ tương quan item, tính băng hệ số alpha Cronbach KR-21 Cả hai cách tính có giá trị từ 0.00 đến 1.00 giá trị lớn độ tin cậy cao Mặc dù giới hạn tuyệt đối cho hệ số tin cậy “có thể chấp nhận được” độ tin cậy thường bị ảnh hưởng nhiều yếu tố khác nhau, thống việc tính toán hệ số tin cậy giá trị từ 0.60 đến 0.70 giá trị chấp nhận [nếu kiểm tra sử dụng với hình thức đánh giá khác] Nếu kiểm tra công cụ sử dụng để xếp loại học sinh hệ số tin cậy thấp phải 08 Bài test tốt có item có độ phân biệt gần 50, có đa dạng mức độ khó có nhiều câu hỏi gia tăng độ tin cậy (Nitko, 2001; Oosterhof, 2001) Việc phân tích độ khó, độ phân biệt, độ tin cậy (dựa hỗ trợ phần mềm QUEST, CONQUEST ) giúp xác định câu hỏi có chất lượng tốt chất lượng Các thông tin sử dụng theo nhiều cách - Các kiểm tra Bạn sử dụng thông tin để loại bỏ câu hỏi chất lượng sau lần test Học sinh nhận điểm số phản ánh sát thực lực câu hỏi chất lượng loại bỏ qua trình phân tích câu hỏi Ví dụ, thấy nhiều học sinh điểm cao chọn phương án nhiễu định giáo viên phải suy nghĩ xem xét lại liệu có phải phương án đúng/ phương án tốt hay không 11 - Các kiểm tra tương lai Sử dụng lại câu hỏi trình hiệu tiết kiệm chi phí Chất lượng test tiếp tục tăng lên giáo viên biết loại bỏ chỉnh sửa câu hỏi chất lượng - câu hỏi khó hay dễ, câu hỏi có giá trị phân biệt giá trị âm, “0” “ gần 0”…Giáo biên cần biết phân tích câu hỏi để nắm bắt lý chọn phương án đúng, chọn phương án nhiễu Điểm mạnh trắc nghiệm đa lựa chọn - Các trắc nghiệm đa lựa chọn xác nhận mang lại tính hiệu lợi ích kinh tế cao Do thời gian làm trắc nghiệm ngắn học sinh phải trả lời nhiều câu hỏi, điều cho phép bao quát phạm vi kiểm tra đánh giá rộng khắp theo yêu cầu môn học - Việc chấm điểm dễ dàng, nhanh chóng, chấm máy bảo đảm tính khách quan khâu chấm Kết trắc nghiệm dễ dàng phân tích độ tin cậy độ giá trị phần mềm có sử dụng mô hình phương pháp toán học Các câu hỏi có nhiều đáp án lựa chọn thường linh hoạt để sử dụng Tất thuận lợi phát huy câu hỏi đựoc chuẩn bị kỹ lưỡng test thiết kế cẩn thận Điều yêu cầu có thời gian, kế hoạch, tính sáng tạo kỹ thiết kế Điểm yếu trắc nghiệm đa lựa chọn - Một điểm yếu kiểm tra với câu hỏi có nhiều phương án lựa chọn giáo viên viết câu hỏi bậc tư thấp nhận biết, hồi tưởng/ nhớ lại… khó viết câu hỏi có khả đánh giá cấp độ cao tư vận dụng, sáng tạo…điều mối quan tâm giáo viên học sinh (Crooks, 1988; Shifflett, Phibbs, & Sage, 1997) Nếu giáo viên xem kỹ bảng ma trận nội dung chi tiết cho kiểm tra cách tốt để tránh khó khăn ngờ tới - Việc xây dựng câu hỏi trắc nghiệm phức tạp, tốn thời gian đòi hỏi người xây dựng trắc nghiệm phải huấn luyện đầy đủ - Một yếu điểm khác kiểm tra với câu hỏi có nhiều phương án lựa chọn chúng đặt thông tin khỏi ngữ cảnh Điều có nghĩa chúng khiến cho kiến thức thường dẫn chứng thực tế - bị đẩy khỏi ngữ cảnh (Shepard, 1989; Wiggins, 1989, 1992) Một số người cho việc đặt thông tin không ngữ cảnh làm cho việc đánh giá hiệu lực Người ta thường thừa nhận khuôn khổ có giới hạn kiểm tra, tình đánh giá thường có tính gián tiếp/giả định (Shepard, 1989) Các tập tình huống, tiểu luận, chí viết luận thường 12 coi “thật” “phản ánh giới” (Wiggins, 1989, 1992) Sử dụng trắc nghiệm khách quan cần tuân theo số yêu cầu sau: - Câu trắc nghiệm cần có độ tin cậy độ giá trị đáp ứng yêu cầu đo mục tiêu cần đo kết ổn định không phụ thuộc vào người chấm hay thời gian địa điểm thi - Quá trình tiến hành trắc nghiệm cần phải chuẩn bị chu đáo Cần có biện pháp chống gian lận làm bài, phương án đảo ngẫu nhiên câu hỏi để người ngồi cạnh trình tự câu hỏi giống Những yêu cầu chung thiết kế câu hỏi thi trắc nghiệm khách quan Các trắc nghiệm khách quan thường dùng để đo lường, lực nhận thức, lực học tập, thành tích học tập, lực chuyên biệt, mức độ thành thạo kỹ cần lưu ý viết item: 1- Các câu hỏi viết với mức độ đọc hiểu phù hợp cho đối tượng làm test: câu đơn nghĩa, từ vựng phổ thông, tránh dùng từ đa nghĩa, tiếng lóng, khó hiểu 2- Đảm bảo phương án trả lời cho câu hỏi phải có câu trả lời đúng/ nhất/ tốt chuyên gia chấp nhận 3- Đảm bảo câu hỏi có nội dung đo lường thật cụ thể, khu biệt tương đối nằm phạm vi nội dung cần đo xác định 4- Đảm bảo item có tính độc lập Một item câu trả lời không gợi ý câu trả lời cho item khác 5- Tránh viết item theo kiểu câu hỏi đánh đố, mẹo, bẫy dễ chuyển tải sai thông tin Câu hỏi khách quan có xu hướng trở thành câu hỏi đánh đố, mẹo, cài bẫy buộc học sinh phải chọn từ hay số câu mà có ý nghĩa định hướng vào vấn đề hoàn toàn khác Ví dụ: tình huống: ”Hai người đến sông, sông có đò, đò chở người Hỏi làm hai qua sông?” Tình cài bẫy từ ”cùng” 6- Đảm bảo tình viết rõ ràng dễ hiểu, hiểu nghĩa Ví dụ : Viết kém: Đ S Bệnh đái tháo đường phát triển sau 40 tuổi Câu nghĩa không rõ ràng từ phát triển có nghĩa không rõ ràng, câu hiểu: ”chỉ mắc bệnh sau lứa tuổi 40” hay ”bệnh hay mắc phải sau tuổi 40” 13 [...]... nội dung chi tiết cho bài kiểm tra thì đó sẽ là một cách rất tốt để tránh được những khó khăn không thể ngờ tới - Việc xây dựng câu hỏi trắc nghiệm khá phức tạp, tốn thời gian đòi hỏi người xây dựng trắc nghiệm phải được huấn luyện đầy đủ - Một yếu điểm khác của bài kiểm tra với câu hỏi có nhiều phương án lựa chọn là chúng đặt thông tin ra khỏi ngữ cảnh Điều này có nghĩa là chúng khiến cho kiến thức thường... 1989; Wiggins, 1989, 1992) Một số người cho rằng việc đặt thông tin không đúng ngữ cảnh sẽ làm cho việc đánh giá không có hiệu lực Người ta vẫn thường thừa nhận rằng trong khuôn khổ có giới hạn của một bài kiểm tra, các tình huống đánh giá thường có tính gián tiếp/giả định (Shepard, 1989) Các bài tập tình huống, bài tiểu luận, thậm chí cả bài viết luận thường 12 được coi là “thật” hoặc “phản ánh đúng... cao Mặc dù không có các giới hạn tuyệt đối cho các hệ số tin cậy “có thể chấp nhận được” do độ tin cậy thường bị ảnh hưởng bởi rất nhiều các yếu tố khác nhau, một sự thống nhất trong việc tính toán hệ số tin cậy đó là giá trị từ 0.60 đến 0.70 là một giá trị có thể chấp nhận được [nếu bài kiểm tra được sử dụng cùng với các hình thức đánh giá khác] Nếu bài kiểm tra là công cụ duy nhất được sử dụng để xếp... Điểm mạnh của bài trắc nghiệm đa lựa chọn - Các bài trắc nghiệm đa lựa chọn được xác nhận mang lại tính hiệu quả và lợi ích kinh tế cao Do thời gian làm bài trắc nghiệm ngắn nhưng học sinh phải trả lời rất nhiều câu hỏi, điều này cho phép bao quát một phạm vi kiểm tra đánh giá rộng khắp theo yêu cầu môn học - Việc chấm điểm dễ dàng, nhanh chóng, có thể chấm bằng máy và bảo đảm tính khách quan trong khâu... do vậy cần lưu ý khi viết các item: 1- Các câu hỏi được viết với mức độ đọc hiểu phù hợp cho đối tượng làm test: câu đơn nghĩa, từ vựng phổ thông, tránh dùng những từ đa nghĩa, tiếng lóng, khó hiểu 2- Đảm bảo các phương án trả lời cho mỗi câu hỏi phải có câu trả lời đúng/ đúng nhất/ tốt nhất được các chuyên gia chấp nhận 3- Đảm bảo mỗi câu hỏi có một nội dung đo lường thật cụ thể, khu biệt tương đối... sự đa dạng về mức độ khó và có nhiều câu hỏi hơn sẽ gia tăng độ tin cậy (Nitko, 2001; Oosterhof, 2001) Việc phân tích độ khó, độ phân biệt, độ tin cậy (dựa trên sự hỗ trợ của các phần mềm như QUEST, CONQUEST ) sẽ giúp xác định các câu hỏi có chất lượng tốt hoặc kém chất lượng Các thông tin này có thể được sử dụng theo rất nhiều cách - Các bài kiểm tra hiện tại Bạn có thể sử dụng các thông tin này để... chọn phương án nào cho mỗi câu hỏi? Thông thường, học sinh được chia thành hai nhóm: nhóm điểm cao và nhóm điểm thấp, tỉ lệ chọn phương án cũng được ghi lại Nhóm học sinh điểm cao thường chọn đáp án đúng và những học sinh điểm thấp thường chọn phương án nhiễu Nếu điều ngược lại xảy ra, đó là lúc phải xem lại câu hỏi vì có thể có vấn đề với phương án nhiễu nên chúng đã gây khó khăn cho nhóm học sinh... Câu trắc nghiệm cần có độ tin cậy và độ giá trị đáp ứng yêu cầu đo đúng mục tiêu cần đo và kết quả ổn định không phụ thuộc vào người chấm hay thời gian địa điểm thi - Quá trình tiến hành trắc nghiệm cần phải được chuẩn bị chu đáo Cần có những biện pháp chống gian lận khi làm bài, có thể bằng phương án đảo ngẫu nhiên các câu hỏi để những người ngồi cạnh nhau không có trình tự câu hỏi giống nhau Những yêu... những thuận lợi này sẽ được phát huy nếu các câu hỏi đựoc chuẩn bị kỹ lưỡng và bài test được thiết kế cẩn thận Điều này yêu cầu có thời gian, kế hoạch, tính sáng tạo và kỹ năng thiết kế Điểm yếu của bài trắc nghiệm đa lựa chọn - Một trong những điểm yếu của các bài kiểm tra với câu hỏi có nhiều phương án lựa chọn là giáo viên chỉ viết được những câu hỏi ở bậc tư duy thấp như nhận biết, hồi tưởng/ nhớ... nếu thấy rất nhiều học sinh điểm cao chọn một phương án nhiễu nhất định nào đó giáo viên sẽ phải suy nghĩ và xem xét lại liệu đó có phải là phương án đúng/ phương án tốt nhất hay không 11 - Các bài kiểm tra trong tương lai Sử dụng lại các câu hỏi là một quá trình hiệu quả và tiết kiệm chi phí Chất lượng của bài test sẽ tiếp tục tăng lên nếu giáo viên biết loại bỏ hoặc chỉnh sửa các câu hỏi kém chất lượng ... 3/50 = 6% 5/50 = 10% 2/50 = 4% 12/ 50 = 24% 2/50 = 4% 2/50 = 4% 2/50 = 4% 0/50 = 0% 6/50 = 12% 1/50 = 2% 2/50 = 4% 1/50 = 2% 1/50 = 2% 5/50 = 10% 1/50 = 2% 10/ 50 = 20% 5/50 = 10% 2/50 = 4% 18/50... 5/50 = 10% 15/50 = 30% 6/50 = 12% Tổng điểm=50 10/ 50 = 20% 19/50 = 38% Một xây dựng bảng ma trận kiểm tra chi tiết, bạn sử dụng để lập kế hoạch cho việc giảng dạy biên soạn câu hỏi kiểm tra Sở... Ví dụ bảng ma trận chi tiết kiểm tra khoá học mở đầu môn vật lý (tổng điểm 50) Ví dụ cho thấy tỉ lệ % điểm số cho chủ đề cấp độ tư Có tổng cộng 50 câu hỏi kiểm tra Cấp độ tư Chủ đề Nhận biết Thông