Bài giảng Xây dựng câu hỏi toán PISA: Phần 5 - Thiết kế các dạng câu hỏi bao gồm những nội dung về xây dựng câu hỏi trắc nghiệm khách quan đơn giản; xây dựng câu hỏi nhiều lựa chọn phức hợp; xây dựng câu hỏi đóng, mở đòi hỏi trả lời ngắn hoặc dài.
V THIẾT KẾ CÁC DẠNG CÂU HỎI Các dạng câu hỏi (trong UNIT) SESDP Câu hỏi trắc nghiệm khách quan nhiều lựa chọn đơn giản (Simple multiple choice) Câu hỏi trắc nghiệm khách quan nhiều lựa chọn (phức hợp) Complex multiple choice Câu hỏi đóng địi hỏi trả lời ngắn dài (dựa trả lời có sẵn) (close – constructed response question) Câu hỏi mở đòi hỏi trả lời ngắn (short response question); Câu hỏi mở đòi hỏi trả lời dài (open – constructed response question 5.1 Xây dựng câu hỏi trắc nghiệm khách quan đơn giản Ron Martin Dave Tout Juliette Mendelovits Workshop for Vietnamese Delegation August 2012 Lưu ý Chuyên gia SESDP Việc viết câu hỏi trắc nghiệm khách quan yêu cầu mức độ kỹ cao Mức độ kỹ nhân tố quan trọng việc đưa đánh giá đắn lực kiến thức Một số lưu ý câu hỏi TNKQ SESDP Trường hợp Những học sinh trả lời ‘không biết’ khơng thể hiểu câu trả lời để có hội đoán đáp án phương án Nếu phương án đáng ngờ hội để đoán câu trả lời khoảng 25% (nếu có phương án) Tuy nhiên: Nếu học sinh có đủ kiến thức để loại phương án sai hội đốn câu trả lời tăng lên SESDP Trường hợp Câu trả lời phương án nhiễu đáng tin cậy đưa gợi ý (hoặc tài liệu để so sánh) khiến học sinh đưa câu trả lời SESDP Tuy nhiên Việc mã hoá soạn câu trả lời cho câu hỏi TNKQ thực đáng tin cậy Việc mã hố nhanh dễ Máy thực mã hố khó phức tạp, từ tiết kiệm chi phí cho việc mã hố Câu hỏi TNKQ tốt SESDP Khung/cấu trúc rõ ràng [Khung lực PISA] Phần dẫn có tính xác thực, hấp dẫn: - Gần gũi với học sinh nước - Thu hút mối quan tâm học sinh - Khuyến khích đề cập đến khái niệm, kiến thức, quy trình đánh giá [tính chất xác thực mức độ cao] - ĐG khái niệm phương pháp Toán học; Đánh giá khả khung lực Toán học bao gồm: mục tiêu – ngữ cảnh, nội dung, phương pháp Chỉ có câu trả lời Có nhiều phương án nhiễu đáng tin cậy (nhưng không đúng) không đưa gợi ý liên quan để chấp nhận từ chối Ngơn ngữ mà tất HS đọc Câu hỏi TNKQ tốt: SESDP Câu (đáp án) phải: Có độ dài, ngơn ngữ với phương án nhiễu Phải là câu trả lời tốt BẢO ĐẢM NÓ LÀ MỘT (duy nhất) Các câu nhiễu Phải sai hợp lý Không phải nửa Phải phức tạp song song với đáp án Thiết kế phương án nhiễu Café đến từ đâu? nước đứng đầu sản lượng café năm 2011/2012 Brazil, Vietnam, Indonesia, Colombia Ethiopia Bảng cho biết sản lượng café hạt nước Và hạt café đóng gói thành hàng nghìn bao 60 kg? Sản lượng café 2011/12 Country 60-kg bags 1000s Percentage (%) of world production Brazil 49,200 35.8% Vietnam 21,000 15.3% Indonesia 8,300 6.0% Colombia 7,500 5.5% Ethiopia 6,300 4.6% Source: United States DePhầnment of Agriculture, June 2012 • Có xấp xỉ bao hạt café 60kg sản xuất giới năm 2011/2012? A 60,000 B 70,000 C 90,000 D 140,000 E 150,000 SESDP SESDP Xúc xắc MƠ TẢ: Hình bên phải hai xúc xắc Xúc xắc khối lập phương có số cho theo quy tăc sau: “Tổng số chấm nằm hai mặt đối diện ln 7” BÀI TỐN: Trong hình bên phải, ta thấy có ba xúc xắc xếp chồng lên Trên mặt xúc xắc thứ có chấm Có tổng số chấm mặt nằm ngang mà bạn khơng nhìn thấy được? Có………………….chấm Giới thiệu PISA – Phần Khối Khối Khối 26 SESDP Xúc xắc Giả thiết ẩn cho phần mô tả: Tổng số chấm mặt đối diện Giả thiết thừa: Các chấm mặt xúc xắc (ngoài mặt cùng) che dấu GT ẩn Suy luận: Nhìn thấy không thấy (GT ẩn) Tổng giá trị chưa biết giá trị biết Hướng dẫn chấm điểm: Mức Đầy đủ: Mã 1: Có 17 chấm Khơng tính điểm: Mã 0: Các câu trả lời khác Mã 9: Khơng có câu trả lời Khối Khối Khối Giới thiệu PISA – Phần 27 Câu hỏi với câu trả lời mở Café đến từ đâu? nước đứng đầu sản lượng café năm 2011/2012 Brazil, Vietnam, Indonesia, Colombia Ethiopia Bảng cho biết sản lượng café hạt nước Và hạt café đóng gói thành hàng nghìn bao 60 kg? Sản lượng café 2011/12 Country 60-kg bags 1000s Percentage (%) of world production Brazil 49,200 35.8% Vietnam 21,000 15.3% Indonesia 8,300 6.0% Colombia 7,500 5.5% Ethiopia 6,300 4.6% Source: United States Department of Agriculture, June 2012 Brazil sản xuất Vietnam bao café 60kg năm 2011/2012? ……………………………………………………………………………… ……………………………………………………………………………… SESDP Câu trả lời mở ngắn Hướng dẫn mã hố: Mục đích câu hỏi: Mô tả: Xem bảng để xác định liệu tương ứng thực phép tính số học liệu Phạm vi nội dung toán học: Giả thiết liệu Nội dung: Xã hội Quy trình: Sử dụng Mức đầy đủ Mã 1: 28,200 • 28,200 bao • 28.2 hàng nghìn Khơng đầy đủ Mã 0: Câu trả lời khác Mã 9: Không trả lời SESDP Câu trả lời mở dài SESDP Các câu hỏi câu trả lời mở dài cách để đo mức độ cao suy nghĩ, hiểu biết việc áp dụng kiến thức học sinh Có số thách thức việc sử dụng câu hỏi có câu trả lời mở dài: Soạn Hướng dẫn mã hoá đáp ứng yêu cầu Thời gian chi phí HƯỚNG DẪN MÃ HỐ Duy trì tính qn độ tin cậy người chấm khác Quá trình thường yêu cầu hệ thống giám sát tính thống xác HƯỚNG DẪN MÃ HỐ Câu trả lời mở SESDP Các thách thức gợi ý cho câu hỏi CR thường chuyên gia mã hố: •Như câu hỏi câu trả lời ngắn mức độ cao •Câu hỏi cần có cấu trúc tốt, với hướng dẫn rõ ràng, khơng mập mờ khơng (q) dài •Tránh câu hỏi rộng để học sinh phải giải thích nhiều •Đừng yêu cầu học sinh “tổng hợp nhiều tư liệu nhiều tài liệu” Câu trả lời mở SESDP Thách thức gợi ý cho câu hỏi CR dài lực Toán học thường chuyên gia mã hoá: Suy nghĩ cẩn thận tư toán học mà bạn đánh giá câu trả lời bạn tìm kiếm Soạn mục đích câu hỏi để bày tỏ mục đích, ý định câu trả lời để giúp cho việc hướng dẫn mã hoá/mã hoá Bảo đảm đáp ứng câu trả lời khác nhau– phương pháp khác (đúng); sử dụng giá trị khác (vd pi); độ xác; từ ngữ, thuật ngữ khác tuỳ thuộc vào khả học sinh Câu trả lời mở SESDP Where is our coffee coming from? The top five coffee producing countries in 2011/2012 were Brazil, Vietnam, Indonesia, Colombia and Ethiopia The table shows their total coffee bean production figures And did you know that coffee beans are packed and measured in thousands of 60kilogram (kg) bags? 2011/12 Coffee Production Country 60-kg bags 1000s Percentage (%) of world production Brazil 49,200 35.8% Vietnam 21,000 15.3% Indonesia 8,300 6.0% Colombia 7,500 5.5% Ethiopia 6,300 4.6% Source: United States Department of Agriculture, June 2012 Isabel khẳng định: “Brazil sản xuất 1/3 lượng café giới” Giải thích khẳng định Isabel …………………………………………………………………………………………… …………………………………………………………………………………………… …………………………………………………………………………………………… Câu trả lời mở SESDP Mục đích câu hỏi: Mơ tả: giải thích giá trị liệu thể dạng tỉ lệ phần trăm lớn tỉ lệ phân đoạn Phạm vi nội dung Toán học: giải thiết liệu Nội dung: xã hội Quy trình: sử dụng Mức đầy đủ Mã 1: Giải thích dựa so sánh 35.8% 1/3 •Brazil sản xuất 35.8% sản lượng hạt cafe giới, 1/3 33.33%, Isabel 35.8% lớn •35.8% > 1/3 •1/3 33.3% có nghĩa Brazil sản xuất nhiều 1/3 lượng cafe giới Không đầy đủ Mã 0: Câu trả lời khác •Bởi 49,200 nhều nửa (92,300) Mã 9: Không trả lời Câu trả lời mở Ví dụ Tốn học PISA Bài – Pizzas Một cửa hàng Pizza phục vụ loại pizza trịn có độ dày kích cỡ khác Cái nhỏ có đường kính 30 cm trị giá 30 zeds Cái lớn có đường kính 40 cm trị giá 40 zeds Bánh pizza có lợi kinh tế hơn? Đưa lý bạn Mã 1: Đưa lý chung kích thước bánh pizza tăng nhiều so với giá trị bánh, suy bánh lớn có lợi kinh tế HOẶC Tính diện tích số lượng zed cho bánh pizza để kết luận bánh to có lợi kinh tế Mã 0: Câu trả lời khác [kể câu trả lời giải thích khơng đúng.] SESDP Nhận xét Câu trả lời “có” “khơng” Qúa chung– cần giải thích rõ ràng “lý chung” – vd Ít thêm vào ví dụ Nghĩ đến tất khả năngcũng tính zed cm Sẽ quy cho: 30 cm: 706.5 = 23.55 cm2 40cm : 1256 = 31.4 cm2 ? Hoặc “tôi tiết kiệm 10 zeds tơi khơng thể ăn pizza lớn, nhỏ tốt hơn.” Điểm kiểm tra SESDP Biểu đồ cho thấy kết 36 kiểm tra mơn Khoa học hai nhóm Nhóm A Nhóm B Điểm trung bình Nhóm A 62,0 điểm trung bình Nhóm B 64,5 Các học sinh đạt kiểm tra điểm số lớn 50 Giới thiệu PISA – Phần SESDP Điểm kiểm tra Quan sát biểu đồ, so sánh điểm trung bình hai nhóm, giáo viên cho Nhóm B làm kiểm tra tốt Nhóm A Những học sinh Nhóm A chưa trí với ý kiến giáo viên Họ cố thuyết phục giáo viên Nhóm B khơng làm tốt Bằng việc sử dụng biểu đồ, đưa lập luận toán học mà học sinh Nhóm A sử dụng để thuyết phục giáo viên Giới thiệu PISA – Phần 37 SESDP Điểm kiểm tra Hướng dẫn chấm điểm Mã 1: Đưa lập luận hợp lý; có liên hệ với số học sinh đạt kiểm tra ảnh hưởng không đáng kể học sinh không đạt; số học sinh có điểm cao • Nhóm A có nhiều HS đạt kiểm tra Nhóm B (Nhóm A có HS khơng đạt kiểm tra Nhóm B) • Trong HS đạt kiểm tra, HS nhóm A có kết đồng học sinh Nhóm B • Nhóm A có nhiều HS đạt 80 điểm nhóm B Giới thiệu PISA – Phần 38 NHỮNG VỤ TRỘM SESDP Một phóng viên truyền hình trình bày biểu đồ sau phát biểu: “Biểu đồ cho thấy số lượng vụ trộm tăng mạnh từ năm 1998 tới năm 1999.” Ý kiến Em Giới thiệu PISA – Phần Những vụ trộm SESDP Xét đến hai so sánh: Số vụ trộm tăng từ năm 1998 đến 1999 so với số vụ trộm năm 1998 (số tăng tuyệt đối số tăng tương đối) Số vụ trộm tăng từ năm 1998 đến 1999 so với số vụ trộm tăng hai năm trước (so sánh số tăng với nhau) Sẽ có ba trường hợp: Câu trả lời “Không” bao gồm nhận định việc giải thích đồ thị khơng hợp lý Câu trả lời “Có” bao gồm tất nhận định việc giải thích biểu đồ hợp lý Câu trả lời “Chưa đủ sở để kết luận” với giải thích hợp lý biểu đồ “thiếu thơng tin” Đánh giá câu trả lời giải thích biểu đồ hợp lý hay không, không nên chọn tiêu chí đơn giản “Có” “Khơng” Giới thiệu PISA – Phần 40 ... Câu trả lời dài câu hỏi đóng Câu trả lời câu hỏi đóng câu trả lời có sẵn Câu trả lời ngắn câu hỏi mở Câu trả lời dài câu hỏi mở Câu hỏi với câu trả lời mở tốt SESDP Câu trả lời phải: Rõ... thiết liệu Nội dung: nghề nghiệp; cá nhân; khoa học; xã hội Q trình: cơng thức, vận dụng, giải thích Các dạng câu hỏi câu trả lời SESDP Câu trả lời ngắn câu hỏi đóng Câu trả lời dài câu. .. cập 5. 3 Xây dựng Câu hỏi đóng, mở Dave Tout địi hỏi trả lời ngắn dài Ron Martin Juliette Mendelovits Cấu trúc câu trả lời mở SESDP MỤC ĐÍCH CÂU HỎI: Mơ tả: mơ tả ngắn gọn mục đích câu hỏi [nên