Bài viết dựa trên cơ sở nghiên cứu hệ thống lí luận của các công trình nghiên cứu về sử dụng hệ thống câu hỏi TNKQ trong đánh giá kết quả học tập của người học và thực tiễn để đề xuất việc sử dụng câu hỏi TNKQ trong KT, ĐG kết quả học tập học phần Tiếng Anh 1 của SV Học viện Cảnh sát nhân dân. Đây sẽ là căn cứ, cơ sở giúp các đơn vị giảng dạy xây dựng bộ câu hỏi TNKQ; đồng thời, căn cứ vào mục tiêu của môn học để xây dựng hệ thống ngân hàng câu hỏi thi TNKQ.
VJE Tạp chí Giáo dục, Số 486 (Kì - 9/2020), tr 38-42 ISSN: 2354-0753 XÂY DỰNG HỆ THỐNG CÂU HỎI TRẮC NGHIỆM KHÁCH QUAN TRONG KIỂM TRA, ĐÁNH GIÁ KẾT QUẢ HỌC TẬP HỌC PHẦN “TIẾNG ANH 1” CỦA SINH VIÊN HỌC VIỆN CẢNH SÁT NHÂN DÂN Đỗ Anh Dũng+, Trần Thị Thúy Học viện Cảnh sát nhân dân +Tác giả liên hệ ● Email: anhdung.36@gmail.com Article History Received: 25/7/2020 Accepted: 21/8/2020 Published: 20/9/2020 ABSTRACT The use of objective multiple-choice questions in testing and assessing student learning results is increasingly widely applied due to its superiority The article is based on the research on theoretical system of studies on the use of objective multiple choice questions in assessing learners' learning results and in practice to propose the use of objective test in examining and evaluating the learning results of students of the People's Police Academy From there, the teaching units can base on the process and the way of building an objective multiple choice question set, and at the same time based on the subject's goal to build a bank system of multiple choice objective questions Keywords objective test, testing and assessment, students, People's Police Academy Mở đầu Nghị số 29-NQ/TW ngày 04/11/2013 Ban Chấp hành Trung ương Đảng Cộng sản Việt Nam khóa XI nhấn mạnh: “Đổi bản, toàn diện giáo dục Việt Nam theo hướng chuẩn hóa, đại hóa, xã hội hóa, dân chủ hóa hội nhập quốc tế” Quan điểm cụ thể ngành Công an giáo dục đại học xác định Nghị số 17-NQ/ĐUCA ngày 28/10/2014 về: “Đổi bản, toàn diện GD-ĐT Công an nhân dân” ngày 28/10/2014 Bộ trưởng Bộ Công an ban hành Chỉ thị số 13/CT-BCA đổi bản, toàn diện GD-ĐT Cơng an nhân dân Trước xu đổi tồn diện hệ thống giáo dục, việc đổi phương pháp kiểm tra, đánh giá (KT, ĐG) kết học tập sinh viên (SV) đóng góp phần quan trọng trình đổi phương pháp kiểm định chất lượng, đánh giá mục tiêu chất lượng dạy học sở đào tạo Điều góp phần nâng cao chất lượng GD-ĐT trường Cơng an nhân dân, có Học viện Cảnh sát nhân dân KT, ĐG quan trọng, khâu tách rời đổi trình GD-ĐT nhà trường KT, ĐG nhằm xác định mục đích q trình dạy học, kết học tập người học so với mục tiêu ban đầu Qua đó, giảng viên (GV) có để điều chỉnh phương pháp dạy học để đạt mục tiêu ban đầu đặt Đây cho việc đổi nâng cao chất lượng giáo dục đại học Các nhà trường sử dụng đa dạng hình thức để KT, ĐG kết học tập SV như: tự luận, vấn đáp, trắc nghiệm khách quan (TNKQ), thực hành… Trong năm gần đây, sử dụng câu hỏi TNKQ xu hướng nhiều đơn vị Học viện Cảnh sát nhân dân sử dụng vào việc đánh giá SV, như: Ngoại ngữ, Tin học, Quản lí hành chính, Luật… Việc đánh giá người học câu hỏi TNKQ tiến hành đánh giá máy tính giấy; có độ tin cậy cao, chấm nhanh; số lượng câu hỏi nhiều nên bao qt kiến thức chương trình tốt; sử dụng phương tiện đại chấm phân tích kết KT, ĐG; SV dành nhiều thời gian để đọc, suy nghĩ, lựa chọn câu trả lời ngắn gọn số câu trả lời gợi ý; GV khơng bị ảnh hưởng tâm lí chấm bài… Bài viết dựa sở nghiên cứu hệ thống lí luận cơng trình nghiên cứu sử dụng hệ thống câu hỏi TNKQ đánh giá kết học tập người học thực tiễn để đề xuất việc sử dụng câu hỏi TNKQ KT, ĐG kết học tập học phần Tiếng Anh SV Học viện Cảnh sát nhân dân Đây cứ, sở giúp đơn vị giảng dạy xây dựng câu hỏi TNKQ; đồng thời, vào mục tiêu môn học để xây dựng hệ thống ngân hàng câu hỏi thi TNKQ Kết nghiên cứu 2.1 Đặc điểm trắc nghiệm khách quan 2.1.1 Một số khái niệm Theo Từ điển tiếng Việt: “Trắc nghiệm hoạt động thực để đo lường lực đối tượng nhằm mục đích xác định” (Hoàng Phê, 2008, tr 1271) Theo tác giả Trần Bá Hồnh, “test” tạm dịch phương pháp trắc nghiệm, hình thức đặc biệt để thăm dị số đặc điểm lực, trí tuệ học sinh để kiểm tra số kiến thức, kĩ năng, kĩ xảo học sinh thuộc chương trình định (dẫn theo Dương 38 VJE Tạp chí Giáo dục, Số 486 (Kì - 9/2020), tr 38-42 ISSN: 2354-0753 Thiệu Tống, 1995) Trắc nghiệm có hai hình thức: TNKQ trắc nghiệm tự luận Trong TNKQ, hệ thống cho điểm hồn tồn khách quan, khơng chủ quan trắc nghiệm tự luận; kết chấm điểm không phụ thuộc vào người chấm Đánh giá theo Laws (2006), KT, ĐG tiến trình thu thập phân tích chứng đưa đến kết luận vấn đề, phẩm chất, giá trị, ý nghĩa chất lượng chương trình, sản phẩm, người, sách hay kế hoạch Với Peter (1997), KT, ĐG trình thu thập, tổng hợp diễn giải thơng tin hỗ trợ cho việc định Theo Từ điển Giáo dục học: “Đánh giá kết học tập xác định mức độ nắm kiến thức, kĩ năng, kĩ xảo người học so với yêu cầu chương trình đề ra” (Bùi Hiền cộng sự, 2001, tr 73) 2.1.2 Đặc điểm trắc nghiệm khách quan - Mục tiêu giảng dạy sở quan trọng để xây dựng đề thi TNKQ Mỗi mơn học có mục tiêu cụ thể mà người học cần đạt Do đó, để đề trắc nghiệm đo trình độ học tập người học, cần phải thiết kế xây dựng đề thi trắc nghiệm bám sát mục tiêu môn học - Để đánh giá chất lượng câu hỏi trắc nghiệm toàn đề thi trắc nghiệm, người ta thường dùng số đại lượng đặc trưng Độ khó độ phân biệt hai đại lượng đặc trưng quan trọng câu trắc nghiệm - Độ tin cậy TNKQ tính quán lần đo khác tính ổn định liệu thu Để trắc nghiệm có độ tin cậy cao, câu hỏi trắc nghiệm phải rõ ràng, sáng, từ ngữ phải xác, khơng gây hiểu nhầm khơng hiểu theo nhiều nghĩa - Độ giá trị TNKQ đại lượng biểu thị mức độ đạt mục tiêu đề cho phép đo nhờ trắc nghiệm Yêu cầu quan trọng trắc nghiệm với tư cách phép đo lường giáo dục phép đo đo cần đo Tùy vào mục tiêu khảo sát khác mà có loại giá trị khác trắc nghiệm: giá trị nội dung, giá trị mục tiêu, giá trị chương trình… Trong TNKQ, độ tin cậy độ giá trị có mối tương quan với Khi trắc nghiệm khơng có độ tin cậy, tức phép đo nhờ trắc nghiệm xác khơng thể nói đến độ giá trị Nói cách khác, trắc nghiệm khơng có độ tin cậy khơng có độ giá trị 2.1.3 Các kiểu câu hỏi trắc nghiệm khách quan Có kiểu câu hỏi TNKQ thường gặp, gồm: Câu ghép đôi (matching items) địi hỏi người học phải ghép cặp nhóm từ hai cột với cho phù hợp ý nghĩa; câu điền khuyết (supply items) nêu mệnh đề có khuyết phận, người học phải nghĩ nội dung thích hợp để điền vào chỗ trống; câu trả lời ngắn (short answer) câu trắc nghiệm đòi hỏi trả lời nội dung ngắn; câu - sai (yes/no question) đưa nhận định, người học phải lựa chọn hai phương án trả lời để khẳng định nhận định hay sai; câu nhiều lựa chọn (multiple choice questions) đưa nhận định 4-5 phương án trả lời, người học phải chọn để đánh dấu vào phương án tốt Câu hỏi - sai kiểu câu nhiều lựa chọn có cách trả lời đơn giản Câu hỏi - sai trường hợp riêng câu nhiều lựa chọn với phương án trả lời Đối với câu nhiều lựa chọn, có n phương án trả lời xác suất người học làm 1/n Trong dạng câu hỏi TNKQ, kiểu câu nhiều lựa chọn sử dụng phổ biến chúng có cấu trúc đơn giản, dễ xây dựng thành thi, dễ chấm điểm Mỗi loại câu hỏi TNKQ có ưu, nhược điểm; để đạt kết tốt xây dựng câu hỏi TNKQ, GV phải vào đặc điểm, mục tiêu môn học để lựa chọn loại câu hỏi cho phù hợp 2.1.4 Nguyên tắc xây dựng câu hỏi trắc nghiệm khách quan - TNKQ công cụ đo lường sử dụng rộng rãi nhiều lĩnh vực khoa học Khi tiến hành xây dựng câu hỏi TNKQ phải đảm bảo yêu cầu, quy trình kĩ thuật soạn thảo câu hỏi TNKQ cách khoa học - Bộ câu hỏi TNKQ quan xây dựng phải đảm bảo phù hợp với mục tiêu mơn học, trình độ nhận thức người học, đảm bảo đánh giá mức độ đạt kiến thức người học theo thang nhận thức Bloom - Bộ câu hỏi TNKQ xây dựng sau tiến hành thử nghiệm đưa vào sử dụng hệ thống ngân hàng câu hỏi, phải đảm bảo hiệu sử dụng hoạt động KT, ĐG kết học tập SV 2.1.5 Quy trình xây dựng câu hỏi trắc nghiệm khách quan Qua nghiên cứu thực tiễn công tác, tác giả đề xuất quy trình xây dựng câu hỏi TNKQ gồm bước: - Bước 1: Xác định mục tiêu cần đánh giá: Để xây dựng kiểm tra TNKQ tốt cần chi tiết mục tiêu giảng dạy môn học, dựa phân loại mục tiêu giáo dục mức độ lĩnh vực nhận thức để xây dựng nên câu hỏi TNKQ 39 VJE Tạp chí Giáo dục, Số 486 (Kì - 9/2020), tr 38-42 ISSN: 2354-0753 - Bước 2: Xây dựng bảng trọng số (ma trận) trắc nghiệm: Sau phân tích, xác định mục tiêu cụ thể trình dạy học, lập bảng dự kiến phân bố hợp lí câu hỏi trắc nghiệm theo mục tiêu nội dung môn học Tùy thuộc vào mục tiêu mơn học xây dựng bảng khác nhau: theo nội dung chương trình học theo mục tiêu giảng dạy, kết hợp nội dung chương trình mục tiêu giảng dạy Trong đó, loại bảng đặc trưng thiết kế theo ma trận hai chiều thuận tiện cho trình biên soạn câu hỏi TNKQ - Bước 3: Biên soạn câu hỏi trắc nghiệm theo bảng trọng số: Dựa vào bảng đặc tả xác định, GV tiến hành biên soạn câu hỏi thi (việc xây dựng câu hỏi GV hay tổ chuyên môn thực hiện) Tùy vào đặc điểm, mục tiêu môn học để lựa chọn loại câu hỏi trắc nghiệm Dạng câu hỏi trắc nghiệm nhiều lựa chọn sử dụng phổ biến tỉ lệ may rủi thấp thuận tiện việc chấm điểm, xử lí - Bước 4: Phân tích câu hỏi phương pháp chuyên gia: Sau biên soạn xong, chun gia theo lĩnh vực chun mơn phân tích, đánh giá, nhận xét góp ý, phản biện câu hỏi thi Những câu hỏi nhận xét chưa đạt yêu cầu bị loại bỏ, thay chỉnh sửa lại để đưa vào sử dụng - Bước 5: Hoàn thiện câu hỏi, đưa vào sử dụng: Các câu hỏi đạt yêu cầu sau phản biện chỉnh sửa, hồn thiện, mã hóa để đưa vào ngân hàng đề thi phục vụ trình đánh giá kết học tập SV Nhìn chung, bước quy trình xây dựng câu hỏi TNKQ có mối liên hệ với nhau, vòng tròn khép kín Vì vậy, xây dựng câu hỏi TNKQ, người xây dựng cần ý khơng để sai sót khâu nào, đưa vào sử dụng đánh giá xác lực SV 2.2 Quy trình xây dựng câu hỏi trắc nghiệm khách quan học phần Tiếng Anh Học viện Cảnh sát nhân dân Dựa đặc điểm quy trình việc xây dựng câu hỏi TNKQ, tiến hành biên soạn 20 câu hỏi đánh giá kết học tập kĩ viết học phần Tiếng Anh theo giáo trình “English for Police” dành cho SV đào tạo hệ quy năm thứ Học viện thời gian làm 30 phút Tại Học viện Cảnh sát nhân dân, môn ngoại ngữ nói chung mơn Tiếng Anh nói riêng, điểm kiểm tra học phần môn học tổng hợp kĩ khác là: nghe, nói, đọc, viết Cụ thể: - Bước 1: Xác định mục tiêu đánh giá: Mục đích bước xác định xác mục tiêu cần đạt SV hệ quy sau kết thúc nội dung học tập học phần Tiếng Anh - Bước 2: Xây dựng bảng trọng số (ma trận) trắc nghiệm: Chúng dự kiến xây dựng, biên soạn 20 câu hỏi TNKQ nhiều lựa chọn cho phần thi viết học phần Tiếng Anh 1, thời gian làm 30 phút Tiêu chí KT, ĐG kết học tập phần thi viết Tiếng Anh lĩnh vực kiến thức quy thành mức: Biết, hiểu, vận dụng: Biết thể khả SV nhận biết hay nhớ lại kiến thức học mà khơng cần giải thích; Hiểu dựa mức biết, địi hỏi SV có khả phân tích, giải thích ý nghĩa, nội dung, mối quan hệ bên kiến thức, chuyển dịch kiến thức theo thuật ngữ hay hình thức thể khác, có khả suy luận dựa thơng tin có; Vận dụng dựa thông hiểu, SV biết sử dụng thơng tin vào giải vấn đề mới, tình Căn vào mục tiêu nội dung học để phân bố số câu hỏi theo mức độ mục tiêu với: mức độ biết gồm câu hỏi; hiểu gồm câu hỏi; vận dụng câu hỏi - Bước 3: Biên soạn câu hỏi trắc nghiệm theo bảng trọng số: Dựa vào bảng trọng số (ma trận) xây dựng trước chúng tơi tiến hành xây dựng 20 câu hỏi trắc nghiệm dùng để đánh kĩ viết học phần Tiếng Anh sinh viên đào tạo quy năm thứ Anh/Chị khoanh tròn đáp án A, B, C D Who are all people? A this B those C them D that I don't know people A many B much C a lot D few We live near the river A of B from C by D -4 He says that he must have A the all from it B all it C the all of it D it all John is a good worker: he works very A hardly B hard C good D many _ you like a cup of coffee? – No, thanks A Do B Have C Did D Would The children are watching the others _ football outside the house 40 VJE Tạp chí Giáo dục, Số 486 (Kì - 9/2020), tr 38-42 ISSN: 2354-0753 A played B to play C playing D are playing Have you ever _ a poem? A written B writing C wrote D writes is four miles from the city centre to the station A It B There C Such D That 10 I am sure that Mr Smith knows _ this new machine A to use B using C how using D how to use 11 I have to eat breakfast in the morning , I get hungry before my lunch break A Consequently B Furthermore C Otherwise D However 12 Thank you very much It’s very you to help me A good with B good of C good for D good about 13 Let’s on our work so that it can be finished as soon as possible A concentrate B to concentrate C concentrating D concentrated 14 How are these shorts? A far B often C many D much 15 I think I hear someone the back window Do you hear it, too? A trying open B trying to open C try opening D try to open 16 Mary and John to the parties at the Student Union every Friday A used to go B use to go C are used to go D were used to go 17 I'll go on holiday I can A as soon as B as C until D How 18 Would you like that for you? A me doing B me to C me D that I 19 They our new transistor radio before A never see B are never going to see C have never seen D didn't see 20 If it so late we could have coffee A wasn't B isn't C weren't D not be - Bước 4: Phân tích câu hỏi phương pháp chuyên gia: Sau GV hoàn thành việc xây dựng 20 câu hỏi phục vụ cho phần thi viết học phần Tiếng Anh dành cho hệ quy, GV tổ Tiếng Anh tiến hành hội thảo, chỉnh sửa lần cho câu hỏi Sau hoàn thành chỉnh sửa lần 1, câu hỏi tiến hành hội thảo, đồng thời tiến hành nghiệm thu cấp Khoa Như vậy, 20 câu hỏi đo nội dung kiến thức cần kiểm tra, câu hỏi có độ khó, độ phân biệt chấp nhận được, phương án nhiễu câu hỏi có tỉ lệ chọn tương đương nhau, phù hợp để đánh giá lực người học - Bước 5: Hoàn thiện câu hỏi, đưa vào sử dụng: Sau có kết luận lãnh đạo Khoa việc chỉnh sửa, GV hồn thiện, mã hóa 20 câu hỏi thuộc nội dung thi viết học phần Tiếng Anh cho phù hợp với tiêu chí, đối tượng đánh giá để đưa vào sử dụng KT, ĐG kết học tập SV hệ quy năm thứ Học viện Cảnh sát nhân dân Trong trình sử dụng, hệ thống câu hỏi cập nhật, chỉnh sửa để phù hợp với nội dung kiến thức môn học đặt Bộ câu hỏi nghiệm thu, thời gian tới Khoa Ngoại ngữ đưa vào sử dụng đánh giá kết học tập sinh viên hệ đào tạo quy năm thứ Kết luận KT, ĐG kết học tập SV nội dung quan trọng trình dạy học Phương thức tiến hành KT, ĐG kết học tập SV có ảnh hưởng không nhỏ đến tinh thần, thái độ học tập; đến việc khơi dậy thúc đẩy tiềm trí tuệ, tính độc lập sáng tạo lực tư khoa học, lực thực hành SV Việc đa dạng hình thức KT, ĐG kết học tập SV có ý nghĩa quan trọng việc đổi mới, nâng cao chất lượng giáo dục đại học Vì vậy, việc sử dụng TNKQ làm cơng cụ để KT, ĐG kết học tập SV góp phần nâng cao chất lượng giáo dục, hạn chế tối đa tiêu cực thi cử bệnh thành tích giáo dục Tài liệu tham khảo Ban Chấp hành Trung ương (2013) Nghị số 29-NQ/TW ngày 4/11/2013 đổi bản, toàn diện giáo dục đào tạo, đáp ứng u cầu cơng nghiệp hóa, đại hóa điều kiện kinh tế thị trường định hướng xã hội chủ nghĩa hội nhập quốc tế 41 VJE Tạp chí Giáo dục, Số 486 (Kì - 9/2020), tr 38-42 ISSN: 2354-0753 Bloom B.S (1956) Taxonomy of Educational Objectives, Handbook I: The Cognitive Domain New York: David McKay Co Inc Bộ Công an (2014) Chỉ thị số 13/CT-BCA ngày 28/10/2014 đổi bản, tồn diện giáo dục đào tạo Cơng an nhân dân Bùi Hiền, Nguyễn Văn Giao, Nguyễn Hữu Quỳnh, Vũ Văn Tảo (2001) Từ điển Giáo dục học NXB Từ điển Bách khoa Dương Thiệu Tống (1995) Trắc nghiệm đo lường thành học tập Trường Đại học Tổng hợp, TP Hồ Chí Minh Đảng ủy Cơng an Trung ương (2014) Nghị số 17/NQ-ĐU ngày 28/10/2014 đổi bản, toàn diện giáo dục đào tạo Cơng an nhân dân Hồng Phê (2008) Từ điển Tiếng Việt NXB Đà Nẵng Học viện Cảnh sát nhân dân (2018) Quyết định số 1789/QĐ-T32-KTĐBCL ngày 15/5/2018 công tác kiểm tra, thi kết thúc học phần, Chuẩn đầu Học viện Cảnh sát nhân dân Laws K (2006) Curriculum development & curriculum evaluation Workshop material organized at Can Tho University Lâm Quang Thiệp (2002) Tập giảng Lí thuyết thực hành đo lường đánh giá giáo dục NXB Đại học Quốc gia Hà Nội Nguyễn Hồ Phương Nhật (2017) Đổi phương pháp kiểm tra, đánh giá kết học tập sinh viên dạy học học phần “Tuyển dụng nhân lực” Trường Đại học Nội vụ Hà Nội, phân hiệu Quảng Nam Tạp chí Giáo dục, số 426, tr 58-62 Peter W Airasain (1997) Classroom Assessment The Mcgraw - Hill Phạm Thị Phương Anh (2020) Rèn luyện cho sinh viên kĩ thiết kế câu hỏi trắc nghiệm khách quan nhiều lựa chọn theo hướng đánh giá lực học sinh dạy học môn Sinh học cấp trung học phổ thơng Tạp chí Giáo dục, số 475, tr 34-39 Phan Lê Na, Hồ Thị Huyền Thương (2017) Rèn luyện kĩ kiểm tra, đánh giá kết học tập học sinh cho sinh viên ngành Sư phạm Tin học Tạp chí Khoa học, Trường Đại học Vinh, tập 46, số 2B, tr 34-40 42 ... vậy, xây dựng câu hỏi TNKQ, người xây dựng cần ý không để sai sót khâu nào, đưa vào sử dụng đánh giá xác lực SV 2.2 Quy trình xây dựng câu hỏi trắc nghiệm khách quan học phần Tiếng Anh Học viện Cảnh. .. Bộ câu hỏi TNKQ xây dựng sau tiến hành thử nghiệm đưa vào sử dụng hệ thống ngân hàng câu hỏi, phải đảm bảo hiệu sử dụng hoạt động KT, ĐG kết học tập SV 2.1.5 Quy trình xây dựng câu hỏi trắc nghiệm. .. Tiếng Anh Học viện Cảnh sát nhân dân Dựa đặc điểm quy trình việc xây dựng câu hỏi TNKQ, tiến hành biên soạn 20 câu hỏi đánh giá kết học tập kĩ viết học phần Tiếng Anh theo giáo trình “English for