Đánh giá quy trình thiết kế đề thi trắc nghiệm khách quan tại khoa khoa học tự nhiên và xã hội (nay là trường đại học khoa học)– đại học thái nguyên

Tẩn Thảo Trang K64A Trết học MỤC LỤC 1 Tẩn Thảo Trang K64A Trết học CÁC CHỮ CÁI VIẾT TẮT TRONG LUẬN VĂN CNTT Disc Công nghệ thông tin Chỉ số độ phân biệt ĐHKH Đại học Khoa học ĐHQG HN Đại học Quốc gia Hà Nội ĐHTN Đại học Thái Nguyên ĐLĐG Đo lường đánh giá ĐBCLĐT&NCPTGD Đảm bảo chất lượng đào tạo GV nghiên cứu phát triển giáo dục Giảng viên GD&ĐT Giáo dục Đào tạo IRT Lý thuyết hồi đáp IRF Hàm đáp ứng câu hỏi KĐCL Kiểm định chất lượng KHKT Khoa học kỹ thuật KQHT Kết học tập KT, ĐG Kiểm tra, đánh giá MCQ Câu hỏi nhiều lựa chọn NCKH Nghiên cứu khoa học NHCH Ngân hàng câu hỏi NXB Nhà xuất TL Tự luận TNKQ Trắc nghiệm khách quan SV Sinh viên Tẩn Thảo Trang K64A Trết học DANH MỤC CÁC BẢNG Tẩn Thảo Trang K64A Trết học DANH MỤC CÁC HÌNH Tẩn Thảo Trang K64A Trết học MỞ ĐẦU Lý chọn đề tài Hiện chất lượng giáo dục trở thành mối quan tâm chung toàn xã hội, đặc biệt chất lượng giáo dục đại học Trong nguồn lực sở đào tạo hạn chế, chưa đủ đáp ứng kịp thời việc tăng nhanh quy mô loại hình đào tạo vấn đề chất lượng đào tạo giáo dục đại học điểm nóng cần quan tâm Một nội dung quan trọng nhằm nâng cao chất lượng giáo dục đại học việc đổi phương pháp giảng dạy, có việc đổi phương pháp kiểm tra đánh giá kết học tập người học Có thể nói việc kiểm tra đánh giá hoạt động thiếu trình dạy học Thông qua kiểm tra đánh giá trình độ nhận thức, kỹ năng, kỹ xảo người học phát sai sót, lỗ hổng kiến thức… từ giúp giáo viên học sinh tự điều chỉnh hoạt động dạy hoạt động học Theo cách thức thực hệ thống câu hỏi trình dạy học, lý luận giáo dục xem xét kiểm tra đánh nhóm phương pháp dạy học Từ xưa tới kiểm tra đánh giá kết học tập người học nói chung thường sử dụng hình thức thi chủ yếu là: thi viết (tự luận) thi vấn đáp Thực tế, hai hình thức chưa kiểm tra, đánh giá đầy đủ kiến thức học người học cách nhanh gọn, toàn diện khách quan Thi viết (tự luận) thi vấn đáp, phạm vi đề hạn chế kiến thức, kỳ thi học kỳ thi tốt nghiệp nội dung đề không thâu tóm, không bao quát hết chương trình môn học không đánh giá xác lực người học Mặt khác, hai hình thức thi hạn chế tính khách quan, giáo viên thường huy động kiến thức một chương để đề thi, dễ dẫn đến học sinh học tủ, học lệch, quay cóp… Tẩn Thảo Trang K64A Trết học Hướng tới yêu cầu kiểm tra đánh giá công bằng, khách quan kết học tập người học, để đổi phương pháp kiểm tra đánh giá người ta bổ sung hình thức đánh giá khác sử dụng hình thức thi trắc nghiệm khách quan; ý tới việc đánh giá trình lĩnh hội tri thức người học; quan tâm tới việc tích cực hoá hoạt động học tập người học… Trên sở nắm kiến thức đo lường đánh giá giáo dục, cần tiến hành xây dựng ngân hàng câu hỏi trắc nghiệm (gồm câu hỏi TNKQ tự luận) chuẩn hoá cho môn học Sử dụng ngân hàng này, người học tự ôn tập kiểm tra kiến thức, giáo viên sử dụng để kiểm tra đánh giá học sinh Để làm điều này, phải việc đào tạo đội ngũ chuyên gia đánh giá giáo dục bồi dưỡng kiến thức khoa học đo lường đánh giá giáo dục cho giáo viên cấp học, bậc học Công đổi phương pháp giảng dạy trường đại học đặc biệt quan tâm, giảng viên tập huấn đổi phương pháp giảng dạy, phương pháp kiểm tra đánh giá, nhiên hiệu chưa cao Sử dụng ngân hàng câu hỏi thi trắc nghiệm khách quan trường khuyến khích, nhiên đa số câu hỏi trắc nghiệm khách quan giảng viên tự biên soạn chưa theo quy trình, đặc biệt câu hỏi sau sử dụng không phân tích, đánh giá nên đề thi/ kiểm tra chưa chuẩn chất lượng không cao Trước tình vậy, chọn đề tài luận văn: “Đánh giá quy trình thiết kế đề thi trắc nghiệm khách quan Khoa Khoa học Tự nhiên Xã hội (nay trường Đại học Khoa học) – Đại học Thái Nguyên” Kết nghiên cứu luận văn tài liệu cần thiết góp phần vào trình nâng cao chất lượng hiệu việc biên soạn thiết kế đề thi trắc nghiệm khách quan đơn vị, đồng thời giúp đưa Tẩn Thảo Trang K64A Trết học giải pháp nhằm nâng cao kỹ giảng viên việc thiết kế câu hỏi TNKQ dùng để kiểm tra đánh giá kết học tập sinh viên Mục đích nghiên cứu đề tài Đánh giá quy trình hiệu việc thiết kế sử dụng đề thi trắc nghiệm khách quan Nhà trường; Đưa quy trình chuẩn thiết kế đề thi trắc nghiệm khách quan Đưa giải pháp nhằm nâng cao kỹ thiết kế đề thi TNKQ giảng viên Nhiệm vụ nghiên cứu đề tài Để thực mục đích trên, đề tài có nhiệm vụ sau: Khảo sát thực trạng quy trình, cách thức thiết kế đề thi trắc nghiệm khách quan giảng viên Trường Phân tích câu hỏi trắc nghiệm khách quan đề thi sử dụng (căn vào kết trả lời trắc nghiệm sinh viên) Đưa quy trình chuẩn thiết kế đề thi trắc nghiệm khách quan Giới hạn, phạm vi nghiên cứu Đề tài nghiên cứu phương pháp, cách thức thiết kế đề thi trắc nghiệm khách quan giảng viên Trường; Nghiên cứu, đánh giá câu hỏi trắc nghiệm khách quan số đề thi TNKQ sử dụng Trường, từ đề xuất quy trình chuẩn thiết kế đề thi TNKQ Câu hỏi nghiên cứu/ giả thuyết nghiên cứu đề tài Câu hỏi nghiên cứu Hiện giảng viên Trường thiết kế đề thi TNKQ sở nào? Theo quy trình nào? Các giảng viên có nắm quy trình thiết kế đề thi TNKQ hay không? Tẩn Thảo Trang K64A Trết học Đề thi giảng viên có đáp ứng yêu cầu kiểm tra đánh giá thành học tập hay không? Giả thuyết nghiên cứu Việc thiết kế đề thi TNKQ Nhà trường hoàn toàn theo tính chủ quan giảng viên Chất lượng câu hỏi, đề thi TNKQ giảng viên biên soạn không cao, không đánh giá xác lực sinh viên Khách thể đối tượng nghiên cứu 6.1 Khách thể nghiên cứu Các giảng viên giảng dạy Trường áp dụng hình thức thi TNKQ cho kỳ thi Nhà trường Các thi TNKQ (kết thi TNKQ sinh viên làm) 6.2 Đối tượng nghiên cứu Nghiên cứu cách thức, quy trình thiết kế đề thi TNKQ giảng viên Trường Phương pháp nghiên cứu Nghiên cứu lý thuyết Nghiên cứu tài liệu đo lường đánh giá giáo dục Nghiên cứu thực nghiệm Quan sát: quan sát trình thực đổi kiểm tra đánh giá giảng viên, trình thử nghiệm xây dựng ngân hàng câu hỏi TNKQ Điều tra: phiếu hỏi vấn để tìm hiểu quy trình thiết kế đề thi TNKQ giảng viên Trường Phân tích tổng kết kinh nghiệm Phương pháp Toán học Sử dụng phần mềm SPSS phân tích số liệu thống kê Sử dụng phần mềm chuyên dụng Quest, ConQuest Cấu trúc luận văn Tẩn Thảo Trang K64A Trết học Mở đầu Chương Cơ sở lý luận tổng quan quy trình thiết kế đề thi Chương Thực trạng quy trình thiết kế đề thi TNKQ trường Đại học Khoa học – Đại học Thái Nguyên Chương Một số biện pháp nâng cao hiệu quy trình thiết kế đề thi TNKQ trường Đại học Khoa học Kết luận kiến nghị Tài liệu tham khảo Phụ lục Tẩn Thảo Trang K64A Trết học CHƯƠNG CƠ SỞ LÝ LUẬN VÀ TỔNG QUAN 1.1Lịch sử vấn đề nghiên cứu 1.1.1 Trên giới Ở Châu Âu Mỹ khoa học đo lường giáo dục phát triển mạnh vào thời kì trước sau chiến tranh giới thứ hai (mặc dù khoa học đo lường giáo dục xem bắt đầu cách kỉ) Để đánh dấu bước phát triển mạnh, lĩnh vực đo lường giáo dục có dấu mốc quan trọng, loạt trắc nghiệm kĩ thuật đời như: Trắc nghiệm trí tuệ Stanford-Binet xuất năm 1916, trắc nghiệm thành học tập tổng hợp Stanford Achievement Test đời vào 1923 Với việc đưa vào chấm trắc nghiệm máy IBM năm 1935, việc thành lập National Council on Measurement in Education (NCME) vào thập niên 1950 đời Educational Testing Services (ETS) năm 1947, ngành công nghiệp trắc nghiệm hình thành Mỹ Từ đến khoa học đo lường tâm lý giáo dục phát triển liên tục Quá trình phát triển khoa học đo lường giáo dục phản hồi mà trình phát triển phải chịu phê bình trích cách thường xuyên, phê bình trích không đánh đổ khoa học đo lường giáo dục, mà làm cho khoa học đo lường giáo dục có sở điều chỉnh thiếu sót khuyết điểm, chưa làm khoa học đo lường đánh giá giáo dục phát triển mạnh mẽ [18] Ngành công nghiệp trắc nghiệm Mỹ ước tính năm số lượt trắc nghiệm tiêu chuẩn hoá cỡ 1/4 tỉ trắc nghiệm giáo viên soạn lên đến số tỉ Ngành công nghiệp trắc nghiệm phát triển nhanh kéo theo loạt ngành liên quan phát triển theo như: ngành công nghệ thông tin, lí thuyết đo lường tâm lí phát triển giáo dục Từ việc nâng cao độ 10 Tẩn Thảo Trang K64A Trết học trường khoa chất lượng biên soạn đề thi Đây lý mà số giáo viên chưa sử dụng hình thức thi TNKQ Các lý cho thấy GV chưa sử dụng sử dụng đề TNKQ để KTĐG KQHT cho SV Về thang điểm đề thi Theo kết điều tra GV cho rằng, với câu hỏi tự luận, câu hỏi vấn đáp GV thường cho điểm câu, ý chi tiết câu hỏi, GV cho điểm tùy theo nội dung làm SV tâm trạng GV chấm thi Nếu điểm lớp tương đối thấp SV viết trả lời ý đạt số điểm định mà chưa cần phân tích, bình luận Còn điểm lớp tương đối cao SV không điểm cao không phân tích bình luận ý Mặt khác, với thi hai GV chấm thi khác cho kết khác Điều dẫn đến thiếu khách quan công Từ trước đến đề thi tự luận vấn đáp thường tập trung vào số vấn đề trọng tâm SV thường đoán mò, học tủ số vấn đề Có thi đo lực SV mức biết, hiểu phân tích Bởi đa số SV đạt điểm cao, mức điểm chênh lệch không nhiều, GV khó phân biệt SV có lực thấp với lực cao SV giỏi hoàn thành thi cách dễ dàng, không đòi hỏi phải tư nhiều Từ SV thường làm theo kiến thức kỹ mà GV giảng em có khả tổng hợp vấn đề, đánh giá sáng tạo Cũng có thi đa số SV đạt kết thấp Hơn đề thi tự luận thường cho điểm câu, ý nhỏ cho điểm tùy theo viết SV tâm trạng GV chấm Có GV thấy điểm số trung bình lớp thấp chấm nhẹ tay đi, ngược lại, thấy điểm lớp cao lại chấm chặt tay hơn, điều cho thấy việc đánh giá KQHT SV thiếu xác đề thi không đảm bảo lượng kiến thức 66 Tẩn Thảo Trang K64A Trết học Gần số Khoa Bộ môn trường có sử dụng hình thức thi TNKQ nhiên chưa đầu tư mức Từ việc soạn thảo đề thi phân tích câu hỏi sau thi chưa đáp ứng yêu cầu kỹ thuật Chính có đề thi thường bao gồm câu hỏi đơn giản, có câu hỏi lại tối nghĩa nên SV thường làm cách thụ động Có đề thi vừa dài lại vừa khó dẫn đến SV không hiểu, làm thi không đủ thời gian số câu chưa làm chọn lung tung mà không kịp suy nghĩ… Như vậy, qua phân tích thấy với quy trình thiết kế đề thi TNKQ phần lớn khoa môn trường ĐHKH không đánh giá xác lực SV 2.3.3 Thực trạng phân tích xử lý kết thi Phân tích kết thi Kết điều tra cho thấy khoảng 34% GV cho họ có phân tích câu hỏi thi sau chấm 66% không phân tích Đây điều đáng quan tâm sau chấm thi GV không quan tâm xem đề thi cho SV có phù hợp với mục tiêu học phần đề hay không? Có bao phủ nội dung chương trình đào tạo? Có đảm bảo khách quan công phù hợp với lực SV không? Thực trạng cho thấy việc đề việc kiểm tra đánh giá cho SV nhiều bất cập Phân tích độ khó 67 Tẩn Thảo Trang K64A Trết học Bảng Tỉ lệ giáo viên phân tích độ khó Mức độ GV thường xuyên Thường Tần suất Thỉnh 11 Hiếm 13 Không 25 Tổng 31 80 % 13,75 16,25 31,25 38,75 100,0 Có tới 70% GV không phân tích độ khó sau thi, tương ứng với 30% GV thường xuyên phân tích độ khó đề thi Điều chứng tỏ GV coi nhẹ việc phân tích đề thi, họ cho việc làm không cần thiết tốn thời gian Phân tích độ phân biệt Bảng Tỉ lệ giáo viên phân tích độ phân biệt Mức độ GV thường xuyên Thường Tần suất Thỉnh 18 13 Hiếm 17 Không 32 Tổng 80 % 22.5 16.25 21.25 40 100,0 Có khoảng 60% giáo viên không phân tích độ phân biệt đề thi Điều giải thích chấm thi xong GV thường không quan tâm xem với SV giỏi SV trung bình yếu có kết thi Kết hợp với vấn sâu thu số lý sau: Thứ nhất, GV phải dạy nhiều Thứ hai, số GV cho đề thi họ chắn đạt chất lượng nên không cần phải phân tích đề thi Thứ ba, số GV cho việc quy định nên họ không làm Họ làm yêu cầu có kinh phí hỗ trợ 68 Tẩn Thảo Trang K64A Trết học Phân tích, xử lý câu hỏi thi 70 60 50 40 30 19 (23,6%) 20 10 61 (76.4%) Được bồi dưỡng Chưa bồi dưỡng Hình 2.6 cho thấy thông tin GV bồi dưỡng kỹ phân tích câu hỏi thi thi Kết điều tra cho thấy, phần lớn GV tham gia khảo sát chưa bồi dưỡng việc phân tích xử lý câu hỏi thi thi Chỉ có số GV bồi dưỡng nhiều lý khác nên đa số họ không thực công việc Theo điều tra, sau GV chấm thi cho SV xong thường nhận xét SV làm tốt nên điểm cao làm chưa tốt nên bị điểm thấp họ nghe phản hồi từ phía SV đề thi khó hay dễ Có GV sau chấm xong tìm hiểu vấn đề như: Mục tiêu đề thi có đạt mục tiêu học phần không? Các câu hỏi đề thi có đáp ứng mục tiêu kỳ thi không? Dạng thức câu hỏi có phù hợp không? Các câu hỏi diễn đạt ngắn gọn, dễ hiểu chưa? Kết điều tra cho thấy thực trạng đa số GV trường ĐHKH sau đề, coi thi, chấm thi xong không phân tích câu hỏi thi thi Nguyên nhân vấn đề chưa 69 Tẩn Thảo Trang K64A Trết học đào tạo, bồi dưỡng kiến thức, mặt khác vấn đề thời gian kinh phí cho vấn đề 2.3.4 Thực trạng chất lượng đề thi Để biết chất lượng đề thi nào, việc nghiên cứu đề thi sử dụng, cần phân tích kết làm SV Trong khuôn khổ luận văn này, tập trung nghiên cứu phân tích vài đề thi TNKQ, phân tích kết làm thí sinh phân tích 01 đề thi lý thuyết khảo thí phần minh họa chất lượng đề thi trường Nghiên cứu đề thi sử dụng: Đề thi Giải tích A1; Đề thi Xã hội học đại cương; Đề thi Khoa học môi trường đại cương; Trên thực tế, phần lớn giảng viên sau chấm thi/ kiểm tra xong phản hồi lại cho sinh viên thi/ kiểm tra đó, nhận xét rút kinh nghiệm cho sinh viên không tự đánh giá đề thi/kiểm tra Thực tế từ trước đến nhà trường chưa có chương trình bồi dưỡng việc biên soạn đề thi cho giảng viên, việc soạn thảo đề thi TNKQ hoàn toàn mang tính cá nhân, giảng viên hiểu kỹ thuật xây dựng câu hỏi TNKQ đến đâu biên soạn đến đó, câu hỏi thi đề thi liệu có đáp ứng yêu cầu kỹ thuật? Để hiểu rõ vấn đề cần xem xét tiêu chí như: cân đối thời gian thi, độ khó độ phân biệt, độ phù hợp… Nghiên cứu đề thi lớp sinh viên (lớp cử nhân Quản lý xã hội K6) với môn học khác Giả sử có nhóm mẫu 50 sinh viên mà lực họ phân bố theo dạng chuẩn hình 2.7 sau: 70 Tẩn Thảo Trang K64A Trết học Đề thi Xã hội học đại cương: Theo kết thi TNKQ, học phần Xã hội học đại cương với 60 câu hỏi MCQ với thời gian thi 60 phút (xem thông tin chi tiết Phụ lục 2.2) với lớp 50 thí sinh Trung bình thời gian trả lời câu hỏi 1phút/ 1câu Kết phân tích cụ thể hình 2.8 sau: Bảng Kết thi thử nghiệm học phần 20 15 19 S thí sinh đ t đ c 14 11 10 2 71 10 Tẩn Thảo Trang K64A Trết học K t qu thi Nhìn hình thấy kết thi lệch bên trái Theo kết thu được, có 26% sinh viên đạt điểm trung bình 66% sinh viên đạt điểm trung bình Có sinh viên đạt điểm thấp điểm có sinh viên đạt điểm cao điểm Như thấy đề thi không phù hợp so với lực sinh viên Điều phù hợp với thông tin thu tiến hành vấn sâu sinh viên, sinh viên cho đề thi không khó nhiên nội dung nhiều, thời gian làm không đủ Có thể kết luận thời gian thi không phù hợp với số lượng nội dung câu hỏi thi Với sinh viên có lực cao làm 70% số lượng câu hỏi thi hết thời gian làm Đề thi học phần Giải tích A1: Với 20 câu hỏi TNKQ dạng MCQ, đề thi học phần Giải tích A1 có thời gian làm 90 phút (xem thông tin chi tiết phụ lục 2.3) Kết phân tích cho thấy đa số sinh viên cho đề thi vừa phải, nhiên thời gian làm tương đối nhiều (90 phút) nên hầu hết sinh viên làm hết câu hỏi thi Điều cho thấy thời gian thi không cân độ khó số lượng câu hỏi (4,5 phút/1 câu) 20 15 10 17 S t h í s i n 13 72 Tẩn Thảo Trang K64A Trết học 3 10 K t qu thi Hình 2.9 cho thấy biểu đồ lệch bên phải, có 60% sinh viên đạt điểm (7 đến điểm), 18% sinh viên đạt điểm giỏi (9 đến 10 điểm) có 22% sinh viên đạt điểm trung bình (5 điểm) Điểm thấp sinh viên học phần điểm điểm cao 10 điểm Kết cho thấy đề thi có nhiều câu dễ không đánh giá lực sinh viên giỏi không phân loại sinh viên Như vậy, qua việc phân tích đề thi TNKQ trên, khẳng định với tập hợp thí sinh có lực, đề thi khác cho kết khác Có thể tạm kết luận đề thi học phần Xã hội học đại cương khó Đề thi thiếu câu dễ nên đa số thí sinh có kết trung bình, thời gian đề thi không phù hợp với số lượng độ khó câu hỏi thi Đề thi có độ phân biệt thấp không phân biệt thí sinh có lực khác nhau, dẫn đến độ tin cậy độ giá trị đề thi thấp Phân tích tương tự đề thi Giải tích A1 ta kết luận đề thi tương đối dễ thời gian thi nhiều Như vậy, nói việc biên soạn đề thi chưa tốt không phù hợp không đánh giá hết lực thí sinh Phân tích đề thi TNKQ học phần “Khoa học môi trường đại cương” lý thuyết khảo thí đại: Đây đề thi TNKQ giảng viên Khoa Khoa học Môi trường tự biên soạn để đánh giá KQHT sinh viên năm thứ ngành Cử nhân KHMT, học kỳ II năm học 2008-2009 73 Tẩn Thảo Trang K64A Trết học Khi phân tích đề thi TNKQ lý thuyết khảo thí đại, thiết kế đề thi tốt đánh giá xác lực thí sinh hình 2.10 sau: Pupils distribution Item distribution Đề thi kết thúc học phần Khoa học môi trường đại cương bao gồm 50 câu hỏi, thời gian thi 60 phút (xem chi tiết phụ lục 2.4) Sau chấm thi, nhập số liệu phân tích kết phần mềm Quest, ta có kết thể bang 5, 2.6 sau: Summary of item Estimates ==================== Mean 00 SD SD (adjusted) Reliability of estimate 1.53 1.48 63 đạt lớn thấp Fit Statistics =============== 74 Tẩn Thảo Trang K64A Trết học Infit Mean Square Outfit Mean Square Mean 97 Tốt Mean 1.10 SD Khôngtốt SD 74 28 Infit t Outfit t Mean -.12 Mean 13 SD 1.72 SD 1.68 Summary of case Estimates ========================= Mean 80 SD SD (adjusted) Reliability of estimate 99 91 74 Fit Statistics =============== Infit Mean Square Outfit Mean Square Mean 1.10 SD 28 SD 77 Infit t Outfit t Mean -.04 Mean 16 SD SD 1.03 1.33 75 1.00 Mean Tẩn Thảo Trang K64A Trết học Căn vào mục 1.6.3 chương 1, thấy rằng: SD = 1.53 lớn, không đạt Reliability of estimate = 0.63 thấp Infit Mean Square có SD = 0.28 không tốt Item Fit 27/ 1/10 22:17 all on khmtdc (N = 53 L = 50 Probability Level= 50) INFIT MNSQ 45 50 56 63 71 83 1.00 1.20 1.40 1.60 + -+ -+ -+ -+ -+ -+ + -+ -+ item item item item item item item item item 10 item 10 11 item 11 12 item 12 13 item 13 * 14 item 14 15 item 15 16 item 16 17 item 17 18 item 18 19 item 19 20 item 20 * * * * * * | | | | *| | | | | | * |* | * * * * * 76 * | | | | | | * | * * Tẩn Thảo Trang K64A Trết học 21 item 21 22 item 22 23 item 23 24 item 24 25 item 25 26 item 26 27 item 27 * 28 item 28 * 29 item 29 30 item 30 * 31 item 31 | * 32 item 32 33 item 33 34 item 34 35 item 35 36 item 36 37 item 37 38 item 38 39 item 39 Căn vào phân bố 50 câu * * * | | | | | * | | | | | * * * | * * | | * * | * | *| | * * | hỏi cho thấy: có 15/50 câu hỏi không mô hình chúng không tạo thành cấu trúc Các câu hỏi nằm khoảng 0.77-1.30 Các câu hỏi 2, 8, 11, 13, 15, 17, 18, 24, 27-30, 32, 38 44 chưa tốt, cần phải loại bỏ chỉnh sửa để chúng có cấu trúc với câu hỏi lại Item Estimates (Thresholds) 27/ 1/10 22:17 all on khmtdc (N = 53 L = 50 Probability Level= 50) -4.0 | | | | | | | 77 44 Tẩn Thảo Trang 3.0 2.0 1.0 -1.0 -2.0 -3.0 -4.0 | | | | XX | | | | XX | | | XXXX | XXXXX | XXXXXXXXXXX| XXXXXX | XX | X | X | X | XXXXX | XXX | | X | X | | X | | X | | | | | | | | | | | | | | | | | | | | | | 78 XXXXX K64A Trết học 26 19 39 14 20 11 41 29 49 33 45 32 27 18 13 17 37 24 42 47 43 22 38 31 50 25 15 35 21 10 30 16 48 12 40 36 34 28 46 23 Tẩn Thảo Trang K64A Trết học -Each X represents students Căn vào hình 2.12 – so sánh lực thí sinh độ khó câu hỏi, cho thấy thông tin đề thi tương đối dễ so với lực thí sinh Các câu hỏi có độ khó nằm khoảng -3.5 đến 3.2 thang logit lực thí sinh nằm khoảng -1.0 đến 2.8 thang logit Có 19 câu hỏi: 3, 15, 21, 2, 6, 10, 30, 7, 8, 16, 48, 12, 40, 36, 34, 23, 28, 46 dễ so với lực thí sinh (chiếm 38%)) Cần bổ sung thêm câu hỏi có độ khó nằm khoảng từ đến 1.8 thang logit (vì có nhiều thí sinh có lực khoảng này.) Qua việc phân tích đề thi TNKQ học phần Khoa học môi trường đại cương lý thuyết khảo thí đại, thấy đề thi chưa phù hợp với lực thí sinh, câu hỏi thi chưa tạo thành cấu trúc có nhiều cá thể ngoại lai Độ tin cậy đề thi không cao, dẫn đến độ giá trị đề thi thấp, hay nói cách khác, đề thi chưa đạt yêu cầu đề thi TNKQ 2.4 Kết luận chương Việc phân tích thực trạng quy trình thiết kế đề thi TNKQ trường ĐHKH tồn vấn đề sau: Đề thi khó có khả bao phủ chương trình học, tiêu chí đánh giá chưa rõ ràng, quy trình chấm điểm chưa đảm bảo Thậm chí có đề thi chưa phù hợp với chương trình học (về nội dung, độ khó, thời gian thi…) Các đề thi biên soạn phần lớn dựa theo kinh nghiệm chủ quan cá nhân chưa theo quy trình Chưa trọng đến chất lượng đề thi Với thực trạng trên, để nâng cao hiệu việc thiết kế đề thi TNKQ đơn vị, cần có biện pháp cụ thể để khắc phục Qua thăm dò ý kiến GV, 79 Tẩn Thảo Trang K64A Trết học họ mong muốn nhà trường bồi dưỡng kiến thức việc biên soạn đề thi TNKQ, việc phân tích xử lý kết thi TNKQ 80 ... tích, đánh giá nên đề thi/ kiểm tra chưa chuẩn chất lượng không cao Trước tình vậy, chọn đề tài luận văn: Đánh giá quy trình thi t kế đề thi trắc nghiệm khách quan Khoa Khoa học Tự nhiên Xã hội (nay. .. Thảo Trang K64A Trết học Mở đầu Chương Cơ sở lý luận tổng quan quy trình thi t kế đề thi Chương Thực trạng quy trình thi t kế đề thi TNKQ trường Đại học Khoa học – Đại học Thái Nguyên Chương Một... dụng đề thi trắc nghiệm khách quan Nhà trường; Đưa quy trình chuẩn thi t kế đề thi trắc nghiệm khách quan Đưa giải pháp nhằm nâng cao kỹ thi t kế đề thi TNKQ giảng viên Nhiệm vụ nghiên cứu đề tài