Nghiên cứu quy trình xây dựng, quản lý và sử dụng ngân hàng câu hỏi thi tại viện đại học mở hà nội

BỘ GIÁO DỤC VÀ ĐÀO TẠO VIỆN ĐẠI HỌC MỞ HÀ NỘI BÁO CÁO TỔNG KẾT ĐỀ TÀI KHOA HỌC VÀ CƠNG NGHỆ CẤP VIỆN NGHIÊN CỨU QUY TRÌNH XÂY DỰNG, QUẢN LÝ VÀ SỬ DỤNG NGÂN HÀNG CÂU HỎI THI TẠI VIỆN ĐẠI HỌC MỞ HÀ NỘI Mã số: V2014 - 06 Chủ nhiệm đề tài: Ths Nguyễn Thị Hạnh Hà Nội tháng 12/2014 i MỤC LỤC A MỞ ĐẦU 1 Tính cấp thiết đề tài Tình hình nghiên cứu Mục đích nghiên cứu Đối tượng, phạm vi, ý nghĩa việc nghiên cứu nghiên cứu Nhiệm vụ nghiên cứu Phương pháp nghiên cứu Kết cấu đề tài B TỔNG KẾT KẾT QUẢ NGHIÊN CỨU CỦA ĐỀ TÀI CHƯƠNG I LÝ LUẬN CHUNG VỀ CÔNG TÁC XÂY DỰNG, QUẢN LÝ VÀ SỬ DỤNG NGÂN HÀNG ĐỀ THI 1.1 Khái quát kiểm tra đánh giá Giáo dục đào tạo 1.1.1 Khái niệm 1.1.2 Phân loại kiểm tra, đánh giá 11 1.1.3.Vị trí, vai trị việc Kiểm tra, Đánh giá hoạt động dạy-học 12 1.1.4 Các phương pháp, kiểm tra đánh giá xu hướng phát triển kiểm tra đánh giá kết học tập 13 1.1.4.1 Phương pháp kiểm tra, đánh giá truyền thống 15 1.1.4.2 Phương pháp kiểm tra, đánh giá thực tâm 21 1.2 Khái quát sở lý luận ngân hàng đề thi hết môn, hết học phần 23 1.2.1 Khái niệm ngân hàng đề thi 23 1.2.2 Các tiêu chuẩn đề thi 24 1.2.3 Các nguyên tắc đánh giá đề thi 25 1.2.4 Ý nghĩa việc xây dựng ngân hàng đề thi 29 2.5 Thực tiễn áp dụng ngân hàng đề thi giới Việt Nam 30 1.3 Điều kiện để áp dụng lý luận vào đề tài 31 Chương 2:THỰC TRẠNG CÔNG TÁC XÂY DỰNG, QUẢN LÝ, SỬ DỤNG ĐỀ THI HẾT MÔN TẠI VIỆN ĐẠI HỌC MỞ HÀ NỘI 32 2.1 Thực trạng công tác xây dựng đề thi 34 2.1.1 Xây dựng đề thi tự luận 34 2.1.1.1 Các Khoa xây dựng ngân hàng đề thi tự luận : 37 2.1.1.2 Các Khoa chưa có ngân hàng đề gồm: 40 2.1.2 Xây dựng ngân hàng đề thi trắc nghiệm 40 2.1.3 Xây dựng đề thi kết hợp tự luận trắc nghiệm 41 ii 2.2 Thực trạng công tác quản lý, sử dụng khai thác đề thi 43 2.2.1 Công tác quản lý, sử dụng ngân hàng đề thi (bộ đề thi) 43 2.2.2 Công tác quản lý, sử dụng đề thi Khoa chưa có ngân hàng đề, ngân hàng đề thi trắc nghiệm khách quan 49 Chương 3:CÁC GIẢI PHÁP NHẰM NÂNG CAO HIỆU QUẢ TRONG CÔNG TÁC QUẢN LÝ VÀ KHAI THÁC NGÂN HÀNG ĐỀ THI 52 3.1 Xác định rõ trách nhiệm đơn vị cá nhân Viện việc xây dựng, quản lý khai thác ngân hàng đề thi 52 3.2 Đầu tư ban đầu cho công tác biên soạn, xây dựng ngân hàng đề thi 54 3.3 Quy trình xây dựng, quản lý sử dụng ngân hàng đề thi 55 3.3.1 Biểu đồ trình quản lý ngân hàng đề thi 57 3.3.2 Mô tả theo dạng bảng 58 3.4 Ứng dụng Công nghệ thông tin quản lý ngân hàng đề thi 59 3.4.1 Một số u cầu mơ hình phần mềm quản lý ngân hàng đề thi: 59 3.4.2 Một số khái niệm: 60 3.4.3 Trình tự bước tạo lập quản lý đề thi 61 3.5 Nhiệm vụ cần thực năm học 2014-2015 62 KẾT LUẬN, KIẾN NGHỊ 64 TÀI LIỆU THAM KHẢO 66 iii DANH MỤC BẢNG, HÌNH VẼ Bảng 1.1: Các phương pháp kiểm tra đánh giá 15 Bảng 1.2: So sánh tương quan tự luận trắc nghiệm 20 Bảng 1.3 Đánh giá ưu điểm trắc nghiệm với tự luận 21 Hình 2.1 Sơ đồ quy trình quản lý, lưu trữ kế hoạch học tập lịch thi 44 Hình 2.2 Sơ đồ quy trình bốc thăm in đề thi 45 iv DANH SÁCH CỘNG TÁC VIÊN PHỐI HỢP THỰC HIỆN ĐỀ TÀI Đơn vị thực hiện: STT Phịng Khảo thí Đảm bảo chất lượng Họ tên Nhiệm vụ Nguyễn Thị Hạnh Chủ nhiệm đề tài Lê Trường Sơn Thành viên Nguyễn Việt Hùng Thành viên Đàm Thị Nhung Thành viên v BẢNG CÁC CHỮ VIẾT TẮT STT CHỮ VIẾT TẮT CHỮ VIẾT ĐẦY ĐỦ ĐHQG Đại học quốc gia ĐTTX Đào tạo từ xa ĐGCL Đánh giá chất lượng ĐH Đại học GD&ĐT Giáo dục Đào tạo KT&ĐBCL Khảo thí Đảm bảo chất lượng VLVH Vừa làm vừa học NXB Nhà xuất QLĐT Quản lý Đào tạo vi A MỞ ĐẦU Tính cấp thiết đề tài Thực Nghị Trung ương khóa VIII chủ trương Đảng, Nhà nước định hướng chiến lược phát triển GD&ĐT thời kỳ cơng nghiệp hóa, đại hóa, Hội nghị trung ương khóa XI ban hành Nghị số 29-NQ ngày 04/11/2013 đổi bản, toàn diện giáo dục đào tạo Trong nhấn mạnh vấn đề “quản lý giáo dục yếu kém” [1] cần có giải pháp cụ thể để khắc phục Nhiệm vụ Giáo dục ĐH Việt Nam cần mở rộng quy mô phải đôi việc nâng cao chất lượng Để giải toán cần nhiều đổi phụ thuộc nhiều yếu tố Một giải pháp “Đổi hình thức phương pháp thi, kiểm tra đánh giá kết giáo dục, đào tạo đảm bảo trung thực, khách quan” [1] cơng tác đo lường đánh giá chất lượng giáo dục đào tạo vấn đề then chốt hoạt động dạy học Hoạt động thi, kiểm tra đánh giá khâu quan trọng q trình Với thực tế sở đào tạo đại học Việt Nam nhiều bất cập, yếu như: Kiểm tra đánh giá cịn chưa xác, thiếu khách quan, chưa đề cập tới vai trò điều chỉnh hoạt động dạy học học thi chủ yếu với tư tưởng “thi cho xong”, thi đối phó nên việc chuẩn hóa hoạt động kiểm tra đáng giá nhu cầu thiết yếu giáo dục đào tạo Trong kiểm tra đánh giá có nhiều khâu mà kết khâu tác động không nhỏ đến hoạt động quản lý, hoạt động dạy, hoạt động học Để thực tốt khâu yếu tố quan trọng đề thi Một đề thi phải đạt tiêu chí độ tin cậy, độ giá trị , độ khó… hay nói cách khác phải đo kiến thức kỹ cần đo, có khả phân loại, đánh giá người học cách khách quan, xác công Để đạt yếu tố việc xây dựng, lựa chọn đề thi, sử dụng câu hỏi đề thi, cách tiếp cận vấn đề vơ quan trọng Muốn đạt điều yếu tố tiên số lượng câu hỏi tập môn học phải đầy đủ nội dung, bao phủ mảng kiến thức bám sát chương trình Viện Đại học Mở Hà Nội với mơ hình đào tạo đa ngành, đa cấp độ đặc biệt quan tâm đến phát triển đào tạo từ xa qua phương tiện đại cơng tác chuẩn bị hệ thống đánh giá cần quan tâm Với số lượng 40 nghìn sinh viên hệ từ xa học tập 70 trung tâm vệ tinh khắp đất nước, gần 10 nghìn sinh viên quy 14 chun ngành đào tạo công tác tổ chức thi liên tục theo tuần, theo tháng, theo học kỳ việc triển khai công tác thi, kiểm tra hết môn, hết học phần ngành Viện vô phức tạp; để đảm bảo quy chế Viện, cần phải tiêu tốn số lượng đề lớn Phòng Khảo thí Đảm bảo chất lượng (KT&ĐBCL) thành lập hoạt động năm nhằm tập trung, thống cơng tác khảo thí tiếp cận với cơng tác ĐBCL, khảo thí đại nên công tác dần tiến tới tập trung, thống chun mơn hóa dần thực Một cơng tác xây dựng, quản lý sử dụng ngân hàng đề thi hết môn cho hệ đào tạo Viện Thực trạng công tác xây dựng, quản lý sử dụng đề thi tản mạn Khoa, Trung tâm, Phòng Khảo thí quản lý đề thi dạng đóng gói niêm phong, có vài Khoa có hệ thống đề thi lưu giữ sử dụng Phịng Chính tính chủ động công tác đơn vị không cao Thêm nữa, công tác quản lý khai thác sử dụng đề thi thực cách thủ công, nhiều thời gian công sức mà hiệu lại không cao Để tiến tới hoạt động quản lý sử dụng thống ngân hàng đề cho hệ đào tạo bậc đại học Viện việc nghiên cứu đưa vào sử dụng “Quy trình xây dựng, quản lý sử dụng ngân hàng câu hỏi thi Viện Đại học Mở Hà Nội” vô cần thiết Tình hình nghiên cứu Cơng tác kiểm tra đánh giá ln song hành q trình đào tạo, Việt Nam có nhiều đề tài nghiên cứu vấn đề luận án tiến sỹ Cấn Thị Thanh Hương “Nghiên cứu quản lý kiểm tra, đánh giá kết học tập giáo dục đại học Việt Nam” [9], Đào Minh Quân Ngọ Hoa (2008), “Thi trắc nghiệm máy tính: kết ban đầu ĐH KHXH&NV”, Lê Đức Ngọc (1994), Vắn tắt Kỹ thuật kiểm tra, đánh giá, Ban Đào tạo, Trung tâm bảo đảm chất lượng nghiên cứu phát triển giáo dục, Đại học quốc gia Hà Nội [10] Trần Thị Tuyết Oanh (2002), “Đo lường đánh giá giáo dục”, Tạp chí Giáo dục, Cơng tác khơng nghiên cứu mà cịn có nhiều hội thảo liên quan như: Kỷ yếu hội thảo Kiểm định, đánh giá quản lý chất lượng đào tạo đại học, Nhà xuất ĐH Quốc gia Hà Nội, Trường ĐH Khoa học Tự nhiên, ĐH Quốc gia Hà Nội (2008), Tài liệu Hội nghị sơ kết cơng tác áp dụng yếu tố tích cực phương thức đào tạo theo tín học kỳ I, năm học 2007-2008 Tại Viện Đại học Mở Hà Nội có số nghiên cứu vấn đề như: (2010) Nguyễn Thị Thúy Hồng “Cải tiến quản lý nâng cấp chất lượng ngân hàng đề thi Tiếng Anh cho học viên không chuyên hệ Từ xa Viện Đại học Mở Hà Nội”, [8] (2013) Nguyễn Thị Diệp Đồ án tốt nghiệp đại học với đề tài “Xây dựng hệ thống quản lý ngân hàng đề thi hỗ trợ công tác tổ chức khảo thí” [5] Tuy nhiên cơng trình đưa kết việc xây dựng ngân hàng câu hỏi cho số môn cụ thể công tác hỗ trợ mà chưa xác định việc xây dựng theo hệ thống chương trình đào tạo theo tín Việc chuyển đổi cơng tác đào tạo từ niên chế sang tín thay đổi cách tiếp cận sinh viên dối với nội dung giảng dạy, đề tài sâu vào nghiên cứu thay đổi liên quan đến đánh giá sinh viên qua kỹ thu nhận theo mức độ hiểu sinh viên Để đo kiến thức sinh viên việc nghiên cứu để xây dựng đề thi quan trọng Như nói việc xây dựng, quản lý khai thác ngân hàng câu hỏi thi hết môn, hết học phần khơng trùng với cơng trình nghiên cứu trước Mục đích nghiên cứu - Nghiên cứu để đưa quy trình xây dựng, quản lý sử dụng ngân hàng câu hỏi thi đề thi hết môn, hết học phần cho hệ đào tạo Viện Đại học Mở Hà Nội nhằm quản lý hệ thống câu hỏi theo môn, chuyên ngành thống hệ đào tạo, giải pháp nhằm nâng cao chất lượng đáp ứng yêu cầu đổi toàn diện giáo dục đại học, đảm bảo phát triển bền vững Viện ĐH Mở HN Đối tượng, phạm vi, ý nghĩa việc nghiên cứu nghiên cứu - Cơ sở lý luận kiểm tra, đánh giá, ngân hàng đề thi dạng ngân hàng đề - Xu hướng xây dựng ngân hàng đề tổ chức kiểm tra, đánh giá - Thực tiễn công tác xây dựng, quản lý sử dụng đề thi Viện Đại học Mở Hà Nội - Phạm vi nghiên cứu cứu đề tài đề thi hết môn, hết học phần hệ đào tạo theo bậc đại học Viện Đại học Mở Hà Nội Nhóm nghiên cứu tập trung nghiên cứu việc xây dựng (đặt đề), quản lý sử dụng đề thi tự luận đề thi trắc nghiệm Các loại câu hỏi đặc thù dành riêng cho chuyên ngành đặc thù Viện thực hành thiết kế, thí nghiệm khơng nằm phạm vi nghiên cứu đề tài - Đề tài có ý nghĩa thực tế cho Viện Đại học Mở Hà Nội việc quản lý ngân hàng đề thi làm tư liệu tham khảo lĩnh vực đào tạo khác Thứ mặt khoa học: Hệ thống hóa bổ sung sở lý luận xây dựng, quản lý khai thác ngân hàng đề thi Thứ hai mặt thực tiễn: Căn kết phân tích trên, nhóm tác giả đưa mơ hình chuẩn quản lý khai thác ngân hàng đề thi - Các kết nghiên cứu đề tài làm sở cho đơn vị thuộc Viện thực công tác chuyên môn - Hướng phát triển đề tài dựa phần mềm quản lý ngân hàng câu hỏi để ứng dụng tích hợp ngân hàng đề thi Nhiệm vụ nghiên cứu - Cơ sơ lý luận vấn đề xây dựng, quản lý, sử dụng đề thi khái niệm liên quan khác từ đưa ý nghĩa, yêu cầu công tác xây dựng, quản lý sử dụng đề thi Viện Đại học Mở Hà Nội, trình đào tạo - Nghiên cứu thực trạng cơng tác xây dựng, quản lý sử dụng đề thi hết môn bậc đại học Viện Đại học Mở Hà Nội 02 năm học 2012-2013 2013-2014 - Yêu cầu đổi công tác xây dựng, quản lý sử dụng ngân hàng đề thi Nhà trường chuyển đào tạo niên chế sang tín - Đưa số giải pháp để nâng cao chất lượng công tác quản lý sử dụng đề thi Viện - Đưa quy trình đề thi dự thảo quy định công tác xây dựng, quản lý sử dụng ngân hàng đề thi Cán biên soạn hoàn chỉnh sản phẩm theo kết luận Hội đồng thẩm định, gửi phòng KT&ĐBCL Phòng KT&ĐBCL tiếp nhận, biên tập, quản lý, sử dụng 10 Thanh lý hợp đồng Điều 10 Cán biên soạn, phản biện, Hội đồng thẩm định Cán biên soạn - Cán biên soạn NHCHT trình độ đại học, cao đẳng: phải giảng viên có trình độ thạc sỹ trở lên, giảng dạy học phần lượt - Cán biên soạn NHCHT trình độ sau đại học: phải giảng viên có trình độ tiến sỹ trở lên, giảng dạy mơn học lượt - Mỗi mơn thi có cán biên soạn Cán phản biện - Cán phản biện NHCHT trình độ đại học, cao đẳng: phải cán giảng dạy có trình độ thạc sỹ trở lên, giảng dạy học phần lượt - Cán phản biện NHCHT trình độ sau đại học: phải giảng viên có trình độ tiến sỹ trở lên, giảng dạy mơn học lượt - Một NHCHT có hai cán phản biện, cán phản biện tồn nội dung NHCHT cán phản biện phần NHCHT - Nhiệm vụ cán phản biện: + Giải câu hỏi, viết tay theo mẫu (với câu hỏi thi tự luận, vấn đáp); kiểm tra đáp án câu hỏi, tập; nhận xét, kiến nghị nội dung: độ dài, độ khó, cách diễn đạt, sai xót (nếu có), thang điểm, kiến nghị chỉnh sửa … với câu hỏi; + Nhận xét kiến nghị về: bảng thống kê kiến thức, kỹ mức độ đánh giá; ma trận câu hỏi thi; cấu trúc đề thi phân bổ số lượng câu hỏi; phương án tổ hợp đề… Hội đồng thẩm định 75 - Hội đồng thẩm định Trưởng khoa đề nghị, Ban Giám hiệu phê duyệt; - Hội đồng thẩm định có thành viên Trưởng khoa, Phó trưởng khoa Trưởng mơn Chủ tịch HĐKH nhóm ngành làm Chủ tịch - Hội đồng thẩm định tổ chức nghiệm thu ngân hàng câu hỏi thi, kết luận HĐ thẩm định ý kiến cuối cùng, Hội đồng thẩm định chịu trách nhiệm trước Hiệu trưởng toàn nội dung nghiệm thu Điều 11 Mã hóa câu hỏi tổ hợp đề thi a) Mã hóa - Bộ NHCHT chia thành số gói tương ứng với số câu hỏi đề thi, câu hỏi thi gói có số điểm - Mỗi gói chia thành số nhóm theo nội dung chương nhóm nội dung gần - Mã hoá câu hỏi thi tự luận, vấn đáp: câu hỏi mã hóa theo cấu trúc: Câu x-y-Cz (… điểm) x: gói câu hỏi đề thi, dùng chữ số từ đến y: số thứ tự câu hỏi gói, dùng hai chữ số từ 01 đến 99 Cz: thể nhóm nội dung (hoặc chương), dùng ký hiệu từ C1 đến C9 Ví dụ: Câu 1-10-C1 (3,5 điểm), thuộc gói câu hỏi số đề thi, số thứ tự 10, nội dung chương 1, tỷ trọng điểm 3,5 điểm - Mã hoá câu hỏi thi trắc nghiệm: câu hỏi mã hóa theo cấu trúc: Câu x-y-Cz x: gói câu hỏi đề thi, dùng chữ số từ đến y: số thứ tự câu hỏi gói, dùng ba chữ số từ 001 đến 999 Cz: thể nhóm nội dung (hoặc chương), dùng ký hiệu từ C1 đến C9 b) Tổ hợp đề Ngân hàng câu hỏi thi phải có phương án hợp lý để tổ hợp đề thi hướng dẫn thực phương án Phương án tổ hợp phải rõ: 76 - Số lượng câu hỏi đề thi - Cách tổ hợp đề thi theo phương án: dùng hay nhiều phương án tổ hợp đề cho việc tổ hợp đề thuận tiện, khách quan, câu hỏi thi phân bố chương Điều 12 Kỹ thuật trình bày văn bản, mẫu biểu, hoàn chỉnh sản phẩm a) Kỹ thuật trình bày văn - Các mẫu biểu, văn trình bày form thiết kế sẵn (phần phụ lục) - Sử dụng bảng mã unicode, font Times New Romal, cỡ chữ 13 14, lề 1,5cm; lề 1,5cm; lề trái 3,0cm; lề phải 2,5cm - Không đánh số thứ tự tự động - Mỗi câu hỏi có phần đầu phần dẫn (đưa kiện, cung cấp thông tin cần thiết) phần sau phần hỏi Nếu phần hỏi có nhiều ý dùng ký hiệu “a)”, “b)”… để phân biệt ý hỏi - Nếu câu hỏi kèm theo hình vẽ, phải đánh số hình vẽ theo mã câu hỏi; chi tiết hình vẽ phải nhóm lại (group), tồn nội dung câu hỏi, hình vẽ đặt khung: + Nếu hình vẽ nhỏ đặt cột bên phải, nội dung câu hỏi đặt bên trái + Nếu hình vẽ lớn bố trí phía phần câu hỏi vẽ trang riêng b) Các mẫu biểu Các mẫu biểu dùng dùng cho biên soạn NHCHT thiết kế sẵn phần Phụ lục - Phụ lục 1: Mẫu biểu dùng cho lập kế hoạch, nghiệm thu, toán - Phụ lục 2: Mẫu biểu dùng cho biên soạn, phản biện NHCHT tự luận, vấn đáp - Phụ lục 3: Mẫu biểu dùng cho biên soạn, phản biện NHCHT trắc nghiệm 77 - Phụ lục 4: Mẫu biểu dùng cho biên soạn, phản biện NHCHT tự luận + trắc nghiệm c) Hoàn chỉnh sản phẩm Sau nghiệm thu, cán biên soạn có trách nhiệm tập hợp, nộp phòng KT&ĐBCL hồ sơ sau đây: - Câu hỏi đáp án CB biên soạn thực hiện, bao gồm: Bảng thống kê kiến thức, kỹ mức độ đánh giá; Cấu trúc đề thi phân bổ số lượng câu hỏi; Bộ ngân hàng câu hỏi thi (chia theo gói, nhóm); Đáp án; Phương án tổ hợp đề thi; Danh mục câu hỏi (hoặc danh mục đáp án với câu hỏi trắc nghiệm) Các văn đóng thành lưu đĩa CD, gồm 01 tệp văn (tệp doc), kèm 01 tệp PDF, - Bài giải nhận xét cán phản biện thực đóng thành quyển, bao gồm: Bài giải cán phản biện; Nhận xét kiến nghị cán phản biện - Bộ hồ sơ Hội đồng thẩm định, bao gồm: Phiếu đánh giá thành viên hội đồng, Biên nghiệm thu - Hồ sơ toán, bao gồm: Giấy đề nghị toán, bảng kê kèm theo hồ sơ Điều 13 Kinh phí biên soạn ngân hàng câu hỏi thi Nhà trường hỗ trợ kinh phí biên soạn ngân hàng câu hỏi thi theo thời điểm theo Quy chế chi tiêu nội Viện Chương BIÊN SOẠN BỘ ĐỀ THI Điều 14 Các môn học biên soạn đề thi Bộ đề thi dùng chung môn học biên soạn trường hợp sau: - Các học phần, môn học, mô đun không tổ chức biên soạn NHCHT quy định Điều 78 - Các học phần, môn học chưa biên soạn NHCHT Điều 15 Quy định số lượng đề thi Thi tự luận: số lượng đề thi cho học phần (môn học) 02 đề/1 lớp thi Nếu học phần (mơn học) có lớp thi cần có đề thi Thi vấn đáp: biên soạn tối thiểu 20 đề gốc/1 môn thi Từ đề gốc tổ hợp thành đề thi thức cho phịng thi khơng có HSSV trùng đề thi Hình thức viết tiểu luận, tập dài, đồ án, thực hành: khoa chọn số lượng đề cần thiết từ đến 15 đề cho số đề bao qt tồn phần học phần (mơn học) thực theo sinh viên theo nhóm từ đến sinh viên Điều 16 Thời hạn sử dụng đề thi Bộ đề thi sử dụng thi học kỳ chính, kỳ thi phụ thi kết thúc học phần, kết thúc môn học Điều 17 Qui trình biên soạn đề thi Bộ mơn phân công cán biên soạn đề thi cho môn thi Bộ môn thống nội dung kiến thức, kỹ cần kiểm tra, đánh giá; thống cấu trúc đề thi Cán biên soan đề thi vào nội dung thống mục biên tập thành đề thi kèm theo đáp án Trưởng môn kiểm tra, ký duyệt đề thi, đáp án gửi đề thi phòng KT&ĐBCL Chương TỔ CHỨC THỰC HIỆN Điều 18 Trách nhiệm đơn vị Các khoa, môn trực thuộc lập kế hoạch biên soạn NHCHT trình Ban Giám hiệu phê duyệt tổ chức biên soạn, nghiệm thu ngân hàng câu hỏi thi; đạo môn biên soạn đề thi 79 Phịng KT&ĐBCL xây dựng hợp đồng, đơn đốc, kiểm tra việc thực kế hoạch đơn vị, tiếp nhận ngân hàng câu hỏi thi, đề thi; biên tập, chuẩn hoá đưa vào sử dụng Phịng Kế hoạch – Tài kiểm tra hồ sơ, tốn kinh phí theo Hợp đồng ký Điều 19 Quản lý ngân hàng câu hỏi thi, đề thi Phịng Khảo thí Đảm bảo chất lượng chịu trách nhiệm quản lý ngân hàng câu hỏi thi, đề thi với hình thức tự luận, trắc nghiệm, vấn đáp Các khoa, môn trực thuộc chịu trách nhiệm quản lý đề thi thực hành, mô-đun, tiểu luận, tập lớn, đồ án môn học Bộ đề thi không công bố cho cơng khai Ngân hàng câu hỏi thi có số lượng 200 câu/ môn công bố cho công khai, việc công bố khoa, môn trực thuộc phòng KT&ĐBCL đề nghị, Hiệu trưởng định Chương KHEN THƯỞNG VÀ XỬ LÝ VI PHẠM Điều 20 Khen thưởng Các đơn vị, cá nhân có nhiều đóng góp, hồn thành tốt nhiệm vụ biên soạn NHCHT, đề thi xét thành tích thi đua theo quy định Trường hợp có thành tích đặc biệt Hiệu trưởng xem xét, định khen thưởng Điều 21 Xử lý vi phạm Đơn vị, cá nhân tham gia biên soạn NHCHT, đề thi có hành vi vi phạm quy định (bị phát làm nhiệm vụ sau kỳ thi), có đủ chứng cứ, tuỳ theo mức độ nặng nhẹ, bị xử lý kỷ luật / VIỆN TRƯỞNG 80 THUYẾT MINH ĐỀ TÀI NGHIÊN CỨU KHOA HỌC VÀ CÔNG NGHỆ CẤP VIỆN NĂM 2014 TÊN ĐỀ TÀI: “Nghiên cứu quy trình xây dựng, quản lý sử dụng ngân câu hỏi thi Viện Đại học Mở Hà Nội” MÃ SỐ: V2014 - 06 THỜI GIAN THỰC HIỆN Từ tháng 03 năm 2014 đến tháng 12 năm 2014 CHỦ NHIỆM ĐỀ TÀI Họ tên : Nguyễn Thị Hạnh Học vị: Thạc sỹ Chức vụ: Phó trưởng phịng Đơn vị: Phịng Khảo thí Đảm bảo chất lượng – Viện Đại học Mở Hà Nội Điện thoại CQ: 043.6231327 Fax:0436231327 E-mail: hanhnt@hou.edu.vn Điện thoại DĐ: 091 2166340 Mã số thuế: 8009475813 DANH SÁCH NHỮNG NGƯỜI THỰC HIỆN ĐỀ TÀI VÀ PHỐI HỢP Họ tên Đơn vị công tác Lê Trường Sơn Phịng Khảo thí & Đảm bảo chất lượng Nguyễn Việt Hùng Phịng Khảo thí & Đảm bảo chất lượng Đàm Thị Nhung Phịng Khảo thí & Đảm bảo chất lượng TÍNH CẤP THIẾT CỦA VIỆC NGHIÊN CỨU ĐỀ TÀI Thực Nghị Trung ương khóa VIII chủ trương Đảng, Nhà nước định hướng chiến lược phát triển giáo dục-đào tạo thời kỳ cơng nghiệp hóa, đại hóa, Hội nghị trung ương khóa XI ban hành Nghị số 29-NQ ngày 04/11/2013 đổi bản, tồn diện giáo dục Trong nhấn mạnh vấn đề “quản lý giáo dục yếu kém” (trích Nghị 29NQ/TW ngày 4/11/2013) cần có giải pháp cụ thể để khắc phục Nhiệm vụ Giáo dục ĐH Việt Nam cần mở rộng quy mô phải đôi việc nâng cao chất lượng Để giải toán cần nhiều đổi phụ thuộc nhiều yếu tố Một giải pháp “Đổi hình thức phương pháp thi, kiểm tra đánh giá kết giáo dục, đào tạo đảm bảo trung thực, khách quan” (trích Nghị 29-NQ/TW ngày 4/11/2013) cơng tác đo lường đánh giá chất lượng giáo dục đào tạo vấn đề then chốt hoạt động dạy học Hoạt động thi, kiểm tra đánh giá khâu quan trọng q trình Với thực tế sở đào tạo đại học Việt Nam nhiều bất cập, yếu như: Kiểm tra đánh giá cịn chưa xác, thiếu khách quan, chưa đề cập tới vai trò điều chỉnh hoạt động dạy học học thi chủ yếu với tư tưởng “thi cho xong”, nên việc chuẩn hóa hoạt động kiểm tra đáng giá nhu cầu thiết yếu giáo dục đào tạo Có nhiều yếu tố tác động đến hoạt động kiểm tra đánh kết kiểm tra đánh giá như: công tác đề thi, tổ chức thi, chấm thi Trong đề thi tốt, phù hợp có vai trị quan trọng hoạt động Một đề thi tốt phải đạt tiêu chí độ tin cậy, độ giá trị, độ khó… hay nói cách khác phải đo kiến thức kỹ cần đo, có khả phân loại, đánh giá người học cách khách quan, xác cơng Để đạt yếu tố việc xây dựng, lựa chọn đề thi, sử dụng câu hỏi đề thi vơ quan trọng Muốn đạt điều yếu tố tiên đề thi tập môn học phải đầy đủ nội dung, bao phủ mảng kiến thức bám sát chương trình mơn học Muốn vậy, việc thiết kế đề thi, lựa chọn đề thi cần khoa học phù hợp thời gian, lượng kiến thức Điều làm có số lượng câu hỏi đủ lớn, quản lý khoa học Tại Viện Đại học Mở Hà Nội, với đặc thù đa dạng loại hình đào tạo, với số lượng 10 nghìn sinh viên hệ quy, 40 nghìn sinh viên hệ từ xa học tập 70 trung tâm vệ tinh khắp đất nước cơng tác tổ chức thi liên tục theo tuần, việc triển khai công tác thi, kiểm tra hết môn, hết học phần ngành có đào tạo Viện vô phức tạp; để đảm bảo quy chế Bộ GD&ĐT, cần phải tiêu tốn số lượng đề thi lớn công tác chọn đề, trộn đề thủ công không mang lại hiệu cao Với mơ hình đào tạo đa ngành, đa cấp độ đặc biệt quan tập đến phát triển đào tạo từ xa qua phương tiện đại cơng tác chuẩn bị hệ thống đánh giá cần quan tâm, đáp ứng nhu cầu đào tạo cho số đông người theo sứ mạng Viện Phịng Khảo thí Đảm bảo chất lượng thành lập hoạt động năm nhằm tập trung, thống công tác khảo thí tiếp cận với cơng tác ĐBCL nên công tác dần tiến tới tập trung, thống chun mơn hóa dần thực Một nhiệm vụ xây dựng, sử dụng quản lý ngân hàng đề thi hết môn… Hiện công tác xây dựng, sử dụng, quản lý đề thi Viện tản mạn Khoa, Trung tâm có đào tạo, Phịng Khảo thí quản lý đề thi dạng đóng gói niêm phong, có vài Khoa có hệ thống đề thi lưu giữ sử dụng Phịng Chính tính chủ động cơng tác đơn vị không cao, công việc bám đuổi theo lịch thi tháng đơn vị Để tiến tới hoạt động quản lý sử dụng thống ngân hàng câu hỏi cho hệ đào tạo Viện hoạt động nghiên cứu tác động kiểm tra đánh giá trình đào tạo xác việc nghiên cứu đưa vào sử dụng quy trình xây dựng, quản lý sử dụng ngân hàng câu hỏi thi vô cần thiết Ngân hàng câu hỏi tích lũy dần mơn bản, sau theo lộ trình tiến hành xây dựng mơn chuyên ngành TỔNG QUAN TÌNH HÌNH NGHIÊN CỨU VÀ SẢN PHẨM TRONG, NGOÀI NƯỚC LIÊN QUAN TRỰC TIẾP ĐẾN ĐỀ TÀI Trong nước: - Cấn Thị Thanh Hương (2011) “Nghiên cứu quản lý kiểm tra, đánh giá kết học tập giáo dục đại học Việt Nam” Luận án tiến sỹ - Trần Long “Đảm bảo chất lượng đào tạo khâu đánh giá kết học tập” 2010 - GS.TSKH Lâm Quang Thiệp (2008), “Trắc nghiệm ứng dụng”, NXB Khoa học kỹ thuật - GS.TSKH Lâm Quang Thiệp (2010), “Đo lường giáo dục”, NXB Đại học Quốc gia Hà Nội Ngoài nước: - GS Amena Begum Bà Jesmin Pervin (Bangladesh)(3/2009), Vấn đề đảm bảo chất lượng đào tạo từ xa đào tạo mở: Bối cảnh quốc gia Tham vọng Quốc tế, Kỷ yếu Hội nghị thường niên năm 2009 Mạng lưới chất lượng Châu Á-Thái Bình Dương, HN - Tian Belawati & Jon Baggaley (9/2009)– Cẩm nang Giáo dục từ xa (Trần Đức Vượng dịch) – NXB Thế Giới - GS Richard Lewis (Anh)(3/2009) Đảm bảo chất lượng đào tạo mở từ xa, Kỷ yếu Hội nghị thường niên năm 2009 Mạng lưới chất lượng Châu ÁThái Bình Dương, Hà Nội MỤC TIÊU CỦA ĐỀ TÀI - Nghiên cứu lý luận thực tiễn công tác xây dựng, quản lý khai thác đề thi kết hợp với yêu cầu quản lý, sử dụng đề thi để tìm giải pháp nhằm cải thiện điểm tồn công tác quản lý sử dụng đề thi Viện - Nghiên cứu quy trình xây dựng ngân hàng câu hỏi, quy trình quản lý sử dụng hệ thống câu hỏi theo môn, chuyên ngành thống hệ đào tạo Viện, đáp ứng yêu cầu đổi toàn diện giáo dục đại học, đảm bảo phát triển bền vững Viện ĐH Mở Hà Nội PHƯƠNG PHÁP TIẾP CẬN VÀ PHƯƠNG PHÁP NGHIÊN CỨU CỦA ĐỀ TÀI - Phương pháp nghiên cứu tài liệu.(chủ đạo) Nghiên cứu văn nghị Đảng, văn pháp quy ngành - Phương pháp vấn, lấy ý kiến thầy cô, sinh viên - Phương pháp thống kê - Phương pháp đàm thoại - Phương pháp xử lý số liệu, thơng tin, phân tích đánh giá (chủ đạo) Để giải vấn đề đặt câu hỏi nghiên cứu, tác giả dự kiến sử dụng kết hợp hai phương pháp định tính định lượng, chủ yếu định lượng nhằm kiểm định giả thuyết đưa ra, đánh giá chất lượng đề thi qua khảo sát số lượng đề thi mơn định Ngồi tác giả sử dụng phương pháp vật biện chứng, vật lịch sử, quan điểm Đảng Nhà nước giáo dục - đào tạo làm sở phương pháp luận thành tựu khoa học quản lý để sâu nghiên cứu giải vấn đề đặt đề tài Nguồn thu thập liệu - Dữ liệu sơ cấp thu thập qua thống kê, tài liệu, báo cáo đơn vị, cá nhân có liên quan, kế thừa số liệu nghiên cứu trước liên quan đến đề tài - Dữ liệu sơ cấp thu thập kết vấn sâu vấn đề cần giải phát phiếu điều tra khảo sát Phương pháp phân tích liệu: Sử dụng mơ hình hồi quy, phương pháp phân tích, kết hợp với phương pháp lịch sử, điều tra, thống kê, tổng hợp, khảo sát thực tế tổng hợp liệu với trợ giúp SPSS thành tựu khoa học quản lý để giải vấn đề NỘI DUNG NGHIÊN CỨU - Cơ sơ lý luận vấn đề xây dựng, quản lý, sử dụng đề thi trình đào tạo; Đánh giá kết học tập mắt xích quan trọng q trình đào tạo địi hỏi phải tn thủ theo quy chế chung Có nhiều hình thức đánh giá kết học tập phổ biến hình thức làm kiểm tra làm thi Đây trình đánh giá người thầy trình giảng dạy, đến khâu thi tổ chức thi Thiết kế đề khâu trình cần tn thủ ngun tắc định, đặc biệt đề thi trắc nghiệm đại Kết làm sinh viên sở để đánh giá khâu trình đào tạo, chất lượng đề thi (nội dung câu hỏi có phù hợp với chương trình, mức độ kiểm tra đo lường kiến thức ); chất lượng giảng dạy thầy; thái độ khả tiếp thu kiến thức sinh viên có tác động ngược lại với nhà quản lý Nghiên cứu lý luận đề thi tự luận, nêu lên ý nghĩa vai trò loại đề thi thực tiễn giáo dục đại học Lý luận xây dựng ngân hàng câu hỏi thi tự luận việc quản lý ngân hàng Nghiên cứu lý luận đề thi trắc nghiệm, đánh giá mức độ phù hợp loại đề thực tiễn Lý luận xây dựng ngân hàng câu hỏi trắc nghiệm nguyên tắc quản lý khai thác ngân hàng câu hỏi trắc nghiệm - Thực trạng công tác quản lý sử dụng đề thi Viện Đại học Mở Hà Nội đơn vị có đào tạo Viện Nội dung nghiên cứu tập trung vào thực trạng công tác xây dựng ngân hàng đề, số lượng đề thi, câu hỏi ngân hàng loại đề (trắc nghiệm, tự luận, kết hợp trắc nghiệm tự luận) Viện Đại học Mở cho sinh viên đại học Công tác xây dựng ngân hàng đề thi theo loại đề vào nội dung đặt đề đơn vị Mỗi đơn vị với đặc thù mơn học có u cầu riêng đề thi hết mơn Vì chưa có quy định chung cho công tác nên hợp đồng đặt đề sở xác định nội dung, hình thức đề thi Hợp đồng đặt đề khác nội dung hợp đồng chứa đựng quy định đề thi Như dẫn đến hợp đồng phải lặp lại nội dung quy định Thực tế cịn tượng đề thi cịn chưa bám sát nội dung chương trình, cịn lặp lại nội dung câu hỏi Công tác quản lý sử dụng ngân hàng đề có nhiều đổi từ thành lập phận khảo thí độc lập Đã có quy định phối hợp cơng tác khảo thí nhiên chưa đầy đủ Với hệ thống trung tâm rộng lớn công tác chọn đề vất vả cịn làm thủ cơng nên khơng thể tránh khỏi sai sót Những giải pháp nhằm tiết kiệm đề thi thi môn, ca thi khác trung tâm địa phương thi mã đề thực nhiên biện pháp tạm thời - Một số biện pháp, giải pháp để nâng cao chất lượng công tác quản lý sử dụng đề thi Viện; Xây dựng quy trình xây dựng, quản lý sử dụng đề thi hết môn cho hệ đào tạo Viện Quy trình xác định rõ đối tượng tham gia chịu trách nhiệm chính, chịu trách nhiệm phối hợp quy trình Trong nêu rõ yêu cầu công việc quy chuẩn cho khâu quy trình Đưa dự thảo quy định công tác xây dựng, quản lý ngân hàng đề thi chung cho hệ từ xa, đặc biệt quan tâm đến đề thi trắc nghiệm để chuẩn bị sẵn sàng có phần mềm trộn đề thi Đóng góp đề tài: Thứ mặt khoa học: Hệ thống hóa bổ sung sở lý luận quy trình quản lý đào tạo Viện Thứ hai mặt thực tiễn: Căn kết phân tích trên, tác giả đưa quy trình xây dựng, quản lý, sử dụng ngân hàng câu hỏi thi Ngoài ra, kết nghiên cứu đề tài tài liệu tham khảo cho nghiên cứu quản lý đào tạo đại học Việt Nam - Kết luận – đề xuất - kiến nghị 10 DỰ KIẾN TIẾN ĐỘ THỰC HIỆN ĐỀ TÀI Đề tài dự kiến thực thời gian 08 tháng, hoàn thành báo cáo tháng 12/2014 - Tháng 3, tháng 4: Hồn thành đề cương - Tháng 5: Phân cơng nhiệm vụ cụ thể cho thành viên - Tháng 6, tháng 7, tháng 8: Các thành viên thực hiên nhiệm vụ - Tháng 9, tháng 10: Tổng hợp nội dung - Tháng 11, tháng 12: Hoàn thành đề tài 11 DỰ KIẾN SẢN PHẨM VÀ ĐỊA CHỈ ỨNG DỤNG • Tên sản phẩm: Quy trình xây dựng, quản lý sử dụng ngân hàng câu hỏi thi hết môn, hết học phần Dự thảo quy định xây dựng, quản lý sử dụng ngân hàng câu hỏi thi hết mơn, hết học phần • Địa ứng dụng : Viện Đại học Mở Hà Nội 12 KINH PHÍ THỰC HIỆN ĐỀ TÀI Tổng kinh phí: 40.000.000 Đ Trong đó: Ngân sách Nhà nước: 20.000.000 Đ Kinh phí nhà trường hỗ trợ: 20.000.000 Đ Dự trù kinh phí theo mục chi: Chi cơng lao động tham gia trực tiếp thực đề tài: 20.000.000 Đ Báo cáo, xử lý, phân tích, khảo sát thực tế : 10.00.00 Đ Chi khác : 10.000.000 Đ Tổng cộng: 40.000.000 Đ Ngày 18 tháng 03 năm 2014 Ngày 18 tháng 03 năm 2014 VIỆN TRƯỞNG CHỦ NHIỆM ĐỀ TÀI Nguyễn Thị Hạnh ... việc nghiên cứu đưa vào sử dụng ? ?Quy trình xây dựng, quản lý sử dụng ngân hàng câu hỏi thi Viện Đại học Mở Hà Nội? ?? vơ cần thi? ??t Tình hình nghiên cứu Công tác kiểm tra đánh giá song hành q trình. .. tác xây dựng, quản lý sử dụng ngân hàng đề thi Viện Đại học Mở Hà Nội B TỔNG KẾT KẾT QUẢ NGHIÊN CỨU CỦA ĐỀ TÀI CHƯƠNG I LÝ LUẬN CHUNG VỀ CÔNG TÁC XÂY DỰNG, QUẢN LÝ VÀ SỬ DỤNG NGÂN HÀNG ĐỀ THI. .. đưuọc chia thành chương: Chương 1: Lý luận chung xây dựng, quản lý sử dụng ngân hàng đề thi Chương 2: Thực trạng công tác xây dựng, quản lý sử dụng ngân hàng đề thi Viện Đại học Mở Hà Nội Chương