Đang tải... (xem toàn văn)
Thực hiện đề tài này, chúng tôi mong muốn sẽ đánh giá được thực chất về độ giá trị, độ tin cậy của các bộ đề thi trắc nghiệm khách quan của Nhà trường cũng như các yếu tố ảnh hư[r]
(1)ĐẠI HỌC QUỐC GIA HÀ NỘI VIỆN ĐẢM BẢO CHẤT LƢỢNG GIÁO DỤC
_
Nguyễn Anh Tuấn
ĐÁNH GIÁ CÁC YẾU TỐ ẢNH HƢỞNG ĐẾN QUÁ TRÌNH XÂY DỰNG CÁC BỘ ĐỀ THI TRẮC NGHIỆM KHÁCH QUAN
TẠI KHOA CÔNG NGHỆ THÔNG TIN - ĐH THÁI NGUYÊN
LUẬN VĂN THẠC SĨ
(2)ĐẠI HỌC QUỐC GIA HÀ NỘI VIÊN ĐẢM BẢO CHẤT LƢỢNG GIÁO DỤC
Nguyễn Anh Tuấn
ĐÁNH GIÁ CÁC YẾU TỐ ẢNH HƢỞNG ĐẾN QUÁ TRÌNH XÂY DỰNG CÁC BỘ ĐỀ THI TRẮC NGHIỆM KHÁCH QUAN
TẠI KHOA CÔNG NGHỆ THÔNG TIN - ĐH THÁI NGUYÊN
Chuyên ngành: Đo lƣờng đánh giá giáo dục (Chuyên ngành đào tạo thí điểm)
LUẬN VĂN THẠC SĨ
Ngƣời hƣớng dẫn khoa học: PGS.TS Nguyễn Công Khanh
(3)LỜI CAM ĐOAN
Tôi xin cam đoan phần nghiên cứu thực
Các số liệu, kết luận nghiên cứu trình bày luận văn chưa công bố nghiên cứu khác
Tôi xin chịu trách nhiệm nghiên cứu mình!
Thái Nguyên, ngày 20 tháng năm 2009 Tác giả
(4)
LỜI CẢM ƠN
Tác giả xin bày tỏ lòng biết ơn sâu sắc đến PGS.TS Nguyễn Công Khanh đã hướng dẫn chu đáo, nhiệt tình suốt trình thực luận văn
Xin chân thành cảm ơn thầy, cô giáo Trung tâm Đảm bảo chất lượng đào tạo & Nghiên cứu phát triển giáo dục - Đại học Quốc gia Hà Nội tạo điều kiện thuận lợi cho tác giả thời gian học tập nghiên cứu trường
Xin chân thành cảm ơn Lãnh đạo Khoa Công nghệ thông tin - Đại học Thái Nguyên, đồng nghiệp tạo điều kiện thuận lợi cho tác giả trình tiến hành thực nghiệm đề tài
(5)MỤC LỤC
Trang Trang phụ bìa
Lời cam đoan
Lời cảm ơn
Mục lục
Danh mục chữ viết tắt
Danh mục bảng
Danh mục hình
MỞ ĐẦU Lý chọn đề tài
2 Mục đích nghiên cứu
3 Giới hạn nghiên cứu
4 Phương pháp nghiên cứu
Chƣơng CƠ SỞ LÝ LUẬN VÀ TỔNG QUAN 1.1 Các khái niệm chất lượng đề thi trắc nghiệm 11
1.1.1 Các công cụ đo lường đánh giá kết học tập 11
1.1.2 Trắc nghiệm vấn đề liên quan 13
1.1.3 Độ tin cậy câu hỏi trắc nghiệm 19
1.1.4 Độ giá trị (hiệu lực) câu hỏi trắc nghiệm 24
1.2 Quy trình xây dựng đề thi trắc nghiệm khách quan 26
1.2.1 Các quy tắc viết câu hỏi trắc nghiệm nhiều lựa chọn 26
1.2.2 Xây dựng bảng trọng số môn học 31
1.2.3 Xây dựng ngân hàng đề thi trắc nghiệm môn học 32
(6)2.1.1 Chuyên đề nghiên cứu thứ 34
2.1.2 Chuyên đề nghiên cứu thứ hai 34
2.1.3 Chuyên đề nghiên cứu thứ ba 35
2.2 Thiết kế mẫu phiếu điều tra giáo viên 35
Chƣơng XỬ LÝ SỐ LIỆU KẾT QUẢ THI TRẮC NGHIỆM 3.1 Xử lý số liệu kết thi TNKQ 39
3.1.1 Phân tích độ khó item 39
3.1.2 Phân tích độ phân biệt item 40
3.1.3 Đánh giá độ tin cậy trắc nghiệm 42
3.1.4 Xử lý số liệu đề thi mơ hình QUEST 48
3.1.5 Kết luận độ giá trị đề 52
3.2 Xử lý số liệu mẫu phiếu hỏi giảng viên 52
3.2.1 Đánh giá độ tin cậy công cụ đo (mẫu phiếu hỏi) 52
3.2.2 Đánh giá độ giá trị công cụ đo phù hợp mơ hình yếu tố ảnh hưởng đến chất lượng đề thi TNKQ qua xử lý phiếu hỏi 62
3.3 Kết luận yếu tố ảnh hưởng đến việc xây dựng đề TNKQ 62
KẾT LUẬN, ĐỀ XUẤT GIẢI PHÁP, KIẾN NGHỊ 4.1 Kết luận 71
4.2 Đề xuất giải pháp 73
TÀI LIỆU THAM KHẢO 74
PHỤ LUC Phụ lục File liệu mon01.Itn 75
Phụ lục File liệu mon01.map 77
(7)DANH MỤC CÁC CHỮ VIẾT TẮT
TT VIẾT TẮT ĐỌC LÀ
1 ĐHTN Đại học Thái Nguyên
2 GD Giáo dục
3 GD – ĐT Giáo dục - đào tạo
4 GV Giảng viên
5 HS Học sinh
6 KT – ĐG Kiểm tra đánh giá
7 MCQ Câu hỏi nhiều lựa chọn
8 NXB Nhà xuất
9 SV Sinh viên
(8)DANH MỤC BẢNG
Trang Bảng 1.1: Ví dụ bảng trọng số đề thi
hết học phần gồm 60 câu trắc nghiệm 32
Bảng 3.1: Kết phân tích độ tin cậy (Reliability Analysis Alpha)
của toàn trắc nghiệm đề số 44 Bảng 3.2: Các thông số độ tin cậy (Reliability Statistics) 46
Bảng 3.3: Hệ số tin cậy Alpha Cronbach’s 50 đề trắc nghiệm 46
Bảng 3.4: Phân bố tương quan độ khó đề lực học sinh 49
Bảng 3.5: Phân bố item khoảng cho phép (infit mean square) 50 Bảng 3.6: Các thông số đo lường item file mon1.itn 51 Bảng 3.7: Hệ số tin cậy item mẫu 50 giáo viên (N = 50) 55
Bảng 3.8: Ma trận tương quan item qua xử lý phiếu hỏi 57 Bảng 3.9: Ma trận phân bố item phiếu hỏi file Phieu.map 60
Bảng 3.10: Phân bố item phiếu hỏi
(9)DANH MỤC HÌNH
Trang
Hình 1.1: Sơ đồ phương pháp kiểm tra - đánh giá 12
Hình 3.1: Thủ tục Analyze \ Scale \ Reliability file SPSS.sav 54
Hình 3.2: Phân bố thống kê biến “diem.ptn” 64
Hình 3.3: Biểu đồ phân chia mức Recode biến “diem.ptn” 65
Hình 3.4: Thủ tục Transform \ Recode \ Into Same Variables 66
Hình 3.5: Thủ tục Transform \ Recode \ Into Same Variables nhóm biến 65
Hình 3.6: Biểu đồ phân bố biến “chl.de” mẫu kết thi 50 đề TNKQ 66
Hình 3.7: Phân bố mức biến “chl.de” sau Recode 67
Hình 3.8: Thủ tục Bảng chéo (Statistics \ Summaries \ Crosstabs) 68
(10)MỞ ĐẦU 1 Lý chọn đề tài
Để nâng cao chất lượng giảng dạy đại học, việc đánh giá xác kết học tập sinh viên vấn đề quan trọng Trong thực trạng giáo dục đại học nhiều tiêu cực bất cập nay, việc áp dụng hình thức thi, kiểm tra trắc nghiệm khách quan biện pháp có hiệu cho phép đánh giá tương đối xác kết học tập sinh viên Khoa Công nghệ thông tin - Đại học Thái Nguyên trường đại học khác tích cực áp dụng hình thức thi trắc nghiệm khách quan cho khoảng 40% tổng số môn học, coi biện pháp nhằm đổi phương pháp kiểm tra đánh giá, nâng cao chất lượng giáo dục Tuy nhiên thực tế xảy chất lượng đề thi trắc nghiệm khách quan chưa bảo đảm độ giá trị độ tin cậy Do tơi lựa chọn đề tài “Đánh giá yếu tố ảnh hưởng đến chất lượng đề thi trắc nghiệm khách quan Khoa Công nghệ thông tin - Đại học Thái Nguyên”
(11)Thực đề tài này, mong muốn đánh giá thực chất độ giá trị, độ tin cậy đề thi trắc nghiệm khách quan Nhà trường yếu tố ảnh hưởng đến chất lượng đề thi trắc nghiệm, từ giải pháp khắc phục
2 Mục đích nghiên cứu đề tài
Nghiên cứu hướng đến mục tiêu sau:
- Đánh giá độ tin cậy đề thi trắc nghiệm khách quan - Đánh giá độ giá trị đề thi trắc nghiệm khách quan
- Nghiên cứu yếu tố ảnh hưởng đến chất lượng đề trắc nghiệm 3 Giới hạn nghiên cứu đề tài
Đề tài giới hạn việc nghiên cứu, đánh giá độ tin cậy, độ giá trị 50 đề thi trắc nghiệm khách quan sử dụng Khoa CNTT - ĐHTN Nghiên cứu yếu tố ảnh hưởng đến việc xây dựng đề thi trắc nghiệm 50 giáo viên thông qua xử lý phiếu điều tra ý kiến kết hợp xử lý số liệu kết thi môn học tương ứng
4 Phƣơng pháp nghiên cứu
Câu hỏi nghiên cứu / giả thiết nghiên cứu
Câu hỏi nghiên cứu đặt là:
“Những yếu tố ảnh hưởng đến trình xây dựng đề trắc nghiệm”
Các giả thiết nghiên cứu đặt yếu tố ảnh hưởng trực tiếp đến chất lượng đề:
1- Yếu tố thời gian đầu tư cho công việc: Là thời gian thực tế giáo viên dùng
để nghiên cứu tài liệu biên soạn đề thi, quỹ thời gian nhà trường dành cho việc
2- Động người thực hiện: Là yếu tố say mê, hứng thú
(12)3- Mức độ người đề trang bị kỹ thuật thiết kế đề trắc nghiệm: Thể mức độ tập huấn, tự nghiên cứu kỹ thuật xây dựng đề thi trắc nghiệm
4- Sự quan tâm nhà trường: Thể khuyến khích, động viên
bằng tinh thần hay vật chất cụ thể
5- Tính chất nhóm mơn học: Là đặc thù nhóm mơn học đến việc
đề trắc nghiệm (phù hợp hay khó thực hiện)
Khách thể đối tượng nghiên cứu
Khách thể nghiên cứu số liệu kết thi 50 đề trắc nghiệm khách quan Khoa CNTT giáo viên trực tiếp xây dựng đề
Đối tượng nghiên cứu yếu tố ảnh hưởng đến chất lượng đề thi trắc nghiệm
Phương pháp tiếp cận nghiên cứu
1 Phương pháp khảo cứu lý thuyết: Nghiên cứu quy định triển khai thực việc thi trắc nghiệm xây dựng ngân hàng thi trắc nghiệm Bộ GD&ĐT; Các lý thuyết đo lường đánh giá giáo dục
2 Phương pháp điều tra khảo sát: Thực qua hai bước nghiên cứu sơ nghiên cứu thức
- Nghiên cứu sơ bộ: Thực thông qua phương pháp định tính, sử dụng kỹ thuật thảo luận nhóm để bổ sung mơ hình
(13)3 Phương pháp lấy ý kiến chuyên gia: Tham khảo ý kiến chuyên gia có kinh nghiệm giáo dục đại học đo lường đánh giá giáo dục
(14)TÀI LIỆU THAM KHẢO Tiếng Việt
1- Nguyễn Phụng Hoàng (2003), Phương pháp trắc nghiệm kiểm tra
và đánh giá thành học tập NXB Giáo dục
2- Phạm Viết Vượng (2006), Giáo dục học NXB ĐHQGHN
3- Nguyễn Công Khanh (2004), Đánh giá đo lường khoa học xã hội. NXB Chính trị quốc gia
4- Nguyễn Công Khanh (2001), Ứng dụng SPSS FOR WINDOWS: Xử lý
phân tích liệu NXB ĐHQGHN
5- Lê Đức Ngọc (2003), Bài giảng đo lường đánh giá thành học tập
trong giáo dục Đại học Quốc gia Hà Nội
6- Phạm Minh Hạc, Trần Kiều, Đặng Bá Lãm, Nghiêm Đình Vỹ (2002),
Giáo dục giới vào kỉ XXI, NXB Chính trị Quốc gia
- Dương Thiệu Tống (2004), Phương pháp nghiên cứu khoa học
giáo dục tâm lí, NXB Giáo dục
Tiếng Anh
8- Taylo & Francis Grup (2003), Quality in Higher Education
9- Jemes H.McMillan (2001), Classroom assessment, Virginia Commonwealth University
10- Norman E Grounlund (2003), Constructing Achivement Tets
11- Peggy O’Neill (2009), Guide to College Writing Assessment, Utah State University Press