Đo lường và đánh giá hoạt động học tập trong các trường cao đẳng, đại học

O LNG V NH GI HOT NG HC TP cỏc trng cao ng, i hc LM QUANG THIP Phone: 04.35146068 E-mail: lqthiep@gmail.com NI DUNG Mt s cỏch phõn loi quan trng i vi ỏnh giỏ giỏo dc Phõn loi mc tiờu giỏo dc Cỏc phng phỏp ỏnh giỏ S b v phng phỏp trc nghim khỏch quan V lý thuyt trc nghim c n v hin i ỏnh giỏ trng i hc, cao ng Minh v vic ỏp dng cỏc phng phỏp ỏnh giỏ Kt lun I MT S CCH PHN LOI QUAN TRNG I VI NH GI TRONG GIO DC TRONG MT H THNG GIO DC Cể HAI LOI HèNH NH GI: ỏnh giỏ tiờu chun húa quy mụ ln (large-scale standardized assessment) ỏnh giỏ lp hc (classroom assessment) (Xem bng sau õy) Khỏc bit v ỏnh giỏ tiờu chun húa quy mụ ln ỏnh giỏ lp hc Mc ớch Hiu v phõn loi, gi tiờu chun cao nht Kim tra v hng dn Phm vi Cỏc nng lc tỏch bit ca SV Cú th kt hp nhiu nng lc mt SV Phng phỏp ỏnh giỏ Tng ln n nht, khụng thng xuyờn, c m bo khỏch quan, cựng thang im Liờn tc, ch quan v khỏch quan, vic i sỏnh khụng quan trng Kt qu im s im s, mụ t, phỏn xột, ỏnh giỏ khỏi quỏt Ngi s dng chớnh Ngi lm chớnh sỏch, SV Cỏc nh qun lý, SV, GV DA VO MC CH, NH GI Cể TH C CHIA LOI LN ỏnh giỏ chn oỏn (Diagnostic assessment) ỏnh giỏ tin trỡnh (Formative assessment - gi gn ỳng l Assessment FOR learning) ỏnh gớa tng kt (Summative Assassment - gi gn ỳng l Assessment OF learning ) (Xem bng sau õy) Khỏc bit v Assessment FOR Learning Assessment OF Learning Mc ớch Nhn thụng tin phn hi ci in o trng thỏi kt qu hc mt vic dy v hc, giỳp SV tin b thi im bỏo cỏo, thc hin trỏch nhim gii trỡnh Tp trung vo Cỏc mc tiờu tựy GV xỏc nh Cỏc mc tiờu hc c th - chun u chng trỡnh quy nh Thi im C quỏ trỡnh hc Mt s kin sau hc Ngi thc hin chớnh GV, SV Chuyờn gia ỏnh giỏ Ngi s dng chớnh SV, GV, ph huynh, Cỏc nh qun lý, SV, GV, ph huynh, II PHN LOI MC TIấU GIO DC Ba lnh vc ca mc tiờu giỏo dc (B Bloom) Nhn thc (cognitive) Tỡnh cm thỏi (affective) K nng (psycho-motor) Biu tng n gin (head, heart, hand); ting Anh vit tt l KSA ú l cỏc ch da xõy dng chng trỡnh o to (curriculum development) v cỏc cụng c ỏnh giỏ Benjamin Samuel Bloom (1913-1999) Lnh vc nhn thc (Benjamin Bloom -1956) ỏnh giỏ (Evaluation) Tng hp (Synthesis) Phõn tớch (Analysis) p dng (Application) Hiu (Comprehension) Bit (Knowledge) Lnh vc nhn thc (iu chnh bi Anderson/Krathwohl-2001) Sỏng to (Create) ỏnh giỏ (Evaluate) Phõn tớch (Analyse) p dng (Apply) Hiu (Understand) Bit (Remember ) Tng quan nng lc TS khú CH V NH GI TRONG TRNG H, C: S DNG CC PHNG PHP NH GI u tiờn dựng TNKQ i vi cỏc hc phn: - ụng SV hc, ụng GV dy - Cỏc mụn cỏc nm di, cha ũi hi nhiu t sỏng to mc cao - Khú hon thnh chm bi nhanh thi hn cn thit u tiờn dng TL i vi cỏc hc phn: - SV khụng quỏ ụng; - ũi hi nhiu t sỏng to, gii quyt ụi TNKQ tin trỡnh (trc nghim ging viờn dựng lp hc): - Ging viờn m bo chm bi tt Cú th kt hp bi TNKQ v vi cõu TL ngn (hn ch s t) i vi cỏc hc phn chuyờn ớt SV cú th dựng phng phỏp ỏnh gớa ỏp TRC NGHIM KHCH QUAN TRONG TRNG H, C Vi loi ỏnh giỏ tin trỡnh v tng kt cú hai cỏch ỏp dng trc nghim ỏnh giỏ tin trỡnh cn a dng v gn vi ngi dy, ỏnh giỏ tng kt cn chớnh xỏc v tỏch ngi dy TNKQ tin trỡnh (trc nghim ging viờn dựng lp hc): - Cỏc CH t vit hoc su tm, cú th cha nh c; - TN ngn, kim tra mt s ớt ch ; - Ch yu cung cp thụng tin phn hi iu chnh vic dy v hc, khụng xp hng, khụng cho im, khụng thu ; - Nờn tr bi nhanh, chn mt s CH lm chung lp; - Phn mm giỳp phõn tớch v tr bi sinh ng; - Nu cn ỏnh giỏ cú th dựng im thụ TRC NGHIM KHCH QUAN TRONG TRNG H, C TNKQ tng kt (kiu trc nghim tiờu chun húa): - NHCHTN phi c xõy dng ỳng quy trỡnh, c nh c kt qu ỏnh giỏ tng kt chớnh xỏc; - Nh trng nờn xõy dng NHCHTN mt s mụn s trng, nờn phi hp trao i nhiu trng hoc mua cỏc NHCHTN tiờu chun húa - Thit k TN ỳng quy trỡnh: theo ma trn kin thc v theo cỏc hm thụng tin mong mun (phn mm TESTPRO giỳp thc hin); - Thit k cỏc TN tng ng cho nhiu khúa hc; - Phi gi mt NHCHTN v thu li TN sau mi ln thi - Nờn cho im tớnh theo giỏ tr chuyn i ca nng lc V CC CễNG C V DCH V EDTECH-VN Cể TH H TR Cỏc phn mm trc nghim: TESTPRO, TestSheetReader, VITESTA, cỏc mỏy quột quang hc cụng sut khỏc Cỏc ngõn hng CHTN tiờu chun húa cho cỏc k thi tng kt (chuyn giao, phi hp xõy dng) Dch v thi th dt v cụng ngh tr bi cho tng thớ sinh VII MINH HA V VIC P DUNG CC PHNG PHP NH GI 1.VI NẫT LCH S Phương Tây: - Khoa học đo lờng tâm lý giáo dục thật đầu kỷ 20 - Trắc nghiệm trí tuệ Stanford-Binet năm 1916, Stanford Achievement Test 1923 - Mỹ: chấm trắc nghiệm máy IBM 1935, đời ẫTS năm 1947, NCME nm 1950, ACT nm 1959 - Hình thành ngành công nghiệp trắc nghiệm với cỡ tỷ trắc nghiệm năm Liên Xô cũ: - Ap dụng trắc nghiệm từ 1926, số sai lầm ấu trĩ phê phán thức Đảng CS năm 1936; - Sự lạc hậu Liên Xô phe xã hội chủ nghĩa TRấN TH GII TUYN SINH AI HOC Hoa kỳ: SAT ACT Nhật bản: Trung tâm quốc gia thi tuyển đại học với kỳ thi chung 31 môn TNKQ Hàn quốc: Từ 1980 thay việc thi tuyển đại học riêng rẻ trường kỳ thi tuyển thống nước, dùng TNKQ Thái lan : Kỳ thi tuyển đại học liên kết nước cải cách năm 1999: thi lần năm TNKQ; Trung quốc: Từ 1988 tổ chức thi tuyển đại học thống nư ớc vào đầu tháng chủ yếu TNKQ Nga: Từ 2003 60% học sinh tốt nghiệp phổ thông trung học tham gia Kỳ thi quốc gia hợp ( tốt nghiệp phổ thông tuyển đại học) liên bang sau lớp 11 Ví dụ kết trắc nghiệm SAT theo cỏc nhúm chng tc Hoa K Ví dụ kết trắc nghiệm ACT theo cỏc nhúm chng tc Hoa K, 2008 Sơ đồ Thế giới Việc làm theo ACT VIT NAM TUYN SINH I HC Về chất lượng thi tuyển đại học đề tự luận Cải tiến thi tuyển đại học có sử dụng TNKQ Đà lạt 1996: - Tiến trình chuẩn bị thực hiện; - Số thí sinh chọn TNKQ lý do; - Số trường hợp vi phạm quy chế thi - Kết luận Hội nghị rút kinh nghiệm 9/1996 trì trệ sau Cải tiến thi tuyển đại học chung - Thi chung hướng - Đề thi không lắt léo - Rắc rối việc xét tuyển theo nguyện vọng - Phân bố điểm thi Phụ lục: Về độ giá trị kỳ thi tuyển đại học kỳ thi tốt nghiệp phổ thông trung học ( vài kết nghiên cứu thống kê) Mẫu nghiên cứu: Trường ĐHKHTN ĐHQG HCM, 960 sv khóa tuyển 1995, 1986 sv khóa 1996 Kết nghiên cứu: -Tương quan giứa kết thi Tuyển sinh đại học với kết học tập GĐ1 0,257, thấp nhiều so với thông lệ quốctê quốc tế chấp nhận (0,5-0,6) PHN B IM THI TUYN I HC NM 2002 (báo Tuổi trẻ 4/9/2003) PHN B IM THI TUYN I HC NM 2003 (báo Tuổi trẻ 4/9/2003) KT LUN Cú mt khoa hc trc tip liờn quan n giỏo dc m nc ta dng nh cũn b trng: khoa hc v o lng giỏo dc; Giỏo dc nc ta yu v mi mt, mun nõng giỏo dc lờn ton din cn rt nhiu tin, m ta lc bt tũng tõm Vy phi chn ni no u t khụng quỏ tn kộm mag kh d cú th nõng cao nhanh chúng cht lng giỏo dc? Tõm lý hc sinh Vit Nam thi th no hc th y -> phi chng nờn chn nỳt bm vic ci cỏch thi c theo khoa hc v o lng giỏo dc? S trỡ tr ca h thng giỏo dc v vic huy ng ngun lc v trớ tu ca ton xó hi úng gúp [...]... trc nghim khỏch quan v t lun 5 Về chất lượng chung của việc đánh giá bằng TNKQ và tự luận - Nói chung chất lượng của việc đánh giá bằng TNKQ chủ yếu phụ thuộc vào đề, còn chất lượng của việc đánh giá bằng tự luận chủ yếu phụ thuộc vào người chấm - Xu hướng tăng tính khách quan đối việc chấm bài tự luận nhờ các đáp án và thang điểm chi tiết và hậu quả có thể xảy ra: biến đề tự luận thành một đề trắc... của phép đo) Độ giá trị (mức độ đạt mục tiêu của phép đo: đo được cái cần đo) 2 QUY TRèNH RèNH XY DNG MT NHCH HOC MT TNKQ TIấU CHUN HểA Đề trắc nghiệm và ngân hàng câu hỏi trắc nghiệm Xác định mục tiêu cụ thể (ma trận kiến thức); Cá nhân tự viết câu hỏi; Trao đổi trong nhóm; Duyệt lại câu hỏi; Lập đề trắc nghiệm thử; Trắc nghiệm thử; Phân tích kết quả trắc nghiệm thử; Chỉnh lý các câu hỏi đưa vào ngân... o lng trong giỏo dc IRT l c s ca mi phộp o lng trong khoa hc hnh vi liờn quan n phn ng ca con ngi vi phộp th, do ú l ch da ca mt ngnh cụng nghip v trc nghim rt s M v mt s nc khỏc 3 V Lí THUYT TRC NGHIM HIN I (Lý thuyt ng ỏp Cõu hi - IRT) 1) Thiết kế một phép đo: lập thang đo và tạo thước đo, định cỡ thước đo Yêu cầu của một phép đo nói chung: mẫu để so không ảnh hưởng lên việc định cỡ thước đo, mt... cỡ thước đo, mt thước đo cụ thể không ảnh hưởng lên thuộc tính của đối tượng được đo Đối với trắc nghiệm: mẫu thử khác nhau không làm thay đổi tham số CH trắc nghiệm, các ĐTN khác nhau không ảnh hưởng lờn kết quả năng lực đo được 2) Cách tiếp cận của Rasch (Mô hình Rasch): - Xác định các tương tác nguyên tố thí sinh-câu hỏi (TS-CH) - Xây dựng thang đo chung cho năng lực TS và độ khó CH b - Xây dựng... ai ( bi ) ] 4 Các hệ quả quan trọng của Lý thuyết ứng đáp câu hỏi (IRT) Kết quả việc định cỡ không phụ thuộc vào mẫu thí sinh (sample-free ) và kết quả việc xác định năng lực không phụ thuộc vào trắc nghiệm c th (item-free) - đó là các bất biến (invariance) Đây là tính chất rất quan trọng áp dụng cho phương pháp chọn mẫu (sampling), lập ngân hàng câu hỏi (item-banking) và thiết kế các đề trắc nghiệm... (Rasch, 1960) Từ đó : Xác suất trả lời đúng một câu hỏi phụ thuộc hiệu số năng lực thí sinh và độ khó câu hỏi, tức là hiệu số ( - b) Đuờng cong đặc trưng câu hỏi (ICC) (cho mô hình một tham số mô hình Rasch) 1 Biểu thức IRF cho mô hình một tham số: ( bi ) e Pi = ( bi ) [1 + e ] 1 - Cách xấp xỉ số liệu mô hình và kết quả thực nghiệm - Cỏc phn mm nh c: QUEST, CONQUEST, WINSTEPS, BILOG-MG3, VITESTA... trắc nghiệm thử; Chỉnh lý các câu hỏi đưa vào ngân hàng; Lập đề trắc nghiệm chính thức; Tổ chức thi; Chấm thi và phân tích kết quả *Thớ d v bng c trng ca mt thi Toỏn *Mu bng c trng thi thng dựng nc ta Mc tiờu hc tp c th Ni dung a b c Tng cng Nhn bit Thụng hiu Vn dng Vn ng Tng mc thp mc cao cng * Cấu trúc của câu trắc nghiệm nhiều lựa chọn Câu dẫn -A (phương án nhiễu) ... Về chất lượng chung việc đánh giá TNKQ tự luận - Nói chung chất lượng việc đánh giá TNKQ chủ yếu phụ thuộc vào đề, chất lượng việc đánh giá tự luận chủ yếu phụ thuộc vào người chấm - Xu hướng... phép đo: lập thang đo tạo thước đo, định cỡ thước đo Yêu cầu phép đo nói chung: mẫu để so không ảnh hưởng lên việc định cỡ thước đo, mt thước đo cụ thể không ảnh hưởng lên thuộc tính đối tượng đo. .. tuyển đại học với kỳ thi chung 31 môn TNKQ Hàn quốc: Từ 1980 thay việc thi tuyển đại học riêng rẻ trường kỳ thi tuyển thống nước, dùng TNKQ Thái lan : Kỳ thi tuyển đại học liên kết nước cải cách