TỌA ĐÀM & CHIA SẺ việc soạn thảo ngân hàng câu hỏi trắc nghiệm và bài KTĐG theo năng lực online trên Moodle

TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT TP.HCM Khoa Chất lượng cao & Phòng CN DHS khoa CKM TỌA ĐÀM & CHIA SẺ việc soạn thảo ngân hàng câu hỏi trắc nghiệm KTĐG theo lực online trên Moodle TS. NGUYỄN TIẾN DŨNG ĐH SPKT Tp.HCM, 31/01/2018 dungnt@hcmute.edu.vn or cn.dhs.ccad@hcmute.edu.vn Nội dung 1. Xây dựng bảng đối sánh nội dung đánh giá theo thang năng lực nhận thức Bloom 2. Kỹ thuật tổ chức ngân hàng câu hỏi đánh mã câu hỏi xây dựng 3. Kế hoạch thực ĐẶT VẤN ĐỀ “Nếu bạn đánh giá cá khả leo nó, sống đời với niềm tin kẻ ngu ngốc” Albert Eistein, 1879‐1955  Giáo dục dù cao q, khơng có quyền tự coi đứng người mà chất “sinh tự do”  Giáo dục làm công việc tổ chức HỌC người làm công việc DẠY người dungnt@hcmute.edu.vn Cách tiếp cận chiến lược để thay đổi  (Why‐What‐How approach) SMARTER TEARCHER Which work can be improved or innovated? Có 4 câu hỏi lớn (main questions) cho người giảng viên Tại phải thay đổi? (WHY? about Aware  ): thế kỷ 21 là kỉ FIR (IR4.0)  yêu cầu chất lượng nguồn nhân lực,  yêu cầu người học; sự thay đổi GD&ĐT Thay đổi gì? (WHAT? about enabler ):  tiếp cận Dạy‐Học‐KTĐG Thay đổi nào? (HOW? about  realizations ): những việc cần làm để thay đổi đo lường thay đổi cách thức tổ chức, thực Dạy – Học – KTĐG Cái thay đổi tốt (tốt nhất) cho người học/doanh nghiệp/bạn đồng nghiệp?  (WHICH? added question of continuously  improvement or innovation) dungnt@hcmute.edu.vn Các lưu ý khi dùng WWH Approach Với WHY?: cần nêu 1‐5 nhận thức KTXH, GDĐT, NN thơi thúc nhất, có ảnh hưởng mạnh mẽ đến người học phải xuất phát từ trái tim (Thuộc lĩnh vực thông minh cảm xúc ‐ Emotional Intelligence‐EQ) Với WHAT?: cần nêu từ 3‐5 giải pháp, phải xuất phát sở phân tích nguồn lực có (con người, CSVC, tài chính, thời gian, …) (thuộc lĩnh vực thơng minh trí tuệ ‐ intelligence quotient – IQ) Với HOW?: cần từ 1‐5 việc khả thi cần phải làm, phải dự kiến công cụ, sản phẩm cụ thể để giám sát, đo lường trình, kết thực làm minh chứng cho trình cơng việc thực (phải trả lời câu hỏi: Ai làm, làm gì, làm, với nguồn lực nào, đo lường, giám sát, minh chứng công cụ hay sản phẩm nào?, …) Khơng nên tự trói buộc vào, hay tự đưa “điều kiện tiên quyết” giải pháp hay việc cần làm dungnt@hcmute.edu.vn Choose a suitable approach to improve (Áp dụng chu trình PDCA/chu trình deming; …) Q Quality Circle A Các động lực ‐ Các ‐ lực ‐ cản ‐ P Tầm nhìn, niềm tin Các nguồn lực Sức ỳ tâm lý, thói quen … D C định kỳ tự đánh giá Tự đánh giá lần đầu t Hành trình cải tiến Dạy-Học-KTĐG; P-Plan, D-Do, C-Check, A-Act An improvement on quality is a process not a target dungnt@hcmute.edu.vn XU HƯỚNG ĐỔI MỚI PPGD Pedagogical Methods, based on Bloom's taxonomy Active learning is above, passive learning below  Giáo dục dù cao q, khơng có quyền tự coi đứng người mà chất “sinh tự do”  Giáo dục làm công việc tổ chức HỌC người làm công việc DẠY người 1/ Thay đổi cách tiếp cận Sư phạm Dạy – Học – KTĐG (M1) dungnt@hcmute.edu.vn 2/ Sử dụng Công nghệ số Dạy‐ Học‐ KTĐG môn học (M2) F2F – Face to Face ; SS – Self Study; SE = Self Evaluate = Self‐Verify = (Self‐ Access, Self‐Examination, …); CE = Condition Examination; Con 1,2,3 = Conditions (1‐by teachers, 2‐ Faculty, – University) ; ESE = End‐of‐Subject Examine (by teacher)  Academic Freedom dungnt@hcmute.edu.vn 3/ Thay đổi kỹ thuật Dạy – Học F2F (M3) CEM GV quyết định Gợi ý  (20%‐60%‐20%) ? ? ? Use Active  methods  suitable to  subject FEM dungnt@hcmute.edu.vn 10 6/ Làm thử Quiz Trên Course page nhấp đúp vào tên quiz Nhấn nút để làm 7/ Lấy báo cáo moodle Tùy theo loại báo cáo chủ yếu từ Report và Grades ADMINISTRATION>Reports>Activity report  (Đánh giá xu hướng HT của SV) Đánh giá thái độ học tập SV: Chọn Grage > user report > chọn quiz Bảng điểm (Grades) ADNIMISTRATION > Chọn Grades Các chức grade Xem lớp Xem trình làm/nộp SV Xuất bảng điểm sang Excel Lấy bảng điểm Grades ADNIMISTRATION > Chọn Grades Xem Grade cả lớp Số SV trong DS điểm Sĩ số SV trong lớp Bấm vào để xem trình làm SV An Bấm chuột vào để xem điểm KTĐG 8/ Đánh giá chất lượng ĐT, Questions Là thành phần để GV nhận file thống kê đánh giá chất lượng quiz và questions trong quiz Cách thực hiện: (chỉ với quiz đã cho SV làm) ‐ Vào Course page ‐ Chọn quiz cần lấy thống kê ‐ Trong ADMINISTRATION>Results>Staticstic 1 ‐ Chọn 2‐ Nhấn nút Lưu ý để có bảng thống kê trình bày GV còn cần biết thủ tục chuyển dòng thành cột Excel Quiz Information (for all attempts) (đánh giá độ tin cậy độ giá trị thi) TT Thông số Quiz name Thi thử tự học chương Course name Toi uu hoa ky thuat Open the quiz Sep 2016, 2:00 PM Close the quiz 11 Sep 2016, 11:00 PM Open for days hours Number of complete graded first attempts 27 Total number of complete graded attempts 68 Giá trị cho phép Average grade of first attempts 73.63% (50-75%) Average grade of all attempts 82.65% 10 Average grade of last attempts 82.96% 11 Average grade of highest graded attempts 84.89% 12 Median grade (for all attempts) 88.00% 13 Standard deviation (for all attempts) 17.44% (12-18%) 14 Score distribution skewness (for all attempts) -1.3444 (-1,0 -1,0) 15 Score distribution kurtosis (for all attempts) 2.1498 (0,1) 16 Coefficient of internal consistency 86.64% (>75%) 17 Error ratio (for all attempts) 36.56% (30% >50% Facil Stand Que ard ity stio n Questio Atte inde devia tion x type n name mpts (2) (3) (4) (5) (6) MC AD1C01Q001 68 79.4 40.74 55.8 50.02 MC AD1C01Q002 68 61.7 48.96 MC AD1C01Q003 68 MC AD1C01Q004 68 95.5 20.69 83.8 37.10 MC AD1C01Q005 68 68 80.8 39.62 MC HIEC01Q001 68 89.7 30.61 MC HIEC01Q002 68 91.1 28.57 MC HIEC01Q003 Các giá trị cho phép 33% Rando m guess score (7) 25.00 25.00 25.00 25.00 25.00 25.00 25.00 25.00 Độ lệch Độ dễ chuẩn 70‐80 Tương đối dễ 81‐89 Khá Dễ 90‐94 Quá dễ 94‐100 Đặc biệt dễ Câu phải loại Độ phân loại 100 Multiple chCâu 101 Multiple chCâu 38 102 Multiple chCâu 39 103 Multiple chCâu 40 104 Multiple chCâu 105 Multiple chCâu 42 Còn 14 câu 238 92.44% 228 42.54% 234 82.48% 231 97.40% 241 39.42% 243 98.77% 26.50% 25.00% 49.55% 25.00% 38.10% 25.00% 15.94% 25.00% 48.97% 25.00% 11.07% 25.00% 33% TC1 TC2 2.00% 2.00% 2.00% 2.00% 2.00% 2.00% 34.68% 6.09% 40.83% 34.30% 16.48% 35.14% 49.74% 8.61% 53.04% 65.18% 24.85% 75.18% >30% >50% Khoảng GT cho phép  TC3 TC4 Tiêu chuẩn loại 1- Các câu dễ (TC1>90%) 2- Các câu khó (TC1