B3. Thu thap du lieu nghien cuu (3 báo cáo)

B3 Đo lường - Thu thập liệu Thu thập liệu Độ tin cậy độ giá trị Kiểm chứng độ tin cậy liệu Kiểm chứng độ giá trị liệu 1 Thu thập liệu Có dạng liệu cần thu thập nghiên cứu: Kiến thức Biết, hiểu, vận dụng Hành vi Kỹ năng, tham gia, thói quen, khả Thái độ Hứng thú, tích cực tham gia, quan tâm, ý kiến Lưu ý: vào vấn đề NC để lựa chọn dạng liệu cần thu thập phù hợp Các phương pháp thu thập liệu Đo lường Phương pháp Kiến thức Sử dụng kiểm tra thông thường kiểm tra thiết kế đặc biệt Hành vi Thiết kế thang xếp hạng bảng kiểm quan sát Thái độ Thiết kế thang thái độ Đo kiến thức Các kiểm tra sử dụng NC gồm: • Các thi cũ, kiểm tra thơng thường lớp Vì: không công xây dựng chấm điểm kiểm tra mới; Các kết nghiên cứu có tính thuyết phục cao hoạt động bình thường lớp học Điều làm tăng độ giá trị liệu thu Với số NC, cần có kiểm tra thiết kế riêng (ND NC khơng có SGK, chương trình PP mới…) • Đo hành vi Có thể đo hành vi học sinh như: • học • sử dụng ngơn ngữ • ăn mặc phù hợp • giơ tay trước phát biểu • nộp tập hạn • tham gia vào hoạt động nhóm • Đo kĩ Có • • • • • • • • thể đo kĩ học sinh như: Sử dụng kính hiển vi (hoặc dụng cụ khác) Sử dụng công cụ thực hành Chơi nhạc cụ Đánh máy Đọc trích đoạn Đọc diễn cảm thơ đoạn hội thoại Thuyết trình … Đo hành vi/kĩ Collect data on student’s Thu thập liệu hành vi/kĩ học sinh performance or behavior Thang xếp hạng Rating scales Tương tự thang đo thái độ tập trung vào hành vi/kĩ quan sát Bảng kiểm Checklists Observation quan sát Liệt kê theo trình tự hành vi/kĩ cụ thể để HS trả lời Các câu hỏi có dạng câu lựa chọn Có/Khơng Có mặt/ Vắng mặt Đo hành vi: Ví dụ Cơng cụ đo Ví dụ Thang xếp hạng Tần suất mượn sách thư viện nhà trường HS tháng vừa qua nào? Rất thường xuyên Thường xuyên Thỉnh thoảng Hiếm Không Bảng kiểm quan sát Học sinh xung phong lên bảng giải tập Tốn lớp Có Khơng Đo thái độ Thang đo thái độ • Gồm 8-12 câu hỏi theo dạng thang Likert • Mỗi câu hỏi gồm: - Một mệnh đề mô tả/ đánh giá liên quan đến đối tượng đo thái độ - Thang đo với mức độ sử dụng phổ biến • Các dạng phản hồi sử dụng: đồng ý, tính cập nhật, tần suất, tính thiết thực tính tức Đo thái độ Thang đo thái độ • Các dạng phản hồi: Đồng ý Hỏi mức độ đồng ý Tần suất Hỏi tần suất thực nhiệm vụ Tính tức Hỏi thời điểm bắt đầu thực nhiệm vụ Tính cập nhật Hỏi thời điểm thực nhiệm vụ gần Tính thiết thực Hỏi cách sử dụng nguồn lực (VD: thời gian rảnh rỗi, tiền thưởng ) 10 Độ giá trị Độ giá trị tính xác thực liệu thu thập Các liệu có giá trị phản ánh trung thực kiến thức/hành vi/thái độ cần đo 17 Độ tin cậy giá trị Tin cậy Khơng có giá trị Giá trị Khơng tin cậy Khơng tin cậy Khơng có giá trị Tin cậy có giá trị 18 Kiểm chứng độ tin cậy liệu Một số phương pháp kiểm chứng độ tin cậy liệu: Kiểm tra nhiều lần Sử dụng dạng đề tương đương Chia đôi liệu 19 Kiểm chứng độ tin cậy liệu Kiểm tra nhiều lần Đối với phương pháp này, nhóm HS làm kiểm tra hai lần hai thời điểm khác Nếu liệu đáng tin cậy, điểm số hai lần kiểm tra phải tương tự có độ tương quan cao 20 Kiểm chứng độ tin cậy liệu Sử dụng dạng đề tương đương Đối với phương pháp này, cần tạo hai dạng đề khác nội dung kiểm tra Cùng nhóm thực hai kiểm tra thời điểm Tính độ tương quan điểm hai kiểm tra để xác định tính quán hai dạng đề 21 Chia đơi liệu: • Chia điểm số thành phần (theo câu hỏi số chẵn: Câu 2,4,6,8,10 câu hỏi số lẻ: Câu 1,3,5,7,9) • Kiểm tra tính qn hai phần • Áp dụng cơng thức tính độ tin cậy Spearman-Brown rSB = * rhh / (1 + rhh) rSB: Độ tin cậy Spearman-Brown rhh: Hệ số tương quan chẵn lẻ 22  Ví dụ: Chúng ta có điểm số 15 học sinh (A đến O) sử dụng thang đo thái độ với 10 câu hỏi (Q1 đến Q10) Mỗi câu hỏi có điểm dao động từ đến (1: hồn tồn khơng đồng ý 6: Hồn tồn đồng ý) Do có kết bảng sau: 23 Độ tin cậy Spearman-Brown: Ví dụ Bảng ví dụ thang đo với 15 học sinh (A-O) trả lời 10 câu hỏi (Q1-Q10) Kết trả lời câu hỏi biểu thị số từ đến (ví dụ: Hồn tồn khơng đồng ý = Hồn tồn 24 đồng ý = 6) Độ tin cậy Spearman-Brown: Ví dụ Tổng cộng cột lẻ (Q1 + Q3 + Q5 + Q7 + Q9) Điểm lẻ lĐiểm chẵn Hệ số tương quan chẵn lẻ Độ tin cậy Spearman-Brown rhh = 0.92 = CORREL (M2:M16, N2:N16) RSB = * rhh / (1 + rhh) = 0.96 25 Sau tính hệ số tương quan chẵn lẻ (rhh) theo cơng thức bảng tính Excel: rhh = CORREL (array 1,array 2) (array 1: cột lẻ, array 2: cột chẵn) Theo VD ta có: rhh = CORREL (M2:M16, N2:N16) = 0.92  Với giá trị r hh 0.92, dễ dàng tính độ tin cậy Spearman-Brown (rSB) công thức: rSB = * 0,92 / (1 + 0,92) = 0.96  Trong trường hợp này, độ tin cậy có giá trị cao rSB = 0.96 cao giá trị 0.7 Chúng ta kết luận liệu thu đáng tin cậy  26 Kiểm chứng độ giá trị liệu Có cách kiểm chứng độ giá trị:  Độ giá trị nội dung  Độ giá trị đồng quy  Độ giá trị dự đoán 27 Kiểm chứng độ giá trị liệu Độ giá trị nội dung • • • Xem xét liệu câu hỏi có phản ánh vấn đề, khái niệm hành vi cần đo nghiên cứu hay không Có tính chất mơ tả nhiều thống kê Có thể lấy nhận xét giáo viên có kinh nghiệm để kiểm chứng 28 Kiểm chứng độ giá trị liệu Độ giá trị đồng quy • Về mặt logic, điểm số đạt nghiên cứu phải có độ tương quan cao với điểm số mơn học • Tính hệ số tương quan hai tập hợp điểm số cách kiểm chứng độ giá trị 29 Kiểm chứng độ giá trị liệu Độ giá trị dự báo • Tương tự độ giá trị đồng quy có định hướng tương lai • Các điểm số đạt nghiên cứu phải tương quan với điểm số kiểm tra môn học tới 30 Một số lưu ý áp dụng • Xác định cơng cụ đo/thu thập liệu để đo vấn đề cần NC • Độ tin cậy độ giá trị chất lượng liệu, công cụ thu thập liệu • Kiểm chứng độ tin cậy: điều kiện khơng có phương tiện CNTT sử dụng phương pháp đơn giản kiểm tra nhiều lần, sử dụng dạng đề tương đương… 31 ... thu đáng tin cậy  26 Kiểm chứng độ giá trị liệu Có cách kiểm chứng độ giá trị:  Độ giá trị nội dung  Độ giá trị đồng quy  Độ giá trị dự đoán 27 Kiểm chứng độ giá trị liệu Độ giá trị nội dung... tích cực tham gia, quan tâm, ý kiến Lưu ý: vào vấn đề NC để lựa chọn dạng liệu cần thu thập phù hợp Các phương pháp thu thập liệu Đo lường Phương pháp Kiến thức Sử dụng kiểm tra thông thường kiểm... xây dựng chấm điểm kiểm tra mới; Các kết nghiên cứu có tính thuyết phục cao hoạt động bình thường lớp học Điều làm tăng độ giá trị liệu thu Với số NC, cần có kiểm tra thiết kế riêng (ND NC khơng