• Kiểm chứng độ tin cậy: trong điều kiện không có phương tiện CNTT có thể sử dụng các phương pháp đơn giản như kiểm tra nhiều lần, sử dụng dạng đề tương đương….[r]
(1)B3 Đo lường - Thu thập liệu
1 Thu thập dữ liệu
2 Độ tin cậy độ giá trị
(2)2 1 Thu thập liệu
Có dạng liệu cần thu thập nghiên cứu:
1 Kiến thức Biết, hiểu, vận dụng
2 Hành vi Kỹ năng, tham gia,
thói quen, khả
3 Thái độ Hứng thú, tích cực tham
gia, quan tâm, ý kiến
(3)Các phương pháp thu thập liệu
Đo lường Phương pháp
1 Kiến thức Sử dụng kiểm tra thông thường kiểm tra thiết kế đặc biệt
2 Hành vi Thiết kế thang xếp hạng bảng kiểm quan sát
(4)4 Đo kiến thức
• Các thi cũ, kiểm tra thông thường lớp
Các kiểm tra sử dụng NC gồm:
Vì: khơng cơng xây dựng chấm điểm
kiểm tra mới; Các kết nghiên cứu có tính
thuyết phục cao hoạt động bình thường lớp học Điều làm tăng độ giá trị liệu thu
• Với số NC, cần có kiểm tra
(5)Đo hành vi
Có thể đo hành vi học sinh như:
• học giờ
• sử dụng ngơn ngữ • ăn mặc phù hợp
• giơ tay trước phát biểu • nộp tập hạn
(6)6 Đo kĩ năng
Có thể đo kĩ học sinh như:
• Sử dụng kính hiển vi (hoặc dụng cụ khác) • Sử dụng cơng cụ thực hành
• Chơi nhạc cụ • Đánh máy
• Đọc trích đoạn
• Đọc diễn cảm thơ đoạn hội thoại • Thuyết trình
(7)Đo hành vi/kĩ năng
Collect data on student’s performance or behavior
Rating scales Observation Checklists
Thu thập liệu
hành vi/kĩ học sinh
Thang xếp hạng Bảng kiểm quan sát
Tương tự thang đo thái độ tập trung vào hành vi/kĩ năng quan sát được.
(8)8 Đo hành vi: Ví dụ
Cơng cụ đo Ví dụ
1 Thang xếp hạng
Tần suất mượn sách thư viện nhà trường HS tháng vừa
qua nào?
Rất thường xuyên Thường xuyên Thỉnh thoảng Hiếm
Không
2 Bảng kiểm
quan sát Học sinh xung phong lên bảng giải tập Toán lớp.
(9)Đo thái độ
• Gồm 8-12 câu hỏi theo dạng thang Likert • Mỗi câu hỏi gồm:
- Một mệnh đề mô tả/ đánh giá liên quan đến đối
tượng đo thái độ
- Thang đo với mức độ sử dụng phổ biến • Các dạng phản hồi sử dụng:
đồng ý, tần suất, tính tức thì
tính cập nhật, tính thiết thực
(10)10 Đo thái độ
• Các dạng phản hồi:
Thang đo thái độ
Đồng ý Hỏi mức độ đồng ý
Tần suất Hỏi tần suất thực nhiệm vụ
Tính tức
Hỏi thời điểm bắt đầu thực nhiệm vụ
Tính
cập nhật
Hỏi thời điểm thực nhiệm vụ gần
Tính
thiết thực
(11)Ví dụ câu hỏi dạng
phản hồi thang đo thái độ
Đồng ý
Tần suất
Tơi thích đọc sách làm số hoạt động khác.
Hoàn toàn đồng ý Đồng ý Bình thường Khơng đồng ý Hồn tồn khơng đồng ý
Tơi đọc truyện.
Hằng ngày Hầu hết ngày
(12)12
Tính tức thì
Tính cập nhật
Bạn bắt đầu làm tập nào?
Ngay ngày, … , Cho đến
có thời gian
Lần cuối bạn đọc sách nào?
Tuần này, …., Hai tháng trước
Tính thiết thực
Nếu cho 200.000đ, bạn sử dụng tiền để mua sách?
(13)Đo thái độ: Ví dụ
Thang đo thái độ mơn Tốn
Mệnh đề khẳng định (Câu 1, 2, 3), Mệnh đề phủ định (Câu 4,5) Mỗi mức độ tương ứng với điểm số (1 đến 5) Lưu ý: Đồng ý với
Rất không đồng ý
Khơng
đồng ý thường Bình Đồng ý Rất đồng ý
1 Tơi chắn có khả
năng học Tốn.
2 Cơ giáo quan tâm đến tiến
bộ học Toán tơi.
3 Kiến thức Tốn học sẽ
giúp tơi kiếm sống.
4 Tơi khơng tin giải
Tốn nâng cao.
5 Tốn học không quan trọng
(14)14 Lưu ý xây dựng thang đo
• Mỗi mệnh đề nên diễn đạt ý tưởng/khái niệm.
• Sử dụng ngơn ngữ đơn giản.
(15)Lưu ý xây dựng thang đo
• Nêu đầy đủ mức độ phản hồi, đặc biệt thang đo sử dụng với đối tượng nhỏ tuổi kinh nghiệm
• Sử dụng điều chỉnh lại thang sẵn có cho phù hợp; xây dựng thang đo trường hợp thực cần thiết
(16)16
3- Độ tin cậy độ giá trị
Độ tin cậy: Ví dụ
Đo cân nặng bạn A
Ngày Cân nặng
(kg)
1 58
2 65
3 62
Có điều bất ổn cân nặng thay đổi
(17)Độ giá trị
Độ giá trị tính xác thực liệu
thu thập Các liệu có giá trị phản ánh trung thực kiến thức/hành vi/thái độ
(18)18
Độ tin cậy giá trị
Tin cậy
Khơng có giá trị
Giá trị
Không tin cậy
Không tin cậy
(19)3 Kiểm chứng độ tin cậy liệu 1 Kiểm tra nhiều lần
2 Sử dụng dạng đề tương đương 3 Chia đôi liệu
(20)20
1 Kiểm tra nhiều lần
Đối với phương pháp này, nhóm HS làm một bài kiểm tra hai lần
hai thời điểm khác nhau Nếu liệu
đáng tin cậy, điểm số hai lần kiểm tra phải tương tự có độ tương
quan cao
(21)2 Sử dụng dạng đề tương đương
Đối với phương pháp này, cần tạo hai dạng đề khác nhau cùng nội dung kiểm tra Cùng nhóm thực hai kiểm tra thời điểm Tính độ tương quan điểm hai kiểm tra để xác định tính quán hai dạng đề
(22)22
• Chia điểm số thành phần (theo câu hỏi số chẵn: Câu 2,4,6,8,10 câu hỏi số lẻ: Câu 1,3,5,7,9)
• Kiểm tra tính qn hai phần
• Áp dụng cơng thức tính độ tin cậy Spearman-Brown
3 Chia đôi liệu:
rSB = * rhh / (1 + rhh)
(23) Ví dụ: Chúng ta có điểm số 15 học
(24)24 Độ tin cậy Spearman-Brown: Ví dụ
Bảng ví dụ thang đo với 15 học sinh (A-O) trả lời 10 câu hỏi (Q1-Q10)
Kết trả lời câu hỏi biểu thị số từ đến (ví dụ: Hồn tồn khơng đồng ý = Hoàn
(25)Độ tin cậy Spearman-Brown: Ví dụ
Tổng cộng cột lẻ (Q1 + Q3 + Q5 + Q7 + Q9)
r = 0.92 = CORREL (M2:M16, N2:N16)
Hệ số tương quan chẵn lẻ Độ tin cậy Spearman-Brown
(26)26
Sau tính hệ số tương quan chẵn lẻ
(rhh) theo công thức bảng tính Excel:
rhh = CORREL (array 1,array 2) (array 1: cột lẻ, array 2: cột chẵn)
Theo VD ta có:
rhh = CORREL (M2:M16, N2:N16) = 0.92
Với giá trị r
hh 0.92, dễ dàng tính
độ tin cậy Spearman-Brown (rSB) công thức: rSB = * 0,92 / (1 + 0,92) = 0.96
Trong trường hợp này, độ tin cậy có giá trị
(27)4. Kiểm chứng độ giá trị liệu
Có cách kiểm chứng độ giá trị:
(28)28 Kiểm chứng độ giá trị liệu
1 Độ giá trị nội dung
• Xem xét liệu câu hỏi có phản ánh vấn đề, khái niệm hành vi cần đo
trong nghiên cứu hay khơng.
• Có tính chất mơ tả nhiều thống kê. • Có thể lấy nhận xét giáo viên có kinh
(29)Kiểm chứng độ giá trị liệu
2 Độ giá trị đồng quy
• Về mặt logic, điểm số đạt trong nghiên cứu phải có độ tương quan cao với điểm số của môn học.
(30)30 Kiểm chứng độ giá trị liệu
3 Độ giá trị dự báo
• Tương tự độ giá trị đồng quy có định hướng tương lai.
(31)Một số lưu ý áp dụng
• Xác định công cụ đo/thu thập liệu để đo vấn đề cần NC
• Độ tin cậy độ giá trị chất lượng liệu, công cụ thu thập liệu