Ở nước ngoài, siêu phân tích là một phương pháp được sử dụng khá phổ biến trong nghiên cứu khoa học giáo dục song còn là mới mẻ đối với nước ta. Bài viết đề cập đến những lợi ích cũng như những thách thức đối với các nhà nghiên cứu giáo dục Việt Nam hiện nay nếu muốn thực hiện phương pháp này.
PHƯƠNG PHÁP SIÊU PHÂN TÍCH TRONG NGHIÊN CỨU KHOA HỌC GIÁO DỤC PGS.TS Đào Thị Oanh Viện Nghiên cứu Sư phạm-Trường ĐHSP Hà Nội Tóm tắt: Ở nước ngồi, siêu phân tích phương pháp sử dụng phổ biến nghiên cứu khoa học giáo dục song mẻ nước ta Bài viết đề cập đến lợi ích thách thức nhà nghiên cứu giáo dục Việt Nam muốn thực phương pháp Sự cần thiết nghiên cứu siêu phân tích Khoa học giáo dục xem lĩnh vực “khoa học mềm” tượng giáo dục luôn vận động, phát triển chịu tác động nhiều yếu tố khác khiến cho nhà nghiên cứu khó đánh giá cách tuyệt đối xác khách quan tượng nghiên cứu thông qua phương pháp định lượng tượng tự nhiên Vì có khuyến nghị nhà nghiên cứu đưa nhằm khắc phục điểm yếu nói nghiên cứu giáo dục, theo đó, cách tốt để giúp đưa định giáo dục khách quan phải phân tích nhiều tốt nghiên cứu chủ đề (Larry Hedges, Morton Hunt, Robert J Marzano ) Đó vì, nghiên cứu đơn lẻ nào, dù thiết kế tốt đến đâu khơng thể khắc phục hồn tồn “lỗi khơng kiểm sốt được” [dẫn theo 3] Đây lí nghiên cứu lĩnh vực giáo dục phép có xác suất sai tối đa phần trăm (hay, mức ý nghĩa = 0,05) Bằng cách kết hợp phân tích kết nhiều nghiên cứu, nhà nghiên cứu nói chắn nhiều so với dựa nghiên cứu đơn lẻ, phương pháp/biện pháp giáo dục hiệu hay khơng hiệu Nghiên cứu siêu phân tích lĩnh vực giáo dục thực từ năm cuối kỉ 20 triển khai ngày nhiều chuyên gia nghiên cứu giáo dục, đặc biệt Mỹ, như: Christopher Jencks (1972), Powell G (1980), Redfield D.L & Rousseau E.W (1981), Jacob Cohen (1988), Hunter & Schmidt (1990), Rosenthal R (1991), John Hattie (1992, 1996 – đánh giá tập nhà), Robert J Marzano (2001, 2003, 2007), Debra J Pickering, Jane E Pollock (2001), David P Baker & Gerald K LeTendre (2004)…Kết thu từ nghiên cứu siêu phân tích cơng trình khoa học có giá trị tham khảo lớn người làm công tác nghiên cứu khoa học giáo dục, mà giáo viên, nhà quản lí giáo dục người làm sách giáo dục Nhiều cơng trình số nhiều nước dịch có Việt Nam: “Khác biệt quốc gia - Đồng dạng toàn cầu”, “Các phương pháp dạy học hiệu quả”, “Quản lí hiệu lớp học”, “Nghệ thuật khoa học dạy học”… Phương pháp siêu phân tích cho phép xây dựng khái qt hóa giáo dục mà trước chưa có Dưới vài minh họa: - Xu hướng chung điểm khác biệt giáo dục học đường toàn cầu quốc gia; điều làm hay điều chưa làm giáo dục học đường khứ tại; nghịch lí giáo dục học đường nay; khó khăn mà quốc gia phải đối mặt việc cung cấp giáo dục học đường cho hệ trẻ; định hướng phát triển giáo dục tương lai toàn cầu…là vấn đề chia sẻ sách “National Differences, Global Similarities World Culture and the Future of Schooling” tác giả David P Baker & Gerald K LeTendre Đây kết nghiên cứu siêu phân tích từ tập hợp liệu khổng lồ thực trạng giáo dục học đường nhiều quốc gia giới, cung cấp cho nhà nghiên cứu khoa học giáo dục thông tin có giá trị khoa học lớn, đồng thời gợi ý kĩ thuật định lượng cần thiết nghiên cứu nói chung [1] - Cuốn sách “Quản lí hiệu lớp học” Robert J Marzano & cộng kết cơng trình tập hợp từ 100 nghiên cứu riêng lẻ quản lí lớp học cấp học phổ thông, hình thức giáo dục thơng thường lẫn chun biệt đề cập tới nhiều khía cạnh khác lúc, như: Nội quy lớp học, quy tắc ứng xử lớp học, kỉ luật, trách nhiệm, quan hệ thầy-trò, định hướng tâm lí Nhiều khuyến nghị sách đưa dựa cách tiếp cận nghiên cứu chưa vận dụng trước nghiên cứu quản lí lớp học phương pháp siêu phân tích Về mặt kĩ thuật, việc vận dụng siêu phân tích vào cơng trình nghiên cứu khiến cho vấn đề định lượng trở nên phức tạp nhiều số lượng “mức độ hiệu quả” cần xem xét tính toán lên tới số 134, hầu hết trường hợp, thường có mức độ hiệu tính tốn nghiên cứu [3] - Tương tự, để đánh giá hiệu tổng thể phương pháp dạy học đánh giá kết học tập học sinh, Robert J Marzano & cộng ơng phân tích hàng trăm nghiên cứu chủ đề lớp học từ mẫu giáo lớp 12 Phương pháp nghiên cứu sử dụng cho việc phân tích siêu phân tích Cuốn sách “Classroom Instruction that Works” Robert J Marzano cung cấp kĩ thuật nghiên cứu cần thiết gợi ý thực tiễn để giúp giáo viên vào nghề giáo viên có kinh nghiệm có thêm cơng cụ khoa học để làm cho việc dạy học trở nên hiệu [2] - Một số cơng trình nghiên cứu khác giáo dục khẳng định trình dạy học hiệu đòi hỏi người giáo viên không nghệ thuật mà khoa học Phần nghệ thuật dạy học thể chỗ, nghiên cứu đưa câu trả lời cho học sinh tình huống; hay, loại hành vi, song thực theo trình tự, cách thức khác đưa đến kết khơng giống hai giáo viên khác Bằng chứng là, tập hợp nghiên cứu đơn lẻ lại để đánh giá nhà nghiên cứu phát có nghiên cứu thực nghiệm có mức độ hiệu âm điểm phân vị giảm Phần khoa học trình dạy học thể đúc kết từ nghiên cứu, hướng dẫn cho giáo viên cụ thể hành vi làm nên việc dạy học hiệu quả, đồng thời cung cấp kĩ thuật để giáo viên sử dụng q trình dạy học Và, giống nghiên cứu nêu phần trên, phương pháp sử dụng nghiên cứu siêu phân tích [4] Vậy siêu phân tích gì? Siêu phân tích (Meta-analysis) phương pháp nghiên cứu Gene Glass & cộng thức xây dựng vào đầu năm 70 kỉ XX Hiểu đơn giản kĩ thuật kết hợp định lượng kết từ nhiều nghiên cứu Ngay từ đời phương pháp sử dụng rộng rãi lĩnh vực nghiên cứu Tâm lí học, Y học, Giáo dục học, Tội phạm học nhiều lĩnh vực khác, mà người ta bắt buộc phải đưa định hình thức can thiệp hình thức tác động tốt có Liên quan đến vấn đề này, nhà nghiên cứu Morton Hunt (1997) nêu tác động mạnh mẽ phương pháp siêu phân tích đến lĩnh vực nghiên cứu khác [dẫn theo 3] Ngày nay, hiểu cách khái quát nhất, siêu phân tích phương pháp nghiên cứu sử dụng kĩ thuật thống kê sác xuất nhằm kết hợp định lượng liệu từ nhiều nghiên cứu thuộc chủ đề chung, sở đánh giá thực trạng dựa minh chứng hay xác định tính hiệu cách thức can thiệp cách thức tác động Khi mức độ hiệu tất nghiên cứu tập hợp phù hợp qn việc siêu phân tích sử dụng để xác định mức độ hiệu chung Còn mức độ hiệu nghiên cứu khác nhau, siêu phân tích sử dụng để xác định nguyên nhân khác Phương pháp siêu phân tích sử dụng nghiên cứu lẫn nghiên cứu ứng dụng Trong nghiên cứu ứng dụng, siêu phân tích sử dụng nhằm xác định cách thức can thiệp hiệu [2],[3], [4] Còn nghiên cứu bản, siêu phân tích sử dụng để đánh giá thực trạng dựa minh chứng lĩnh vực khoa học khác nhau, như: Giáo dục học, Xã hội học, Tâm lí học Xã hội, Kinh tế - Tài chính, Khoa học Chính trị, Khoa học Môi trường…[1] Kĩ thuật thống kê sử dụng nghiên cứu siêu phân tích Cùng với phát triển khoa học đo lường ứng dụng công nghệ thông tin vào NCKHGD, kĩ thuật thống kê sử dụng nghiên cứu siêu phân tích có bước tiến quan trọng, giúp cho kết đánh giá trở nên dễ hiểu, xác, khách quan, thuyết phục Nếu trước đó, nghiên cứu giáo dục, người ta thường chủ yếu tập trung vào tỉ lệ phần trăm khác biệt điểm số, nghiên cứu siêu phân tích, kĩ thuật sử dụng tính tốn mức độ hiệu điểm phân vị tăng dựa mơ hình tốn học Thơng thường nghiên cứu khoa học giáo dục, siêu phân tích bao gồm kết thu từ số nghiên cứu loại để xác định hiệu trung bình phương pháp tác động giáo dục Khi thực phương pháp siêu phân tích nhà nghiên cứu chuyển đổi kết nghiên cứu thành đơn vị đo lường gọi “mức độ hiệu quả” (“effect size”) Như vậy, nói, mức độ hiệu chuẩn đo lường sử dụng nghiên cứu siêu phân tích Chẳng hạn, nghiên cứu phương pháp dạy học hiệu cho biết mức độ khác biệt hành vi (mà người nghiên cứu kì vọng) lớp học có áp dụng hiệu phương pháp dạy học so với lớp học khơng áp dụng phương pháp Mức độ hiệu biểu thị tăng lên hay giảm kết đạt nhóm học sinh tham gia thực nghiệm (là nhóm học sinh tiếp cận với phương pháp dạy học đó) đơn vị độ lệch chuẩn (Standard Deviation) Những đơn vị độ lệch chuẩn phiên sang điểm phân vị, theo đó, có điểm phân vị tăng điểm phân vị giảm “Phân vị” thuật ngữ thống kê toán học, thể vị trí cá nhân phân bố chung nhóm mẫu Một phân vị biểu diễn cho 100 nhóm chia từ tập hợp Ví dụ, học sinh đạt điểm phân vị 21 trắc nghiệm, có nghĩa học sinh làm có kết 79% tổng số học sinh tham gia làm trắc nghiệm [dẫn theo 4] Giả sử mức độ hiệu tính cho phương pháp tác động giáo dục 1,0, có nghĩa là, điểm trung bình học sinh tham gia nhóm thực nghiệm phương pháp cao độ lệch chuẩn so với điểm trung bình học sinh nhóm đối chứng (là nhóm khơng nhận tác động thực nghiệm) Hay nói cách khác, học sinh đạt 50 điểm phân vị nhóm thực nghiệm thứ hạng cao độ lệch chuẩn so với học sinh có điểm phân vị nhóm đối chứng Như vậy, nghiên cứu cho thấy mức độ hiệu phương pháp dạy học độ lệch chuẩn (1,0 SD) người ta phiên sang điểm phân vị tăng Mỗi nghiên cứu siêu phân tích lĩnh vực cố gắng tổng hợp lại phát từ cơng trình nghiên cứu thuộc lĩnh vực dạng định lượng Những phát từ nghiên cứu chuyển thành “mức độ hiệu quả” - Trong trường hợp siêu phân tích hướng vào đánh giá tác động lên nhóm/lớp học, mức độ hiệu xác định theo cơng thức tính độ lệch chuẩn Theo cách đó, hiệu số giá trị trung bình nhóm thực nghiệm giá trị trung bình nhóm đối chứng phiên sang đơn vị độ lệch chuẩn Ví dụ, nhóm thực nghiệm lớp học có sử dụng phương pháp dạy học đó, nhóm đối chứng lớp học không sử dụng phương pháp dạy học Khi mức độ hiệu độ tăng lên điểm trung bình tồn lớp học - Còn trường hợp siêu phân tích hướng vào đánh giá cá nhân học sinh, việc tính tốn mức độ hiệu khác chút so với trường hợp lớp học, tức dựa độ tăng điểm trung bình học sinh (Crosbie, 1993) Tuy nhiên, cho dù thực nghiệm thiết kế toàn lớp học hay đối tượng học sinh mức độ hiệu chuyển sang điểm phân vị Đó mức độ hiệu thường biểu diễn đơn vị độ lệch chuẩn, độ lệch chuẩn lại dễ dàng phiên sang điểm phân vị Điều hoàn tồn dễ thấy quan sát đường cong phân bố chuẩn điểm lợi siêu phân tích nghiên cứu khoa học giáo dục Ngày nay, với phát triển nhanh chóng cơng nghệ thơng tin, có phần mềm ứng dụng viết giúp nhà nghiên cứu dễ dàng, thuận lợi việc triển khai thực siêu phân tích khoa học giáo dục Thực tế là, có sẵn bảng điểm phân vị tăng giảm tương ứng mà nhà nghiên cứu đưa để tiện tra cứu sử dụng cho người tiến hành siêu phân tích Mức độ hiệu bảng bao quát từ 0,00 đến 2,33 và/hoặc -2,33 Nghiên cứu siêu phân tích có ích lợi gì? Siêu phân tích nghiên cứu vơ cơng phu, đòi hỏi thời gian tỉ mỉ kĩ lưỡng, đặc biệt đòi hỏi thành thạo việc vận dụng kĩ thuật định lượng thống kê toán học vào lĩnh vực khoa học giáo dục Điều khiến cho khơng phải dễ dàng thực cho dù nhà nghiên cứu mong muốn Bù lại, thực kết nghiên cứu siêu phân tích mang lại cho người nghiên cứu nhiều tác dụng thiết thực Từ việc phân tích tư liệu tham khảo được, đưa số lợi điểm rõ rệt siêu phân tích nghiên cứu khoa học giáo dục sau: -Kết nghiên cứu siêu phân tích cung cấp đánh giá khách quan khuynh hướng chung phát từ nghiên cứu đơn lẻ chủ đề dựa việc xây dựng khái quát mà trước chưa có Một thực tế nhà nghiên cứu đưa là, khơng có phương pháp tác động giáo dục cho kết giống tình dạy học với đối tượng học sinh Hiện nay, việc nghiên cứu tính hiệu phương pháp dạy học/giáo dục/đánh giá kết học tập/quản lí lớp học loại học sinh hoàn cảnh cụ thể với môn học cụ thể nhu cầu cấp thiết cần phải nhà nghiên cứu quan tâm mức Tuy nhiên, lúc việc áp dụng phương pháp khác vào thực tế lớp học cần giáo viên cân nhắc phải dựa vào hiểu biết học sinh, hồn cảnh dạy học Bởi vì, phương pháp cho dù tốt công cụ mà - Nghiên cứu siêu phân tích góp phần xây dựng, cung cấp sở liệu định lượng định tính quan trọng nhiều khía cạnh khác giáo dục nhà trường cho đối tượng quan tâm (cán nghiên cứu giáo dục, cấp quản lí giáo dục, giáo viên, giáo dục viên…) thông qua kết hiệu tổng thể phương pháp nhà trường - Về mặt kĩ thuật thống kê, việc đo lường mức độ hiệu giúp nhà nghiên cứu dễ dàng chuyển sang điểm phân vị tăng giúp xác định cách khách quan tính hiệu phương pháp đó, cho dù cách diễn giải mức độ hiệu nhà nghiên cứu khác (chẳng hạn, Jacob Cohen đưa cách khác với nhiều nhà nghiên cứu để diễn giải mức độ hiệu Theo ông, mức độ hiệu 0,20 coi thấp; 0,50 coi trung bình 0,80 coi cao) - Nghiên cứu siêu phân tích cung cấp kĩ thuật định lượng giúp đưa đánh giá khách quan kết nghiên cứu khoa học giáo dục thực hiện, đặc biệt nghiên cứu thực nghiệm Kĩ thuật tính tốn mức độ hiệu điểm phân vị tăng vận dụng vào nghiên cứu thực nghiệm giáo dục đơn lẻ nhằm đánh giá hiệu tác động đến người học phương pháp ứng dụng Đồng thời, kết siêu phân tích giúp củng cố quan điểm cho rằng, lĩnh vực khoa học giáo dục, để có sách giáo dục tốt có thể, cần phải thực nhiều tốt nghiên cứu chủ đề chúng phải phân tích kết hợp - Kết siêu phân tích có vai trò hỗ trợ cho việc thiết kế nghiên cứu khoa học nhà nghiên cứu thấy vấn đề giải quyết, vấn đề cần phải tiếp tục nghiên cứu sâu Bên cạnh đó, nghiên cứu siêu phân tích tạo điều kiện cho việc triển khai ứng dụng kết nghiên cứu vào thực tiễn giáo dục tính thuyết phục Hiện nay, nhiều tạp chí chuyên ngành khoa học giáo dục nước ngồi thường khuyến khích nhà nghiên cứu đưa vào viết kết siêu phân tích, thể phần tổng quan nghiên cứu Kết luận Mặc dù theo nhà thống kê toán học George Box, mơ hình tốn học tạo nên sở nghiên cứu định lượng gần giống với thực, chúng giúp hiểu vận động hàm ẩn tình cụ thể [dẫn theo 4], nghiên cứu siêu phân tích khoa học giáo dục cung cấp định hướng chung để nhà quản lí giáo dục trường học giáo viên hiểu, vận dụng hiệu vào hồn cảnh cụ thể Nghiên cứu khoa học giáo dục tìm kiếm liên tục, giống nghiên cứu y học, người thầy thuốc phải dựa vào vô số nghiên cứu ý kiến trao đổi để có sở kiến thức mang tính cá biệt việc trao đổi với bệnh nhân Tài liệu tham khảo [1] David P.Baker, Gerald K Le Tendre (2010) Khác biệt quốc gia - Đồng dạng tồn cầu Văn hóa giới tương lai giáo dục học đường NXB “VHSG” Đại học Hoa sen T/P Hồ Chí Minh (Bản dịch Phạm Tấn Hoàng Sơn) [2] Robert J Marzano, Debra J Pickering – Jane E Pollock (2011) Các phương pháp dạy học hiệu NXB Giáo dục Việt Nam Hà Nội (Bản dịch Nguyễn Hồng Vân) [3] Robert J Marzano (2011) Quản lí hiệu lớp học NXB Giáo dục Việt Nam Hà Nội (Bản dịch Phạm Trần long) [4] Robert J Marzano (2011) Nghệ thuật khoa học dạy học NXB Giáo dục Việt Nam Hà Nội (Bản dịch Nguyễn Hữu Châu) 10 ... xác định nguyên nhân khác Phương pháp siêu phân tích sử dụng nghiên cứu lẫn nghiên cứu ứng dụng Trong nghiên cứu ứng dụng, siêu phân tích sử dụng nhằm xác định cách thức can thiệp hiệu [2],[3],... nghiên cứu siêu phân tích Cùng với phát triển khoa học đo lường ứng dụng công nghệ thông tin vào NCKHGD, kĩ thuật thống kê sử dụng nghiên cứu siêu phân tích có bước tiến quan trọng, giúp cho kết... nghiên cứu thuộc lĩnh vực dạng định lượng Những phát từ nghiên cứu chuyển thành “mức độ hiệu quả” - Trong trường hợp siêu phân tích hướng vào đánh giá tác động lên nhóm/lớp học, mức độ hiệu xác định