Chương 2 THIẾT KẾ VÀ TỔ CHỨC NGHIÊN CỨU
2.2. Tổ chức nghiên cứu
2.2.1. Giới thiệu về thiết kế chọn mẫu
Do đề tài nghiên cứu sử dụng cơ sở dữ liệu đã có, tác giả giới thiệu tổng quan về thiết kế chọn mẫu của kỳ khảo sát chính thức PISA 2012.
Theo một số quy định và tiêu chuẩn trong các Tiêu chuẩn Kỹ thuật của PISA 2012, những HS khảo sát được rút ra từ một tổng thể mục tiêu có thể so sánh được ở mỗi quốc gia, đều ở một độ tuổi tương đương. Nhằm đạt được độ chính xác nhất định trong đo lường ở tất cả các nước, cỡ mẫu đại diện này không nên quá nhỏ.
Theo Tiêu chuẩn 1.1, tổng thể mục tiêu ước tính trong PISA được nhất trí thơng qua sự đàm phán giữa các Giám đốc Dự án Quốc gia (National Project Manager - NPM) và nhà thầu quốc tế (International Contractor) bằng
những quy định ràng buộc (các Tiêu chuẩn) trong Tổng thể mục tiêu PISA. Ở mỗi nước/nền kinh tế, cỡ mẫu tối tiểu để tham gia PISA là 4,500 học sinh (theo Tiêu chuẩn 1.7) và 150 trường (theo Tiêu chuẩn 1.8).
Về quy trình chọn mẫu khảo sát, thiết kế mẫu cho PISA là thiết kế phân tầng hai giai đoạn. Các đơn vị chọn mẫu trong giai đoạn đầu tiên bao gồm các trường với khả năng có những HS đạt điều kiện của PISA tại thời điểm đánh giá. Các trường được lấy mẫu một cách có hệ thống theo kiểu chọn mẫu xác suất tỷ lệ với cỡ (PPS). Thông thường, cần lựa chọn trên 150 trường ở mỗi nước vì có nhiều trường cỡ nhỏ. Các đơn vị chọn mẫu trong giai đoạn thứ hai là những HS ở các trường mẫu, bằng phần mềm KeyQuest. Sau khi các trường được chọn vào mẫu, nhà trường cần xây dựng danh sách HS đủ điều kiện
38
PISA. Thông thường, “cỡ cụm mục tiêu” (‘target cluster size’ - TCS) là 35
HS; tổng cộng, sẽ thu được cỡ mẫu tối thiểu là 4.500 HS. Đối với các trường có dưới 20 HS đủ điều kiện PISA, các trường này vẫn có trong khung chọn mẫu và nếu được lấy mẫu, cần phải có HS tham gia khảo sát.
Kết quả phân tích thống kê về tỉ lệ mẫu của Việt Nam cho thấy: miền Bắc có số HS được chọn mẫu tham gia PISA nhiều nhất (1.751 HS tương đương với 35.4%); miền Trung và miền Nam có lần lượt là 1.591 và 1.617 HS được chọn vào mẫu khảo sát. Trên toàn quốc, phần lớn HS (4.532 HS tương đương với 92%) trong mẫu khảo sát đều đang theo học ở các trường công lập. Số lượng HS đang theo học các trường ở khu vực thành thị là 2.357 (chiếm 47.6%).
Bảng 2.1. Cơ cấu mẫu PISA 2012 của Việt Nam
Miền Loại trường Khu vực Số lượng HS Tỷ lệ %
Bắc Công lập Thành thị 643 13,0 Nông thôn 797 16,1 Vùng sâu, xa 129 2,6 Ngồi cơng lập Thành thị 102 2,1 Nông thôn 68 1,4 Vùng sâu, xa 12 0,2 Trung Công lập Thành thị 630 12,7 Nông thôn 703 14,2 Vùng sâu, xa 121 2,4 Ngồi cơng lập Thành thị 69 1,4 Nông thôn 68 1,4 Nam Công lập Thành thị 849 17,1 Nông thôn 598 12,1 Vùng sâu, xa 62 1,3 Ngồi cơng lập Thành thị 64 1,3 Nông thôn 44 0,9 Tổng 4959 100
39
2.2.2. Phƣơng pháp thu thập thông tin
2.2.2.1. Thu thập thông tin bằng phƣơng pháp định tính
Phương pháp nghiên cứu tài liệu
Trước tiên, tác giả tìm hiểu các báo cáo quốc tế, cơng trình nghiên cứu, bài báo và tạp chí có liên quan đến đề tài; từ đó, tiến hành phân tích và tổng hợp để xây dựng cơ sở lý luận cho luận văn. Bước tiếp theo là chọn lọc những tài liệu có độ tin cậy cao và cơ sở lý thuyết phù hợp để xây dựng khung lý thuyết của đề tài.
Cụ thể, tác giả đã tiến hành nghiên cứu nhiều tài liệu về quy trình kỹ thuật tổ chức các kỳ khảo sát chính thức và khảo sát thử nghiệm của PISA, các báo cáo PISA quốc tế của OECD, một số báo cáo PISA quốc gia của một số nước trên thế giới, nhiều cơng trình khoa học trên thế giới về các yếu tố ảnh hưởng đến KQHT của HS phổ thông, một số luận án tiến sĩ và luận văn thạc sĩ trong nước về tìm hiểu các yếu tố ảnh hưởng cũng như xây dựng các chương trình đánh giá KQHT của HS phổ thơng.
Phương pháp chuyên gia
Tác giả đã tiến hành trao đổi và xin ý kiến của một số chuyên gia về vấn đề nghiên cứu.
2.2.2.2. Thu thập thông tin bằng phƣơng pháp định lƣợng
Tác giả chọn lọc các câu hỏi trong bảng hỏi HS có liên quan đến đặc điểm gia đình, như sau:
Nền tảng gia đình: cấu trúc gia đình, nghề nghiệp và trình độ học vấn của bố mẹ, điều kiện kinh tế của gia đình;
Các điều kiện hỗ trợ việc học ở nhà: những điều kiện phục vụ cho việc học toán ở nhà của HS;
Vai trò của bố mẹ: sự kèm cặp, quan điểm và sự định hướng của bố mẹ đối với việc học toán của HS.
40
Sau đó, tác giả nghiên cứu cơ sở dữ liệu PISA 2012 của Việt Nam để chọn các biến đơn và các biến đã được tổng hợp có liên quan đến nội dung câu hỏi trong bảng hỏi HS.
Cuối cùng, các biến số về thành tích tốn học của HS Việt Nam được lựa chọn để đưa vào mơ hình phân tích.
2.2.3. Phƣơng pháp xử lý và phân tích số liệu
Trong đề tài nghiên cứu này, phương pháp thống kê toán học được sử dụng để xử lý cơ sở dữ liệu đã có.
Bên cạnh đó, tác giả dùng nhiều phương pháp khác: phân tích nhân tố khám phá (EFA), đánh giá độ tin cậy tin cậy của thang đo bằng hệ số Cronbach Alpha, kiểm định mơ hình nghiên cứu bằng phương pháp phân tích hồi quy đa biến.
2.2.4. Thang đo và kiểm định thang đo 2.2.4.1. Xây dựng thang đo 2.2.4.1. Xây dựng thang đo
Sau khi nghiên cứu bảng hỏi HS và từ cơ sở dữ liệu đã có, tác giả chọn ra các câu hỏi và các biến tương ứng để đo các khía cạnh thuộc về đặc điểm gia đình.
Tổng cộng, tác giả đã chọn ra 25 biến đơn và biến tổng hợp trong bộ dữ liệu, tương ứng với 15 câu hỏi trong bảng hỏi HS.
Các biến đơn được ký hiệu bắt đầu bằng ST (ví dụ: ST25Q01), các biến tổng hợp được ký hiệu bằng chữ cái in hoa (ví dụ: FAMSTRUC).
Bảng 2.1 trình bày thơng tin cụ thể về các biến được lựa chọn và nội dung câu hỏi, phương án trả lời tương ứng.
41
Bảng 2.2. Nội dung câu hỏi và các biến đơn, biến tổng hợp
TT Nội dung Tên câu hỏi
Các phương án trả lời Biến quan sát
Thang đo định danh
1 Em thường sống ở nhà với ai?
Q11 Mẹ (kể cả mẹ kế hoặc mẹ nuôi) Bố (kể cả bố dượng hoặc bố nuôi) (Các) anh em trai (kể cả con riêng) (Các) chị em gái (kể cả con riêng) (Các) ông bà Những người khác (ví dụ: người thân) FAMSTRUC 2 Ngôn ngữ sử dụng nhiều nhất ở nhà Q24 Tiếng Việt Các tiếng khác ST25Q01 3 Nêu đặc điểm nghề mà mẹ em đang làm?
Q16 Làm việc toàn thời gian <nhận lương>
Làm việc bán thời gian <nhận lương>
Khơng có việc, nhưng đang tìm việc Khác (ví dụ: nội trợ, nghỉ hưu)
ST15Q01
4 Nêu đặc điểm nghề mà bố em đang làm?
Q21 Làm việc toàn thời gian <nhận lương>
Làm việc bán thời gian <nhận lương>
Khơng có việc, nhưng đang tìm việc Khác (ví dụ: nội trợ, nghỉ hưu) ST19Q01 5 Nêu cấp học phổ thông cao nhất mà mẹ em đã tốt nghiệp? Q14 Trung học phổ thông TC nghề, TC chuyên nghiệp Trung học cơ sở Tiểu học
Không tốt nghiệp cấp Tiểu học
MISCED 6 Mẹ em có loại văn bằng nào? Q15 Đại học, Sau ĐH Cao đẳng
42 7 Nêu cấp học phổ thông cao nhất mà bố em đã tốt nghiệp? Q19 Trung học phổ thông TC nghề, TC chuyên nghiệp Trung học cơ sở Tiểu học
Không tốt nghiệp cấp Tiểu học
FISCED 8 Bố em có loại văn bằng nào? Q20 Đại học, Sau ĐH Cao đẳng 9 Ở nhà em có những thứ nào sau đây?
Q25 Bàn học Phòng riêng Chỗ yên tĩnh để học Máy vi tính để làm bài tập Phần mềm giáo dục Kết nối Internet Sách giúp làm bài tập Sách tham khảo Từ điển ST26Q01 ST26Q02 ST26Q03 ST26Q04 ST26Q05 ST26Q06 ST26Q10 ST26Q11 ST26Q12 10 Ở nhà em có bao nhiêu đồ dùng sau đây? Q26 Điện thoại di động Ti vi Máy vi tính Ơ tơ Phịng tắm có bồn tắm/vịi sen ST27Q01 ST27Q02 ST27Q03 ST27Q04 ST27Q05 11 Ở nhà em có bao nhiêu quyển sách? Q27 0-10 quyển 11-25 quyển 26-100 quyển 101-200 quyển 201-500 quyển Trên 500 quyển ST28Q01 12 Hãy nghĩ về tất cả các mơn học: trung bình, em dành bao nhiêu thời gian trong tuần để làm công việc sau
Q43 Học ở nhà với bố mẹ hoặc các thành viên khác trong gia đình.
______ giờ mỗi tuần
43
Thang đo Likert 4 điểm
(1 = rất đồng ý; 2 = đồng ý; 3 = không đồng ý; 4 = rất không đồng ý)
13 Hãy nghĩ về quan điểm đối với toán học của bố mẹ: em đồng ý với nhận định sau như thế nào?
Q29 Bố mẹ tin rằng tốn là mơn học quan trọng đối với em
ST35Q04
14 Hãy nghĩ về quan điểm đối với toán học của bố mẹ: em đồng ý với nhận định sau như thế nào?
Bố mẹ tin rằng học toán là việc quan trọng đối với sự nghiệp của em
ST35Q05
15 Hãy nghĩ về quan điểm đối với toán học của bố mẹ: em đồng ý với nhận định sau như thế nào? Bố mẹ thích mơn tốn ST35Q06
2.2.4.2. Kiểm định thang đo
Như vậy: nền tảng gia đình gồm có 6 biến quan sát, tương ứng với các câu hỏi từ 1 đến 8; các điều kiện hỗ trợ việc học gồm 15 biến quan sát, tương ứng với các câu hỏi từ 10 đến 11. Tất cả những câu hỏi này đều sử dụng thang định danh để đo lường.
Riêng vai trò của bố mẹ gồm 4 biến quan sát, trong đó có 3 biến (ST35Q04, ST35Q05 và ST35Q06) sử dụng thang Likert 4 điểm đo các khái niệm tiềm ẩn. Theo đó, thang đo này phải được kiểm định bằng hệ số Cronbach’s Alpha.
44
Bảng 2.3. Thống kê độ tin cậy
Cronbach's Alpha Số lượng mục hỏi
0.677 3
Bảng 2.4. Hệ số tƣơng quan giữa các mục hỏi
Biến quan sát Tương quan giữa các mục hỏi
Cronbach's Alpha nếu loại biến
ST35Q04 0,573 0,481
ST35Q05 0,568 0,479
ST35Q06 0,353 0,770
Theo kết quả phân tích trong bảng 2.4, thang đo này được chấp nhận với hệ số Cronbach's Alpha đạt từ 0.6 trở lên [2.50]; các mục hỏi được chấp nhận với hệ số tương quan giữa các mục hỏi đều đạt từ 0.3 trở lên [2.51].
2.2.5. Chiến lƣợc phân tích
Đề tài áp dụng cách xây dựng mơ hình hóa để phân tích nghiên cứu. Tác giả tổng hợp các tài liệu nghiên cứu có liên quan, xây dựng mơ hình phù hợp và áp dụng vào phân tích cơ sở dữ liệu để tìm ra kết quả nghiên cứu.
2.3. Tổng quan về cơ sở dữ liệu PISA 2012
PISA xây dựng quy định chung về thu thập dữ liệu tiêu chuẩn dành cho tất cả các nước tham gia. Các bộ công cụ khảo sát bao gồm các câu hỏi khảo sát giống nhau và các quy trình thu thập dữ liệu được áp dụng thống nhất đối với tất cả các nước tham gia nhằm đảm bảo chất lượng dữ liệu thu được [2.52].
Trong quá trình thu thập và quản lý dữ liệu PISA, một số nhiệm vụ thuộc về trách nhiệm riêng của Trung tâm Quốc gia (National Centre) hoặc
nhà thầu quốc tế (international contractor). Mặc khác, có một số nhiệm vụ sẽ được cả hai bên cùng phối hợp thực hiện.
45 Trách nhiệm của nhà thầu quốc tế Trách nhiệm của Trung tâm Quốc gia
Trách nhiệm của nhà thầu quốc tế phối hợp với Trung tâm Quốc gia
Biểu đồ 2.2. Quản lý dữ liệu và các nhiệm vụ khác của PISA [2.53]
Trước tiên, nhà thầu quốc tế cung cấp phần mềm quản lý dữ liệu
KeyQuest cho tất cả các Trung tâm Quốc gia. KeyQuest đã được cấu hình
trước để đáp ứng các yêu cầu kỹ thuật của PISA 2012; tuy nhiên vẫn được phép điều chỉnh công cụ như bổ sung thêm các câu hỏi quốc gia, xóa bỏ hoặc điều chỉnh một số câu hỏi.
Điều kiện tiên quyết cho việc đề xuất điều chỉnh quốc gia của KeyQuest là được sự thông qua của nhà thầu quốc tế.
Sau khi nhận được KeyQuest, Trung tâm Quốc gia tiến hành chọn mẫu HS và tiến hành điều chỉnh KeyQuest để chuẩn bị cho kỳ đánh giá. Sau khi
kết thúc việc tổ chức kỳ đánh giá và hồn thành việc mã hóa các câu trả lời của HS, Trung tâm Quốc gia nhập dữ liệu vào KeyQuest, xây dựng báo cáo về độ giá trị để xác minh việc nhập dữ liệu và gửi dữ liệu cho nhà thầu quốc tế.
Trong quá trình làm sạch dữ liệu, nhà thầu quốc tế gửi báo cáo làm sạch và có thể yêu cầu Trung tâm Quốc gia giải trình những vấn đề vướng
Chọn mẫu trường Các tài liệu nguồn
Quản lý dữ liệu
46
mắc (nếu có) trong cơ sở dữ liệu. Các bộ dữ liệu quốc gia sẽ được liên tục cập nhật dựa trên thông tin được Trung tâm Quốc gia cung cấp.
“Cơ sở dữ liệu hồn chỉnh chính thức sẽ được trình lên OECD, sau đó là xây dựng cơ sở dữ liệu quốc tế công khai” (OECD, 2013).
Cơ sở dữ liệu quốc tế PISA 2012 gồm có năm tập tin dữ liệu: ba tập tin dữ liệu là các câu trả lời của HS, một tập tin dữ liệu là câu trả lời của hiệu trưởng nhà trường và một là câu trả lời của phụ huynh. Tất cả đều được cung cấp dưới dạng tập tin fixed width text (hoặc ASCII) với các tập tin điều khiển tương ứng là SAS® và SPSS® (OECD, 2012).
2.4. Tổng thể trong PISA 2012
Tổng thể PISA quốc tế là những HS 15 tuổi đang học lớp từ 7 trở lên ở các cơ sở giáo dục, các chương trình đào tạo nghề hoặc các loại hình chương trình giáo dục khác. Độ tuổi của tổng thể sẽ phụ thuộc trực tiếp vào các ngày tổ chức khảo sát.
Theo yêu cầu quốc tế, việc đánh giá phải được tiến hành trong vòng 42 ngày - gọi là giai đoạn khảo sát, tính từ ngày 01 tháng 3 năm 2012 đến ngày 31 tháng 8 năm 2012, trừ trường hợp có thoả thuận khác.
Do phần lớn các kỳ khảo sát đều diễn ra vào tháng 4, nên tổng thể quốc tế được xác định là tất cả HS trong độ tuổi từ 15 năm 3 tháng đến 16 năm và 2 tháng. Như vậy, đối với tất cả các nước tổ chức đánh giá vào tháng 4 năm 2012, tổng thể được xác định là tất cả những HS sinh năm 1996 và đang theo học tại các cơ sở giáo dục theo quy định trên (OECD, 2013).
Theo quy định của PISA 2012, một số trường hợp HS bị loại trừ khỏi khung mẫu gồm có: HS bị khuyết tật trí tuệ, HS bị khuyết tật chức năng và HS có năng lực ngơn ngữ hạn chế (được giảng dạy dưới một năm bằng ngôn ngữ đánh giá) [2.54].
47
2.5. Mẫu học sinh Việt Nam trong PISA 2012
Mẫu của đề tài nghiên cứu bao gồm 4,959 HS ở 162 trường, trong đó số lượng HS nam là 2,311 (chiếm 46.6%) và HS nữ là 2,648 (chiếm 53.4%). HS Việt Nam tham gia PISA 2012 chủ yếu là HS lớp 10 (chiếm (86.4%) và đang theo học chương trình THPT (chiếm 82%). Phần lớn HS (chiếm 90%) đã được đi học mẫu giáo và đa số đều vào tiểu học đúng độ tuổi (chiếm 76%). Ý thức kỷ luật của HS được đánh giá là tốt với 84% HS chưa bao giờ đi học muộn, 91% HS chưa bao giờ nghỉ học không phép trong hai tuần gần đây nhất, 94% HS chưa bao giờ trốn hoặc bỏ tiết.
Thông tin cụ thể về HS Việt Nam trong PISA 2012 được trình bày ở bảng 2.5. dưới đây.
Bảng 2.5. Một số đặc điểm của mẫu
Câu hỏi Các phương án lựa chọn Số lượng Tỷ lệ %
Giới tính Q4 Nữ 2,648 53,4 Nam 2,311 46,6 Lớp Q1 Lớp 7 18 0,4 Lớp tám 111 2,2 Lớp 9 356 7,2 Lớp 10 4,285 86,4 Dữ liệu thiếu 189 3,8 Chương trình học Q2 Trung học cơ sở 451 9,1 Trung học phổ thông 4,069 82,1 Phổ thông nhiều cấp học 250 5,0 Giáo dục thường xuyên 155 3,1
Trung cấp nghề 34 0,7
Năm sinh Q3 1996 4,959 100
Học mẫu giáo
Q5 Không 437 8,8
Có, một năm hoặc ít hơn 1,141 23,0 Có, trên một năm 3,364 67,8
48 Độ tuổi vào tiểu học Q6 5 tuổi 119 2,4 6 tuổi 3,737 75,4 7 tuổi 928 18,7 Chưa bao giờ lưu ban Q7 Tiểu học 4,676 94,3 Trung học cơ sở 4,622 93,2