Thu thập dữ liệu và xử lý dữ liệuViết báo cáo kết quả Thông báo kết quả tới các đối tượng có liên quan và đề xuất các giải pháp cải tiến Xây dựng công cụ đánh giá Xây dựng ma trận của cá
Trang 1PGS TS Nguyễn Lộc
PVT Viện KHGD Việt Nam – Giám Đốc điều phối quốc gia
ĐÁNH GIÁ TRÊN DIỆN RỘNG VÀ PISA
TS Lê Thị Mỹ Hà
Trang 2QUY TRÌNH ĐÁNH GIÁ TRÊN DIỆN RỘNG
2
Trang 3Thu thập dữ liệu và xử lý dữ liệu
Viết báo cáo kết quả
Thông báo kết quả tới các đối tượng có liên quan và đề xuất các giải pháp cải tiến
Xây dựng công cụ đánh giá
Xây dựng ma trận của các bộ công cụ
Viết các câu hỏi Thử nghiệm các bộ công cụ đánh giá Phân tích, đánh giá các câu hỏi
Sửa chữa, hoàn thiện các bộ công cụ
sử dụng cho khảo sát chính thức
Tổng kết đợt đánh giá và lựa chọn các câu hỏi tốt đưa vào ngân hàng câu hỏi.
Trang 4QUY TRÌNH ĐÁNH GIÁ PISA
4
Trang 6Tóm tắt cấu trúc báo cáo
1 Tổng quan về PISA OECD
2 Tóm tắt quá trình triển khai PISA tại Việt Nam
6
Trang 7PGS TS Nguyễn Lộc PVT Viện KHGD Việt Nam – NPM
GIỚI THIỆU CHUNG VỀ PISA
PISA là viết tắt của " P rogramme for I nternational S tudent A ssessment -
Chương trình đánh giá học sinh quốc tế" do Tổ chức hợp tác và phát
triển kinh tế (OECD) khởi xướng và chỉ đạo
Đến 2015, hơn 70 quốc gia tham gia PISA để theo dõi tiến bộ của mình
nhằm phấn đấu đạt được các mục tiêu giáo dục cơ bản
Trang 8PGS TS Nguyễn Lộc PVT Viện KHGD Việt Nam – NPM
ĐẶC ĐIỂM CỦA PISA
PISA nổi bật nhờ quy mô toàn cầu và tính chu kỳ
PISA là khảo sát giáo dục duy nhất đánh giá kiến thức và kỹ năng của
học sinh ở độ tuổi 15, độ tuổi kết thúc giáo dục bắt buộc ở hầu hết
các quốc gia
Trang 9
MỤC TIÊU CỦA CHƯƠNG TRÌNH PISA
Mục tiêu của Chương trình PISA là đánh giá năng lực của học sinh ở độ tuổi 15 kết thúc phần giáo dục bắt buộc đã được
chuẩn bị để đáp ứng những thách thức của cuộc sống sau này.
PISA thu thập và cung cấp cho các quốc gia các dữ liệu có thể
so sánh được ở tầm quốc tế cũng như sự tiến bộ về khả năng đọc hiểu, toán học và khoa học của học sinh độ tuổi 15
ở các quốc gia tham gia PISA.
Trang 10Khảo sát của PISA
PISA được thực hiện theo chu kì 3 năm/lần
Đối tượng đánh giá là học sinh trung học trong độ tuổi
15 Việc đánh giá được thực hiện ở 03 lĩnh vực kiến thức chính là đọc hiểu, toán học và khoa học; đồng thời học sinh và nhà trường sẽ trả lời 01 phiếu hỏi về điều kiện, hoàn cảnh
Mỗi kì đánh giá sẽ có một lĩnh vực kiến thức được lựa chọn để đánh giá sâu hơn
Trang 11Đọc hiểu
Toán họcKhoa học
Đọc hiểu
Toán học
Khoa học
Giải quyết vấn đề
Đọc hiểuToán học
Khoa học
Đọc hiểu
Toán họcKhoa học
Đọc hiểu
Toán học
Khoa học
Giải quyết vấn đề Bài thi trên máy
tính Bài thi đánh giá năng lực tài chính
Đọc hiểuToán học
Khoa học
Ghi chú: Phần được gạch chân là nội dung trọng tâm trong mỗi kỳ đánh giá
Trang 12
MẪU KHẢO SÁT PISA
Trong mỗi chu kỳ đánh giá, mỗi quốc gia có khoảng từ 4.500 đến 50.000 học sinh được chọn để tham gia đánh giá theo cách chọn mẫu ngẫu nhiên
Việc lấy mẫu được tiến hành theo phương pháp phân tầng 2 cấp (chọn trường ở cấp quốc gia và chọn học sinh ở cấp trường) dựa trên các bằng chứng chính xác về tuổi và nơi đang học Điều này đòi hỏi các quốc gia tham gia PISA phải
có một hệ thống dữ liệu chính xác và đầy đủ về học sinh và nhà trường của mình
Trang 13
Khảo sát của PISA
Tính đến năm 2006, tất cả học sinh đều sử dụng bút chì
và giấy khi làm bài trắc nghiệm Tuy nhiên, từ 2009 sẽ có thêm bài thi trắc nghiệm trên máy tính
Hiện nay, mỗi kỳ PISA được tiến hành theo 2 đợt,
Đợt 1: PISA chính thức dành cho các nước thành viên OECD
Đợt 2 (thông thường sau 1 năm): PISA bổ sung (PISA Plus hay PISA+) dành cho các nước không phải là
thành viên OECD
Trang 14• Ý nghĩa:
Bước tích cực của hội nhập quốc tế về giáo dục;
So sánh “mặt bằng” giáo dục quốc gia với giáo dục quốc tế;
OECD đưa ra kết quả phân tích và đánh giá về chính sách giáo dục quốc gia và đề xuất những thay đổi về chính sách giáo dục cho các quốc gia;
Góp phần đổi mới phương pháp đánh giá, đưa ra cách tiếp cận mới về dạy – học, thi và đánh giá.
Là bước chuẩn bị tích cực cho lộ trình đổi mới giáo dục sau 2015.
14
VIỆT NAM THAM GIA PISA
Trang 15VIỆT NAM THAM GIA PISA
Ngày 27/10/2008 Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân có văn bản giao Bộ Giáo dục và Đào tạo tiến hành khẩn trương nhất để đăng ký Việt Nam tham gia Chương trình quốc tế đánh giá học sinh (Programme for International Student Assessment - PISA)
Ngày 22/10/2009 Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân có thư gửi ông Angel Gurria, Tổng Thư ký OECD đề nghị chấp nhận Việt Nam tham gia PISA 2012.
Ngày 11/11/2009: OECD có thư chính thức gửi Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân về việc đồng ý đề Việt Nam tham gia PISA.
Thực hiện khảo sát thử nghiệm 2011 và chính thức năm 2012.
So với các nước tham gia PISA 2012:
+ Xếp thứ 69/70 về GDP bình quân đầu người + Xếp thứ 70/70 về chỉ số HDI
Trang 16Phương pháp luận cơ bản
Công cụ đánh giá học sinh (các đề thi)
Phi u ế hỏi học sinh
Phi u ế hỏi trường học (Hiệu trưởng)
Phi u ế hỏi phụ huynh
2012 Không có phiếu hỏi giáo viên
Học sinh được lựa chọn từ nhiều lớp học
Trọng tâm đánh giá không giới hạn ở các môn học đuợc dạy ở trường
(2015 mới có phiếu hỏi giáo viên)
16
Trang 17Các giai đoạn hoạt động chính của PISA 2015
Chuẩn bị đề thi và phiếu hỏi
Trang 18Xây dựng các câu hỏi thi cho PISA 2015
- Các quốc gia xây dựng câu hỏi đóng góp cho OECD, nộp trước tháng 12/2012
- OECD tập trung các câu hỏi, sàng lọc và tập hợp thành các tập câu hỏi chuyển cho các quốc gia.
- Đánh giá câu hỏi vào năm 2013
- Dịch các câu hỏi thi (2013)
- Xây dựng thành các bộ đề thi theo yêu cầu kỹ thuật của OECD (2014)
18
Trang 19Dịch các bộ công cụ khảo sát PISA
dân số trong mẫu đều được sử dụng
(ngoại trừ các chỉ dẫn/ hướng dẫn
mã số và các sổ tay hướng dẫn)
19
Trang 20Mẫu khảo sát
Khảo sát thử nghiệm: Cỡ mẫu được xác định sao cho có thể lấy được 200 học sinh trả lời mỗi câu hỏi Mỗi quốc gia chọn 40 trường x 35 HS/trường = 1.400 HS.
Khảo sát chính thức: 150 trường x 35
HS = 5.250 HS.
20
Trang 21Chuẩn bị tài liệu kiểm tra
Thu thập thông tin của học sinh (tên,
mã số học sinh, số cuốn đề thi/ bảng hỏi) để in & dán nhãn thay vì viết tay lên cuốn đề thi In nhãn tên như vậy sẽ hạn chế sai sót trong quá trình phát
cuốn đề thi cho học sinh Đồng thời cũng tăng độ chính xác và hiệu quả của việc nhập dữ liệu và làm sạch dữ liệu
21
Trang 22Các Buổi thi dự phòng
Khuyến nghị nên lên kế hoạch tổ chức buổi thi dự phòng ở những trường chưa tới 80% học sinh được chọn tham gia làm bài thi.
22
Trang 23Cán bộ giám sát chất lượng
Năm 2015, đội ngũ cán bộ giám sát chất lượng chương trình PISA được chỉ định và trả lương bởi Nhà thầu quốc tế để đến 1 số
trường (thông thường là 15 trường)
Cán bộ coi thi không được thông báo về việc
có Cán bộ giám sát đến trường Nhưng điều phối của trường có thể được thông báo trước
để Giám sát viên có thể tiếp cận với truờng học
23
Trang 24Quy trình và yêu cầu tạo lập
đề thi và phiếu hỏi
Trang 25 Mỗi Cluster được cấu thành từ các Units
Mỗi Unit được đánh mã PM _ _ _ hoặc
PR _ _ _ hoặc PS _ _ _ (vị trí _ có thể là một con số từ 0-9 hoặc chữ cái hoa)
25
Các thông số liên quan
Trang 26Một số Unit
04 Cluste
Trang 27Form A
• Section _
• Section _
• …
Form B
• Section _
• ST#
• ST#
• Section _
Trang 28Booklet – trang bìa - Mã học sinh, tên
học sinh và tên trường đã được
VP PISA xây dựng sẵn và in trực tiếp lên trang bìa bằng phần mềm
- -Việc này tránh sai sót và tiết kiệm thời gian cho cả học sinh và Cán bộ quản lý khảo sát.
- OECD đã khuyến nghị các nước nên tiến hành dán
nhãn lên trang bìa tuy nhiên họ nhất trí với cách làm của Việt Nam là in trực tiếp sau quá trình đàm phán
Trang 29Bảng công thức và phần hướng dẫn chung
Trang 30Trang khảo sát năng lực
Trang này xuất hiện ở cuối mỗi đề thi
Trang 32Phiếu hỏi nhà trường
Phiếu hỏi này dành
cho Hiệu trưởng trả
lời
Trang 33GiỚI THIỆU CƠ CẤU TỔ
CHỨC CỦA PISA
Trang 341 Cơ cấu tổ chức của PISA
- Ban quản lý PISA quốc gia
- Các nhóm chuyên gia của quốc tế
Trang 351.1 Cục Giáo dục OECD
Cục giáo dục OECD có trách nhiệm quản lý hoạt động thường nhật của PISA:
-Theo dõi việc triển khai khảo sát,
-Quản lý hành chính các vấn đề của Hội đồng quản trị PISA,
-Tạo đồng thuận giữa các nước và là trung gian giữa Hội đồng quản trị PISA và liên danh nhà thầu triển khai PISA.
Trang 361.2 Hội đồng quản trị PISA
-Mỗi quốc gia thành viên OECD tham gia PISA có
01 đại diện trong Hội đồng quản trị PISA.
-Mỗi quốc gia đối tác được cử 01 đại diện làm quan sát viên tại Hội đồng.
-Hội đồng quản trị PISA bầu ra Chủ tịch Hội đồng.
-Hội đồng quản trị PISA sẽ xác định các ưu tiên
chính sách đối với PISA và đảm bảo là các ưu tiên này được triển khai trong cuộc khảo sát
Như vậy các nước đối tác không thể có ảnh hưởng đối với các nội dung học thuật cũng như các vấn đề
tổ chức thực hiện của PISA.
Trang 38 ETS: Tổ chức tập huấn và các dịch vụ giáo dục – Mỹ
ACER: Hội đồng nghiên cứu giáo dục Úc;
CAPSTAN: Cơ quan kiểm soát chất lượng ngôn ngữ Bỉ;
DIPF: Viện nghiên cứu sư phạm quốc tế Đức;
NIER: Viện nghiên cứu chính sách giáo dục quốc gia Nhật;
ASPE: Trung tâm phân tích hệ thống và thực tiễn giáo dục
Đại học Liège - Bỉ;
WESTAT: Công ty tư vấn nghiên cứu Mỹ.
Trang 39Mô hình cơ cấu tổ chức của PISA OECD:
Trang 402 Cơ cấu tổ chức của PISA
Trang 412 Cơ cấu tổ chức của PISA ở Việt Nam
2.1 Ban chỉ đạo đánh giá trong nước và quốc tế học sinh phổ thông
Trưởng ban: TS Nguyễn Vinh Hiển, Thứ trưởng Bộ
Giáo dục và Đào tạo.
2.2 Ban Dịch thuật các tài liệu PISA kỳ khảo sát
2.3 Ban Đề thi PISA
Trang 42Cơ cấu tổ chức PISA tại Việt Nam:
Ban Dịch thuật các
tài liệu PISA
Ban Đề thi PISA Ban tổ chức
khảo sát
Ban chấm thi, chọn mẫu và xử lý số liệu, viết báo cáo
Văn phòng PISA Việt Nam
Ban chỉ đạo đánh giá trong nước và quốc tế
Ban chỉ đạo cấp tỉnh
Điều phối viên cấp trường
Trang 43Kế hoạch triển khai PISA tại Việt Nam- Những mốc quan trọng
Khảo sát thử nghiệm 4/2014
Chuẩn bị dữ liệu mẫu thi PISA chính thức 2015 và chọn mẫu học sinh thi chính thức.
Khảo sát chính thức 4/2015
43
Trang 44 pisavietnam@gmail.com
44