Thiết lập và sử dụng hệ thống ngân hàng câu hỏi cấp quốc gia tại Việt Nam (NIBS)

Thiết lập và sử dụng hệ thống ngân Thiết lập và sử dụng hệ thống ngân hàng câu hỏi cấp quốc gia tại Việt hàng câu hỏi cấp quốc gia tại Việt Nam (NIBS): Một vài nhận xét Nam (NIBS): Một vài nhận xét Tiến sĩ Harry Hsu Tiến sĩ Harry Hsu Chuyên gia đánh giá giáo dục Chuyên gia đánh giá giáo dục 2 Những nét chính Những nét chính I. Một viễn cảnh lý tưởng I. Một viễn cảnh lý tưởng II. M II. M ột hệ thống như vậy có thể được các giáo viên sử ột hệ thống như vậy có thể được các giáo viên sử dụng như thế nào? dụng như thế nào? III. M III. M ột hệ thống như vậy có thể được các Sở giáo dục và ột hệ thống như vậy có thể được các Sở giáo dục và đào tạo sử dụng như thế nào? đào tạo sử dụng như thế nào? IV. M IV. M ột hệ thống như vậy có thể được Bộ giáo dục và đào ột hệ thống như vậy có thể được Bộ giáo dục và đào tạo sử dụng như thế nào? tạo sử dụng như thế nào? V. T V. T ại sao hệ thống ngân hàng câu hỏi cấp quốc gia xuất ại sao hệ thống ngân hàng câu hỏi cấp quốc gia xuất hiện trong rất nhiều các ứng dụng khác nhau? hiện trong rất nhiều các ứng dụng khác nhau? VI. Cơ sở của Hệ thống ngân hàng câu hỏi cấp VI. Cơ sở của Hệ thống ngân hàng câu hỏi cấp quốc gia quốc gia (NIBS) (NIBS) VII. Các thành phần chính của hệ thống ngân hàng câu hỏi VII. Các thành phần chính của hệ thống ngân hàng câu hỏi cấp quốc gia cấp quốc gia VIII. C VIII. C ách thức xác định tính hữu ích của ngân hàng câu ách thức xác định tính hữu ích của ngân hàng câu hỏi hỏi . . 3 I. Một viễn cảnh lý tưởng I. Một viễn cảnh lý tưởng • KHI NÀO: KHI NÀO: Tháng 12 năm 2010 Tháng 12 năm 2010 • Ở ĐÂU Ở ĐÂU : : Vi Vi ệt Nam ệt Nam • C C ÁI GÌ ÁI GÌ : : C C ác ngân hàng câu hỏi g ác ngân hàng câu hỏi g ồm những ồm những câu h câu h ỏi đã được định cỡ (quy về mặt bằng ỏi đã được định cỡ (quy về mặt bằng chung) cho 4 môn học: Văn, Toán, Tiếng Anh và chung) cho 4 môn học: Văn, Toán, Tiếng Anh và Vật lý được xây dựng chính thức cho các trường Vật lý được xây dựng chính thức cho các trường trên toàn quốc với một website được bảo vệ. Mỗi trên toàn quốc với một website được bảo vệ. Mỗi ngân hàng chứa đựng các câu hỏi bao trùm nội ngân hàng chứa đựng các câu hỏi bao trùm nội dung các phạm vi môn học từ lớp 6 đến lớp 9. dung các phạm vi môn học từ lớp 6 đến lớp 9. 4 II. II. M M ột hệ thống như vậy có thể được ột hệ thống như vậy có thể được các giáo viên sử dụng như thế nào? các giáo viên sử dụng như thế nào? • Giáo viên có thể truy cập vào website Ngân hàng câu hỏi Giáo viên có thể truy cập vào website Ngân hàng câu hỏi cấp Quốc gia cấp Quốc gia • Tìm kiếm câu hỏi dựa trên nhu cầu bằng cách chỉ rõ các Tìm kiếm câu hỏi dựa trên nhu cầu bằng cách chỉ rõ các tiêu chí lựa chọn (có thể sử dụng mẫu đã được xây dựng tiêu chí lựa chọn (có thể sử dụng mẫu đã được xây dựng sẵn): sẵn): – Cho Kiểm tra đầu vào Cho Kiểm tra đầu vào – Cho mục đích chẩn đoán Cho mục đích chẩn đoán – Cho mục đích đánh giá quá trình Cho mục đích đánh giá quá trình – Cho các bài kiểm tra cuối năm Cho các bài kiểm tra cuối năm – Cho các bài tập làm thêm Cho các bài tập làm thêm – Cho các kỳ thi bổ sung Cho các kỳ thi bổ sung Sử dụng các ghi chép được lưu trữ trong website Sử dụng các ghi chép được lưu trữ trong website 5 III. M III. M ột hệ thống như thế này có thể được ột hệ thống như thế này có thể được các Sở giáo dục và đào tạo sử dụng như thế các Sở giáo dục và đào tạo sử dụng như thế nào? nào? • Chứng nhận khả năng tốt nghiệp trong phạm vi của tỉnh. Chứng nhận khả năng tốt nghiệp trong phạm vi của tỉnh. • Những bài kiểm tra tổng kết sẽ được sử dụng để đảm Những bài kiểm tra tổng kết sẽ được sử dụng để đảm bảo sự nhất quán về các chuẩn giữa các trường trong bảo sự nhất quán về các chuẩn giữa các trường trong việc chứng nhận tốt nghiệp cho học sinh. việc chứng nhận tốt nghiệp cho học sinh. • Tập hợp một nhóm bao gồm các giáo viên có kinh Tập hợp một nhóm bao gồm các giáo viên có kinh nghiệm từ các trường và một số chuyên gia về đo lường nghiệm từ các trường và một số chuyên gia về đo lường để thiết kế một khung đề kiểm tra cho mỗi môn học. để thiết kế một khung đề kiểm tra cho mỗi môn học. • X X ây dựng một kế hoạch kiểm tra chi tiết để tạo ra một vài ây dựng một kế hoạch kiểm tra chi tiết để tạo ra một vài mẫu tương tự từ Ngân hàng câu hỏi cấp quốc gia. mẫu tương tự từ Ngân hàng câu hỏi cấp quốc gia. 6 IV. Một IV. Một hệ thống như vậy có thể được Bộ hệ thống như vậy có thể được Bộ giáo dục và đào tạo sử dụng như thế nào? giáo dục và đào tạo sử dụng như thế nào? • Xây dựng các bài kiểm tra cho chương trình giám sát kết Xây dựng các bài kiểm tra cho chương trình giám sát kết quả cấp quốc gia (NAM) qua các năm với học sinh lớp 8. quả cấp quốc gia (NAM) qua các năm với học sinh lớp 8. • Môn văn và môn Toán sẽ được đánh giá vào những năm Môn văn và môn Toán sẽ được đánh giá vào những năm chẵn, môn Vật lý và Tiếng Anh sẽ được đánh giá vào năm chẵn, môn Vật lý và Tiếng Anh sẽ được đánh giá vào năm lẻ lẻ • Các chuyên gia về môn học sẽ thiết kế khung và tiêu chí Các chuyên gia về môn học sẽ thiết kế khung và tiêu chí kỹ thuật cho các đề kiểm tra với các mức độ khác nhau. kỹ thuật cho các đề kiểm tra với các mức độ khác nhau. Tiêu chí kỹ thuật đề kiểm tra sẽ được sử dụng để xây Tiêu chí kỹ thuật đề kiểm tra sẽ được sử dụng để xây dựng các đề kiểm tra cụ thể phục vụ công tác đánh giá. dựng các đề kiểm tra cụ thể phục vụ công tác đánh giá. • Do các câu hỏi đã được quy về mặt bằng chung, những Do các câu hỏi đã được quy về mặt bằng chung, những bài kiểm tra khác nhau của các năm khác nhau vẫn có bài kiểm tra khác nhau của các năm khác nhau vẫn có thể so sánh được, nhờ vậy giúp theo dõi xu hướng kết thể so sánh được, nhờ vậy giúp theo dõi xu hướng kết quả học tập của học sinh qua các năm. quả học tập của học sinh qua các năm. 7 V. T V. T ại sao ngân hàng câu hỏi cấp quốc gia lại có ại sao ngân hàng câu hỏi cấp quốc gia lại có thể được sử dụng với nhiều mục đích khác nhau? thể được sử dụng với nhiều mục đích khác nhau? • Khung nội dung đã được các chuyên gia môn học xây Khung nội dung đã được các chuyên gia môn học xây dựng dựng • Chất lượng của từng câu hỏi cũng đã được các chuyên Chất lượng của từng câu hỏi cũng đã được các chuyên gia thẩm định gia thẩm định • Các thông tin thống kê về câu hỏi đã được đưa về một Các thông tin thống kê về câu hỏi đã được đưa về một thang chung sử dụng kỹ thuật định cỡ theo lý thuyết IRT thang chung sử dụng kỹ thuật định cỡ theo lý thuyết IRT • Các mẫu tiêu chí kỹ thuật đề kiểm tra đã được các Các mẫu tiêu chí kỹ thuật đề kiểm tra đã được các chuyên gia chuẩn bị trước chuyên gia chuẩn bị trước • Quy trình truy xuất câu hỏi linh hoạt cho phép xây dựng Quy trình truy xuất câu hỏi linh hoạt cho phép xây dựng các đề kiểm tra dựa trên các tiêu chí. các đề kiểm tra dựa trên các tiêu chí. 8 VI. Cơ sở cho việc xây dnựg ngân hàng câu VI. Cơ sở cho việc xây dnựg ngân hàng câu hỏi cấp quốc gia (NIBS) hỏi cấp quốc gia (NIBS) • Chuẩn chương trình quốc gia Chuẩn chương trình quốc gia • Chỉ khi Bộ GD-ĐT đứng ra huy động mới có thể tập hợp Chỉ khi Bộ GD-ĐT đứng ra huy động mới có thể tập hợp được các nguồn lực cần thiết để xây dựng ngân hàng câu được các nguồn lực cần thiết để xây dựng ngân hàng câu hỏi có chất lượng cao. hỏi có chất lượng cao. • Các đia phương có thể sử dụng ngân hàng câu hỏi để ra Các đia phương có thể sử dụng ngân hàng câu hỏi để ra các đề kiểm tra theo yêu cầu của địa phương các đề kiểm tra theo yêu cầu của địa phương • Đảm bảo tính thống nhất trong hoạt động kiểm tra đánh Đảm bảo tính thống nhất trong hoạt động kiểm tra đánh giá ở cacs địa phương khác nhau giá ở cacs địa phương khác nhau • Các điạ phương có thể xây dựng câu hỏi và bổ sung vào Các điạ phương có thể xây dựng câu hỏi và bổ sung vào ngaâ hàng câu hỏi quốc gia ngaâ hàng câu hỏi quốc gia • Tiết kiệm các nguồn lực con người và tài chính (một ngân Tiết kiệm các nguồn lực con người và tài chính (một ngân hàng câu hỏi có chất lượng cao sẽ tốt hơn rất nhiều so hàng câu hỏi có chất lượng cao sẽ tốt hơn rất nhiều so với nhiều hệ thống ngân hàng câu hỏi thiếu chất lượng) với nhiều hệ thống ngân hàng câu hỏi thiếu chất lượng) 9 VII. Các thành phần chính của VII. Các thành phần chính của Ngân hàng câu hỏi cấp quốc gia Ngân hàng câu hỏi cấp quốc gia • Ngân hàng câu hỏi cấp quốc gia sẽ bao gồm các Ngân hàng câu hỏi cấp quốc gia sẽ bao gồm các câu hỏi đã được quy về mặt bằng chung theo lý câu hỏi đã được quy về mặt bằng chung theo lý thuyết IRT do Bộ GD-ĐT, Dự án THCS II chủ trì thuyết IRT do Bộ GD-ĐT, Dự án THCS II chủ trì ký hợp đồng với một đơn vị thực hiện. ký hợp đồng với một đơn vị thực hiện. • Bộ GD-ĐT cần thiết lập một cơ quan để duy trì, Bộ GD-ĐT cần thiết lập một cơ quan để duy trì, quản lý và cập nhật ngân hàng câu hỏi. quản lý và cập nhật ngân hàng câu hỏi. • Tổ chức việc tập huấn về sử dụng ngân hàng Tổ chức việc tập huấn về sử dụng ngân hàng câu hỏi do các chuyên gia cốt cán về đánh giá câu hỏi do các chuyên gia cốt cán về đánh giá cấp tỉnh thực hiện cấp tỉnh thực hiện 10 Ngân hàng câu hỏi cấp quốc gia bao gồm các câu hỏi đã Ngân hàng câu hỏi cấp quốc gia bao gồm các câu hỏi đã được quy về mặt bằng chung theo lý thuyết IRT được quy về mặt bằng chung theo lý thuyết IRT • Đơn vị thực hiện sẽ nhận được sự hỗ trợ cần thiết để Đơn vị thực hiện sẽ nhận được sự hỗ trợ cần thiết để tuân thủ đúng các nguyên tắc về xây dựng ngân hàng tuân thủ đúng các nguyên tắc về xây dựng ngân hàng câu hỏi (những nguyên tắc này được trình bày ở các câu hỏi (những nguyên tắc này được trình bày ở các trang tiếp theo) trang tiếp theo) • Ngân hàng câu hỏi sẽ được người có uỷ quyền truy cập Ngân hàng câu hỏi sẽ được người có uỷ quyền truy cập từ mạng Internet. từ mạng Internet. • Hướng dẫn sử dụng được cung cấp trên bản in và trên Hướng dẫn sử dụng được cung cấp trên bản in và trên mạng. mạng. • Tập huấn cho cán bộ đánh giá cấp tỉnh về sử dụng ngân Tập huấn cho cán bộ đánh giá cấp tỉnh về sử dụng ngân hàng câu hỏi để ra đề kiểm tra hàng câu hỏi để ra đề kiểm tra [...]... câu hỏi trong ngân hàng để phù hợp từng địa phương, các địa phương có thể bổ sung câu hỏi vào ngân hàng câu hỏi quốc gia hoặc xây dựng một ngân hàng câu hỏi phụ 12 VIII Cách xác định tính hiệu quả của ngân hàng câu hỏi? • Tại sao cần xác định chất lượng của ngân hàng câu hỏi? • Rà soát các bước xây dựng ngân hàng câu hỏi • Rà soát các hoạt động trong từng bước • Xem xét kết quả trong từng bước 13 Tại. .. trì, quản lý và cập nhật ngân hàng câu hỏi quốc gia • Cần duy trì thường xuyên và cập nhật câu hỏi là một yêu cầu đối với ngân hàng câu hỏi • Ngân hàng câu hỏi có thể hỗ trợ tích cực cho việc giảng dạy trên lớp, do vậy đây là một sự đầu tư xứng đáng • Cơ quan này cần có đội ngũ nhân viên có chuyên môn, có thể liên kết với các viện giáo dục để quản lý 11 Tập huấn lại về sử dụng ngân hàng câu hỏi do các... của ngân hàng câu hỏi? • Sử dụng ngân hàng câu hỏi chưa được thẩm định hết sức • • • nguy hiểm Câu hỏi chỉ được thẩm định chất lượng là chưa đủ Cần có các thông tin thống kê về quá trình thử nghiệm câu hỏi Nếu một ngân hàng câu hỏi kém chất lượng được sử dụng, những tác động xấu đối với kết quả học tập của học sinh khó có thể đánh giá được Các kết quả trong mỗi bước của quá trình xây dựng ngân hàng câu. .. bị cẩm nang hướng dẫn người sử dụng Tập huấn cho người sử dụng 25 Các nội dung cần được đánh giá trong bước 6 • Tài liệu về các hoạt động đã thực hiện • Sử dụng mẫu “Mô tả phần mềm ngân hàng câu • • • hỏi để xác định mức độ phù hợp của phần mềm ngân hàng câu hỏi Ngân hàng câu hỏi có dễ sử dụng hay không? Hướng dẫn sử dụng có cụ thể, dễ hiểu hay không? Tập huấn cho người sử dụng đã đầy đủ chưa? 26 7... đã được thực hiện • Các câu hỏi đã được đưa về mặt bằng chung hay chưa? • Có đủ các thông tin thống kê để xây dựng đề kiểm tra hay không? 24 6 Xây dựng hay mua phần mềm ngân hàng câu hỏi • Thiết kế phần mềm ngân hàng câu hỏi trên máy • • • • • tính Cách thức bảo đảm độ bảo mật của ngân hàng câu hỏi? Cách lưu trữ và truy xuất câu hỏi? Cách xây dựng đề kiểm tra từ ngân hàng? (Câu hỏi có thể được lựa chọn... người sử dụng đã đầy đủ chưa? 26 7 Xây dựng kế hoạch duy trì và cập nhật ngân hàng câu hỏi • Xác định những thông tin nào về quá trình sử dụng câu hỏi cần được lưu trữ và cách sử dụng các thông tin đó • Nguồn của các câu hỏi mới và làm thế nào để liên kết các câu hỏi mới với các câu hỏi cũ trong ngân hàng? • Xác định các tiêu chí để xoá những câu hỏi đã lỗi thời 27 Các nội dung cần được đánh giá trong bước... hoạch viết câu hỏi • Trình độ chuyên môn của cán bộ viết câu hỏi • Quy trình xác định tính hợp lệ của câu hỏi • Chất lượng của câu hỏi • Mã hoá câu hỏi 18 3 Các câu hỏi đã được rà soát và đánh giá đối với từng nội dung sau: • Xác định liệu có các lỗi kỹ thuật khi viết câu hỏi • Xác định liệu câu hỏi có thống nhất với các chuẩn chương • • • • trình hay không Xác định nội dung câu hỏi có chính xác và phù... cốt cán về đánh giá cấp tỉnh thực hiện • Các chuyên gia cốt cán về đánh giá cấp tỉnh sẽ tập huấn • • • • lại cho địa diện của Phòng Giáo dục và cảc trường Đại diện của Phòng Giáo dục và các nhà trường sẽ tập huấn lại cho giáo viên Sở GD-ĐT cũng cần quyết định ai sẽ có thể được truy cập vào ngân hàng câu hỏi của môn học gì Mỗi địa phương có thể tự quyết định sẽ ứng dụng ngân hàng câu hỏi trong những lĩnh... có đủ lớn hay không? (ít nhất 500 học sinh cần trả lời cho mỗi câu hỏi ) 22 5 Tiến hành phân tích và đưa câu hỏi về mặt bằng chung • Quy trình phân tích hay mô hình IRT nào được sử dụng? • Cách thức cân bằng giữa các đề kiểm tra và các câu hỏi liên kết? • Có cần phải điều chỉnh lại câu hỏi hay không? • Xác định các thông tin thống kê của câu hoỉ cần được lưu trữ 23 Các nội dung cần được đánh giá trong... các câu trả lời cho câu hỏi có chính xác hay không và các phương án sai trong câu hỏi trắc nghiệm có thực sự sai hay không Xác định các câu hỏi có đề cập đến các vấn đề về giới và dân tộc thiểu số hay không Chỉnh sửa lại câu hỏi dựa trên kết quả đánh giá rà soát 19 Các nội dung cần được đánh giá trong bước 3 • Các tài liệu của các hoạt động đã thực hiện • Trình độ chuyên môn của các bộ rà soát câu hỏi . Thiết lập và sử dụng hệ thống ngân Thiết lập và sử dụng hệ thống ngân hàng câu hỏi cấp quốc gia tại Việt hàng câu hỏi cấp quốc gia tại Việt Nam (NIBS): . chính của Ngân hàng câu hỏi cấp quốc gia Ngân hàng câu hỏi cấp quốc gia • Ngân hàng câu hỏi cấp quốc gia sẽ bao gồm các Ngân hàng câu hỏi cấp quốc gia sẽ