TẬP HUẤN TỰ ĐÁNH GIÁ PHỤC VỤ CÔNG TÁC KIỂM ĐỊNH CHẤT LƯỢNG GIÁO DỤC HỌC VIỆN

120 554 0
TẬP HUẤN TỰ ĐÁNH GIÁ PHỤC VỤ CÔNG TÁC KIỂM ĐỊNH CHẤT LƯỢNG GIÁO DỤC HỌC VIỆN

Đang tải... (xem toàn văn)

Tài liệu hạn chế xem trước, để xem đầy đủ mời bạn chọn Tải xuống

Thông tin tài liệu

BỘ NÔNG NGHIỆP VÀ PHÁT TRIỂN NÔNG THÔN HỌC VIỆN NÔNG NGHIỆP VIỆT NAM TÀI LIỆU TẬP HUẤN TỰ ĐÁNH GIÁ PHỤC VỤ CÔNG TÁC KIỂM ĐỊNH CHẤT LƯỢNG GIÁO DỤC HỌC VIỆN (Lưu hành nội bộ) Hà Nội, tháng năm 2015 MỤC LỤC PHẦN I DANH MỤC HỆ THỐNG VĂN BẢN PHÁP QUY VÀVĂN BẢN HƯỚNG DẪN LIÊN QUAN ĐẾN TỰ ĐÁNH GIÁ CƠ SỞ GIÁO DỤC PHẦN II GIẢI THÍCH TỪ NGỮ VÀ KHÁI NIỆM PHẦN III HƯỚNG DẪNSỬ DỤNG TIÊU CHÍ ĐÁNH GIÁ CHẤT LƯỢNG TRƯỜNG ĐẠI HỌC Tiêu chuẩn 1: Sứ mạng mục tiêu trường đại học (2 tiêu chí) Tiêu chí 1.1 Tiêu chí 1.2 Tiêu chuẩn 2: Tổ chức quản lý (7 tiêu chí) Tiêu chí 2.1 Tiêu chí 2.2 Tiêu chí 2.3 Tiêu chí 2.4 Tiêu chí 2.5 Tiêu chí 2.6 10 Tiêu chí 2.7 11 Tiêu chuẩn 3: Chương trình đào tạo (6 tiêu chí) 12 Tiêu chí 3.1 12 Tiêu chí 3.2 13 Tiêu chí 3.3 15 Tiêu chí 3.4 16 Tiêu chí 3.5 17 Tiêu chí 3.6 19 Tiêu chuẩn 4: Hoạt động đào tạo (7 tiêu chí) 19 Tiêu chí 4.1 19 Tiêu chí 4.2 20 Tiêu chí 4.3 21 Tiêu chí 4.4 23 Tiêu chí 4.5 24 Tiêu chí 4.6 25 Tiêu chí 4.7 26 Tiêu chuẩn 5: Đội ngũ cán quản lý, giảng viên nhân viên (8 tiêu chí) 27 Tiêu chí 5.1 27 Tiêu chí 5.2 28 Tiêu chí 5.3 29 i Tiêu chí 5.4 30 Tiêu chí 5.5 31 Tiêu chí 5.6 32 Tiêu chí 5.7 33 Tiêu chí 5.8 34 Tiêu chuẩn 6: Người học (9 tiêu chí) 35 Tiêu chí 6.1 35 Tiêu chí 6.2 36 Tiêu chí 6.3 38 Tiêu chí 6.4 39 Tiêu chí 6.5 40 Tiêu chí 6.6 41 Tiêu chí 6.7 43 Tiêu chí 6.8 44 Tiêu chí 6.9 45 Tiêu chuẩn 7: Nghiên cứu khoa học, ứng dụng, phát triển chuyển giao công nghệ (7 tiêu chí) 46 Tiêu chí 7.1 46 Tiêu chí 7.2 48 Tiêu chí 7.3 49 Tiêu chí 7.4 49 Tiêu chí 7.5 51 Tiêu chí 7.6 52 Tiêu chí 7.7 53 Tiêu chuẩn 8: Hoạt động hợp tác quốc tế (3 tiêu chí) 54 Tiêu chí 8.1 54 Tiêu chí 8.2 55 Tiêu chí 8.3 57 Tiêu chuẩn 9: Thư viện, trang thiết bị học tập sở vật chất khác (9 tiêu chí) 58 Tiêu chí 9.1 58 Tiêu chí 9.2 59 Tiêu chí 9.3 60 Tiêu chí 9.4 61 Tiêu chí 9.5 63 Tiêu chí 9.6 64 Tiêu chí 9.7 65 Tiêu chí 9.8 66 ii Tiêu chí 9.9 67 Tiêu chuẩn 10: Tài quản lý tài (3 tiêu chí) 68 Tiêu chí 10.1 68 Tiêu chí 10.2 69 Tiêu chí 10.3 70 PHẦN IV KỸ THUẬT THU THẬP THÔNG TIN, MINH CHỨNG 72 4.1 Kỹ thuật nghiên cứu văn bản, hồ sơ tự đánh giá 72 4.1.1 Định nghĩa 72 4.1.2 Ưu điểm hạn chế/điểm cần lưu ý 72 4.1.3 Các kỹ thuật xem xét văn bản/hồ sơ 72 4.2 Kỹ thuật quan sát tự đánh giá 73 4.2.1 Định nghĩa 73 4.2.2 Các loại quan sát 73 4.2.3 Ưu điểm hạn chế 73 4.2.4 Kỹ thuật quan sát 73 4.3 Kỹ thuật vấn tự đánh giá 74 4.3.1 Định nghĩa 74 4.3.2 Ưu điểm hạn chế 75 4.3.3 Quy trình vấn 75 4.3.4 Các bước tiến hành vấn 75 4.4 Kỹ thuật thảo luận nhóm tự đánh giá 76 4.4.1 Định nghĩa 76 4.4.2 Ưu điểm hạn chế 76 4.4.3 Quy trình thảo luận nhóm 76 4.4.4 Các bước tiến hành thảo luận nhóm 77 4.5 Kỹ thuật thiết kế công cụ điều tra 77 4.5.1 Định nghĩa 77 4.5.2 Ưu điểm hạn chế 77 4.5.3 Các nguyên tắc thiết kế công cụ đo 77 4.5.4 Quy trình thiết kế công cụ điều tra khảo sát 78 4.6 Kỹ thuật xử lý phân tích số liệu 78 4.6.1 Định nghĩa 78 4.6.2 Ưu điểm hạn chế 78 4.6.3 Lập mô hình xử lý phân tích liệu 79 4.6.4 Quy trình xử lý phân tích số liệu 79 iii 4.7 Kỹ thuật thiết lập liệu thống kê 80 4.7.1 Cách lập biểu mẫu thống kê 80 4.7.2 Sử dụng câu hỏi để kiểm tra liệu thống kê 80 PHẦN V KỸ THUẬT VIẾT BÁO CÁO TỰ ĐÁNH GIÁ 81 5.1 Kỹ thuật viết báo cáo tiêu chí 81 5.1.1 Yêu cầu báo cáo tiêu chí 81 5.1.2 Quy trình viết 81 5.2 Kỹ thuật viết báo cáo tiêu chuẩn 82 5.2.1 Yêu cầu báo cáo tiêu chuẩn 82 5.2.2 Quy trình viết 82 5.3 Kỹ thuật viết báo cáo tự đánh giá 83 5.3.1 Yêu cầu báo cáo tự đánh giá 83 5.3.2 Thể thức, kỹ thuật trình bày 83 5.3.3 Cấu trúc báo cáo tự đánh giá 84 5.3.4 Quy trình viết 84 PHẦN VI PHỤ LỤC 86 Phụ lục Mẫu Danh mục minh chứng 86 Phụ lục 2: Cơ sở liệu kiểm định chất lượng giáo dục 87 Phụ lục 2.1 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm 87 Phụ lục 2.2 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm 90 Phụ lục 2.3 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm 91 Phụ lục 2.4 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm 96 Phụ lục 2.5 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm 99 Phụ lục 2.6 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm 103 Phụ lục Mẫu Phiếu phân tích tiêu chí 105 Phụ lục Mẫu Phiếu đánh giá tiêu chí 109 Phụ lục 5: Mẫu báo cáo tiêu chí 110 Phụ lục Mẫu báo cáo tiêu chuẩn 111 Phụ lục Mẫu trình bày Báo cáo tự đánh giá 112 Phụ lục 8: Mẫu tổng hợp kết đánh giá 115 iv PHẦN I DANH MỤC HỆ THỐNG VĂN BẢN PHÁP QUY VÀVĂN BẢN HƯỚNG DẪN LIÊN QUAN ĐẾN TỰ ĐÁNH GIÁ CƠ SỞ GIÁO DỤC TT Nội dung Chỉ thị 46/2008/CT-BGDĐT ngày 05/8/2008 Bộ trưởng Bộ Giáo dục Đào tạo việc tăng cường công tác đánh giá kiểm định chất lượng giáo dục Weblink: http://www.vnua.edu.vn/phongban/dbcl/images/File-PDF/VB/1c-chi-thi462.pdf Thông tư số 62/2012/TT-BGDĐT ngày 28/12/2012 Bộ trưởng Bộ Giáo dục Đào tạo ban hành Quy định quy trình chu kỳ kiểm định chất lượng trường đại học, cao đẳng trung cấp chuyên nghiệp Web link: http://www.vnua.edu.vn/phongban/dbcl/images/File-PDF/VB/28.TT_622012-Quy_trinh_va_chu_ky_kiem_dinh-1.pdf Văn hợp Số: 06 /VBHN-BGDĐT (Hợp Quyết định số 65/2007/QĐ-BGDĐT ngày 01 tháng 11 năm 2007 Thông tư số 37/2012/TT-BGDĐT ngày 30 tháng 10 năm 2012 Bộ Đào tạo ban hành Quy định tiêu chuẩn đánh giá chất lượng giáo dục trường đại học) Web link: http://www.vnua.edu.vn/phongban/dbcl/images/FilePDF/VB/47._VBHN_06.pdf Công văn số 462/KTKĐCLGD-KĐĐH ngày 09/5/2013 Cục Khảo thí Kiểm định chất lượng giáo dục hướng dẫn tự đánh giá trường đại học, cao đẳng trung cấp chuyên nghiệp Web link: http://www.vnua.edu.vn/phongban/dbcl/images/FilePDF/VB/32._CV_462_BGD-KTKD-09_05_13HDTuDanhGiaTruongDH_CD_TCCN.pdf Công văn số 527/KTKĐCLGD-KĐĐH ngày 23/5/2013 Cục Khảo thí Kiểm định chất lượng giáo dục hướng dẫn sử dụng tiêu chí đánh giá chất lượng trường đại học Web link: http://www.vnua.edu.vn/phongban/dbcl/images/File-PDF/VB/34._CV-527BGD-KTKD-23_05_13-HDSuDungTieuChiDanhGiaChatLuongTruongDaiHoc.pdf PHẦN II GIẢI THÍCH TỪ NGỮ VÀ KHÁI NIỆM Trích từ “Thông tư số 62/2012/TT-BGDĐT ngày 28/12/2012 Bộ trưởng Bộ Giáo dục Đào tạo ban hành Quy định quy trình chu kỳ kiểm định chất lượng trường đại học, cao đẳng trung cấp chuyên nghiệp” Điều Giải thích từ ngữ Trong văn này, số từ ngữ hiểu sau: “Chất lượng giáo dục” đáp ứng mục tiêu đề sở giáo dục, đáp ứng yêu cầu Luật giáo dục, Luật sửa đổi, bổ sung số điều Luật giáo dục Luật giáo dục đại học, phù hợp với nhu cầu sử dụng nhân lực cho phát triển kinh tế - xã hội địa phương nước “Kiểm định chất lượng sở giáo dục” hoạt động đánh giá công nhận mức độ sở giáo dục đạt tiêu chuẩn chất lượng giáo dục mục tiêu, nội dung, chương trình giáo dục “Tự đánh giá” trình sở giáo dục tự xem xét, nghiên cứu dựa tiêu chuẩn đánh giá chất lượng giáo dục Bộ Giáo dục Đào tạo ban hành để báo cáo tình trạng chất lượng giáo dục, hiệu hoạt động đào tạo, nghiên cứu khoa học, nhân lực, sở vật chất vấn đề liên quan khác để sở giáo dục tiến hành điều chỉnh nguồn lực trình thực nhằm đạt tiêu chuẩn chất lượng giáo dục “Đánh giá ngoài” trình khảo sát, đánh giá tổ chức kiểm định chất lượng giáo dục dựa tiêu chuẩn đánh giá chất lượng giáo dục Bộ Giáo dục Đào tạo ban hành để xác định mức độ sở giáo dục đạt tiêu chuẩn chất lượng giáo dục Điều Tiêu chuẩn đánh giá chất lượng giáo dục Tiêu chuẩn đánh giá chất lượng giáo dục Bộ trưởng Bộ Giáo dục Đào tạo ban hành mức độ yêu cầu điều kiện mà sở giáo dục phải đáp ứng để công nhận đạt tiêu chuẩn chất lượng giáo dục Tiêu chuẩn đánh giá chất lượng giáo dục xây dựng cho cấp học Mỗi tiêu chuẩn có số tiêu chí Tiêu chí đánh giá chất lượng giáo dục mức độ yêu cầu điều kiện cần đạt khía cạnh cụ thể tiêu chuẩn Trích từ “Văn hợp Số: 06/VBHN-BGDĐT (Hợp Quyết định số 65/2007/QĐ-BGDĐT ngày 01 tháng 11 năm 2007 Thông tư số 37/2012/TT-BGDĐT ngày 30 tháng 10 năm 2012 Bộ Đào tạo ban hành Quy định tiêu chuẩn đánh giá chất lượng giáo dục trường đại học)” Điều Chất lượng giáo dục tiêu chuẩn đánh giá chất lượng giáo dục trường đại học Chất lượng giáo dục trường đại học đáp ứng mục tiêu nhà trường đề ra, đảm bảo yêu cầu mục tiêu giáo dục đại học Luật giáo dục, phù hợp với yêu cầu đào tạo nguồn nhân lực cho phát triển kinh tế - xã hội địa phương nước 2 Tiêu chuẩn đánh giá chất lượng giáo dục trường đại học mức độ yêu cầu điều kiện mà trường đại học phải đáp ứng để công nhận đạt tiêu chuẩn chất lượng giáo dục Trích từ “Công văn số 462/KTKĐCLGD-KĐĐH ngày 9/5/2013 hướng dẫn tự đánh giá trường đại học, cao đẳng trung cấp chuyên nghiệp” Khái niệm tự đánh giá Tự đánh giá trình nhà trường tự xem xét, nghiên cứu dựa tiêu chuẩn đánh giá chất lượng giáo dục Bộ Giáo dục Đào tạo ban hành để báo cáo tình trạng chất lượng giáo dục, hiệu hoạt động đào tạo, nghiên cứu khoa học, nhân lực, sở vật chất, vấn đề liên quan khác, từ tiến hành điều chỉnh nguồn lực trình thực nhằm đạt tiêu chuẩn chất lượng giáo dục Ý nghĩa mục đích tự đánh giá a) Là khâu quan trọng việc đảm bảo chất lượng xây dựng văn hóa chất lượng bên nhà trường b) Giúp nhà trường tự rà soát, xem xét, đánh giá thực trạng mình, lập triển khai kế hoạch hành động cải tiến nâng cao chất lượng đào tạo, từ điều chỉnh mục tiêu cho giai đoạn theo hướng cao c) Là điều kiện cần thiết để nhà trường đăng ký đánh giá công nhận đạt tiêu chuẩn chất lượng với tổ chức kiểm định chất lượng giáo dục d) Thể tính tự chủ tính tự chịu trách nhiệm nhà trường toàn hoạt động đào tạo, nghiên cứu khoa học, dịch vụ xã hội theo chức năng, nhiệm vụ giao, phù hợp với sứ mạng mục tiêu nhà trường Các yêu cầu việc tự đánh giá a) Trong trình tự đánh giá, vào tiêu chuẩn tiêu chí, nhà trường phải tập trung thực việc sau: - Mô tả, làm rõ thực trạng nhà trường; - Phân tích, giải thích, so sánh, đối chiếu đưa nhận định; điểm mạnh, tồn biện pháp khắc phục; - Lập kế hoạch hành động để cải tiến, nâng cao chất lượng đào tạo b) Tự đánh giá trình liên tục, đòi hỏi nhiều công sức, thời gian phải có tham gia nhiều đơn vị, cá nhân toàn trường c) Hoạt động tự đánh giá đòi hỏi tính khách quan, trung thực công khai, minh bạch Các giải thích, nhận định, kết luận đưa trình tự đánh giá phải dựa minh chứng cụ thể, rõ ràng, đảm bảo độ tin cậy Việc tự đánh giá phải bao quát đầy đủ tiêu chí tiêu chuẩn đánh giá chất lượng giáo dục Bộ Giáo dục Đào tạo ban hành PHẦN III HƯỚNG DẪNSỬ DỤNG TIÊU CHÍ ĐÁNH GIÁ CHẤT LƯỢNG TRƯỜNG ĐẠI HỌC (Kèm theo Công văn số: 527/KTKĐCLGD ngày 23/5/2013của Cục Khảo thí Kiểm định chất lượng giáo dục) Tiêu chuẩn 1: Sứ mạng mục tiêu trường đại học (2 tiêu chí) Tiêu chí 1.1 Sứ mạng trường đại học xác định phù hợp với chức năng, nhiệm vụ, nguồn lực định hướng phát triển nhà trường; phù hợp gắn kết với chiến lược phát triển kinh tế - xã hội địa phương nước Từ khóa: Sứ mạng, phù hợp, chức năng, nhiệm vụ, nguồn lực, định hướng phát triển, gắn kết Các minh chứng sử dụng cho tiêu chí này: • Các văn bản, nghị Đảng bộ, Hội đồng (quản trị, khoa học đào tạo, …) nhà trường có liên quan đến sứ mạng; • Kế hoạch chiến lược sách ngắn hạn trường; • Kế hoạch chiến lược sách dài hạn trường; • Kế hoạch chiến lược phát triển kinh tế - xã hội quốc gia; • Kế hoạch chiến lược phát triển kinh tế - xã hội địa phương; • Quy chế tổ chức hoạt động trường; • Website trường; • Các minh chứng liên quan khác: biên họp, tập san giới thiệu có liên quan đến sứ mạng trường Các câu hỏi dành cho tiêu chí này: • Báo cáo tự đánh giá (phần liên quan đến tiêu chí) có ghi rõ mô tả phát biểu sứ mạng trường không? • Nếu có, văn trường ghi rõ sứ mạng đó? • Trong báo cáo tự đánh giá có khẳng định sứ mạng trường phù hợp với chức năng, nhiệm vụ trường không? • Nội dung sứ mạng có phù hợp với nguồn lực trường định hướng phát triển trường không? • Báo cáo tự đánh giá có phân tích sứ mạng khẳng định phù hợp gắn kết với chiến lược phát triển kinh tế - xã hội địa phương nước không? • Báo cáo tự đánh giá có sứ mạng trường phổ biến quán triệt cho tất giảng viên, nhân viên người học không? • Sứ mạng có phổ biến rộng rãi cho đối tượng có liên quan trường không? Bằng cách nào? • Sứ mạng có hiểu biết chấp nhận rộng rãi tập thể nhà trường không? • Báo cáo tự đánh giá có cho thấy quy trình lấy ý kiến phản hồi, góp ý đối tượng có liên quan sứ mạng nhà trường không? Các gợi ý cho Đoàn đánh giá ngoài: • Đánh giá nội dung sứ mạng phù hợp với chức nhiệm vụ trường; • Đánh giá sứ mạng phù hợp với nguồn lực với định hướng phát triển trường; • Đánh giá sứ mạng phù hợp gắn kết với chiến lược phát triển kinh tế - xã hội địa phương nước • Phỏng vấn: Lãnh đạo, cán quản lý, giảng viên người học trường hiểu biết thái độ họ tuyên bố sứ mạng trường Tiêu chí 1.2 Mục tiêu trường đại học xác định phù hợp với mục tiêu đào tạo trình độ đại học quy định Luật Giáo dục sứ mạng tuyên bố nhà trường; định kỳ rà soát, bổ sung, điều chỉnh triển khai thực Từ khóa:Mục tiêu, phù hợp, định kỳ rà soát, bổ sung, điều chỉnh, triển khai Các minh chứng sử dụng cho tiêu chí này: • So sánh mục tiêu trường với mục tiêu quy định Luật Giáo dục Luật Giáo dục đại học 2012; • Kế hoạch chiến lược dự án trường; • Kế hoạch nhiệm vụ hàng năm trường; • Kế hoạch khoa/trường thành viên; • Việc công bố chương trình học/chương trình đào tạo; • Các minh chứng liên quan khác: biên hội nghị rà soát, đánh giá, điều chỉnh mục tiêu…; tổng kết, đánh giá triển khai tài liệu khác có liên quan đến việc thực mục tiêu trường Các câu hỏi dành cho tiêu chí này: • Báo cáo tự đánh giá (phần liên quan đến tiêu chí) có phân tích phù hợp mục tiêu trường mục tiêu đào tạo cấp học trình độ đào tạo quy định Luật Giáo dục không? • Báo cáo tự đánh giá (phần liên quan đến tiêu chí) có phân tích phù hợp mục tiêu sứ mạng trường không? • Mục tiêu trường có định kỳ rà soát, bổ sung, điều chỉnh không? • Mục tiêu có phổ biến triển khai thực không? • Mục tiêu có thành viên trường hiểu chấp nhận rộng rãi không? • Mục tiêu có đối tượng có liên quan trường biết đến không? • Báo cáo tự đánh giá có ghi đầy đủ minh chứng không? Có đưa minh chứng vào phụ lục không? Các gợi ý cho Đoàn đánh giá ngoài: • Xem xét tính phù hợp mục tiêu với sứ mạng trường theo văn trường Tình trạng tốt nghiệp sinh viên cao đẳng hệ quy: Các tiêu chí 20 20 Năm tốt nghiệp 20 20 20 20 20 20 20 20 Số lượng sinh viên tốt nghiệp (người) Tỷ lệ sinh viên tốt nghiệp so với số tuyển vào (%) Đánh giá sinh viên tốt nghiệp chất lượng đào tạo nhà trường: A Nhà trường không điều tra vấn đề chuyển xuống câu B Nhà trường có điều tra vấn đề điền thông tin 3.1 Tỷ lệ sinh viên trả lời học kiến thức kỹ cần thiết cho công việc theo ngành tốt nghiệp (%) 3.2 Tỷ lệ sinh viên trả lời học phần kiến thức kỹ cần thiết cho công việc theo ngành tốt nghiệp (%) 3.3 Tỷ lệ sinh viên trả lời KHÔNG học kiến thức kỹ cần thiết cho công việc theo ngành tốt nghiệp (%) Sinh viên có việc làm năm sau tốt nghiệp: A Nhà trường không điều tra vấn đề chuyển xuống câu B Nhà trường có điều tra vấn đề điền thông tin 4.1 Tỷ lệ sinh viên có việc làm ngành đào tạo (%) - Sau tháng tốt nghiệp - Sau 12 tháng tốt nghiệp 4.2 Tỷ lệ sinh viên có việc làm trái ngành đào tạo (%) 4.3 Thu nhập bình quân/tháng sinh viên có việc làm Đánh giá nhà tuyển dụng sinh viên tốt nghiệp có việc làm ngành đào tạo: A Nhà trường không điều tra vấn đề chuyển xuống kết thúc bảng B Nhà trường có điều tra vấn đề 101 điền thông tin 5.1 Tỷ lệ sinh viên đáp ứng yêu cầu công việc, sử dụng (%) 5.2 Tỷ lệ sinh viên đáp ứng yêu cầu công việc, phải đào tạo thêm (%) 5.3 Tỷ lệ sinh viên phải đào tạo lại đào tạo bổ sung tháng (%) Ghi chú: - Sinh viên tốt nghiệp sinh viên có đủ điều kiện để công nhận tốt nghiệp theo quy định, kể sinh viên chưa nhận tốt nghiệp - Sinh viên có việc làm sinh viên tìm việc làm tạo việc làm - Năm sau tốt nghiệp: 12 tháng kể từ ngày tốt nghiệp - Các mục bỏ trống xem nhà trường không điều tra việc Tóm tắt số số quan trọng Đánh giá sinh viên tốt nghiệp chất lượng đào tạo nhà trường: Tỷ lệ sinh viên trả lời học kiến thức kỹ cần thiết cho công việc theo ngành tốt nghiệp (%): Tỷ lệ sinh viên trả lời học phần kiến thức kỹ cần thiết cho công việc theo ngành tốt nghiệp (%): Sinh viên có việc làm năm sau tốt nghiệp: Tỷ lệ sinh viên có việc làm ngành đào tạo (%): Tỷ lệ sinh viên có việc làm trái ngành đào tạo (%): Thu nhập bình quân/tháng sinh viên có việc làm (triệu VNĐ): Đánh giá nhà tuyển dụng sinh viên tốt nghiệp có việc làm ngành đào tạo: Tỷ lệ sinh viên đáp ứng yêu cầu công việc, sử dụng (%): Tỷ lệ sinh viên đáp ứng yêu cầu công việc, phải đào tạo thêm (%): 102 Phụ lục 2.6 Mẫu sở liệu kiểm định chất lượng giáo dục – Nhóm CƠ SỞ DỮ LIỆU KIỂM ĐỊNH CHẤT LƯỢNG GIÁO DỤC Thời điểm báo cáo: tính đến ngày ……/…… /20… Nhóm Tài chính, thư viện sở vật chất Doanh thu từ nghiên cứu khoa học chuyển giao công nghệ nhà trường năm gần đây: STT Năm 20 20 20 20 20 Doanh thu từ NCKH chuyển giao công nghệ (triệu VNĐ) Tỷ lệ doanh thu từ NCKH chuyển giao công nghệ so với tổng kinh phí đầu vào nhà trường (%) Tỷ số doanh thu từ NCKH chuyển giao công nghệ cán hữu (triệu VNĐ/ người) Tổng kinh phí từ nguồn thu trường năm gần đây: - Năm 20 : - Năm 20 : - Năm 20 : - Năm 20 : - Năm 20 : Tổng thu học phí (chỉ tính hệ quy) năm gần đây: - Năm 20 -20 : - Năm 20 -20 : - Năm 20 -20 : - Năm 20 -20 : - Năm 20 -20 : Tổng số đầu sách thư viện nhà trường Tổng số đầu sách gắn với ngành đào tạo có cấp nhà trường: Tổng diện tích đất sử dụng trường (tính m2): Diện tích sử dụng cho hạng mục sau (tính m2): - Nơi làm việc: Nơi học: Nơi vui chơi giải trí: Diện tích phòng học (tính m2) - Tổng diện tích phòng học: - Tỷ số diện tích phòng học sinh viên quy: Tổng số máy tính trường: 103 - Dùng cho hệ thống văn phòng: - Dùng cho sinh viên học tập: Tỷ số số máy tính dùng cho sinh viên sinh viên quy: ………… Tóm tắt số số quan trọng: Nghiên cứu khoa học chuyển giao công nghệ: Tỷ số doanh thu từ NCKH chuyển giao công nghệ cán hữu: Tỷ số sách xuất (quy đổi) cán hữu: Cơ sở vật chất (số liệu năm cuối kỳ đánh giá): Tỷ số máy tính dùng cho sinh viên sinh viên quy: Tỷ số diện tích phòng học sinh viên quy: Tỷ số diện tích ký túc xá sinh viên quy: 104 Phụ lục Mẫu Phiếu phân tích tiêu chí Mẫu Phân tích tiêu chí, thu thập, phân tích, xử lý thông tin, minh chứng Tiêu chí …(số tiêu chí tên tiêu chí) Nghiên cứu yêu cầu (y/c)/nội hàm tiêu chí Y/c 1: … Y/c 2: … Y/c 3: … Y/c … Căn để rút điểm mạnh/ tồn đánh giá mức độ đạt tiêu chí so với mục tiêu trường Những câu hỏi đặt cho tiêu chí (tương ứng với yêu cầu/nội hàm) Những TT, MC thể yêu cầu/nội hàm tiêu chí cần thu thập Nơi thu thập TT, MC Phương pháp, phương tiện, điều kiện thực thu thập Mã hóa TT, MC thu thập DANH MỤC MINH CHỨNG TT Mã minh chứng Tên minh chứng Số/ngày tháng ban hành Nơi ban hành Loại minh chứng (quyết định, quy định, công văn, MC hồi cố…) Minh chứng dùng chung (với tiêu chí:…) Ghi … … … … … 105 Ví dụ mẫu phân tích tiêu chí Phân tích tiêu chí; tu thập, phân tích, xử lý thông tin, minh chứng (tiêu chí 2.5) Tiêu chí 2.5.Có tổ chức đảm bảo chất lượng giáo dục đại học, bao gồm trung tâm phận chuyên trách; có đội ngũ cán có lực để triển khai hoạt độngđánh giá nhằm trì, nâng cao chất lượng hoạt động nhà trường Nghiên cứu yêu cầu/nội hàm tiêu chí Y/c 1: Có tổ chức đảm bảo chất lượng Y/c 2: Đội ngũ cán (của tổ chức này) có lực để triển khai công việc chuyên môn Y/c 3: Các hoạt Những câu hỏi đặt cho tiêu chí (tương ứng với yêu cầu/nội hàm) - Trường thành lập tổ chức ĐBCL chưa? - Nếu thành lập: Thành lập vào nào? tên gọi? - Nếu không đơn vị có cụm từ “ĐBCL” tên gọi: Trường có đơn vị giao chức năng, nhiệm vụ chuyên trách ĐBCL không? chức năng, nhiệm vụ gì? - Về số lượng: Tổ chức có người? - Về chất lương: + Học hàm, học vị, trình độ ngoại ngữ, tin học người? + Số lượng cán có chuyên môn đo lường, đánh giá, ĐBCL? + Số lượng cán tập huấn kiểm định ĐBCL - Từ thành lập tổ chức Những TT, MC thể yêu cầu/nội hàm tiêu chí cần thu thập - QĐ thành lập Tổ KT ĐBCL - QĐ thành lập Phòng KT vàĐBCLĐTkèm theo chức năng, nhiệm vụ tổ chức - Danh sách cán tổ chức kèm thông tin chức danh, học hàm, học vị, trình độ chuyên môn, ngoại ngữ, tin học cán - Lí lịch trích ngang cán có chuyên môn đo lường đánh giá, ĐBCL - QĐ cử cán tổ chức tập huấn KĐ ĐBCL - Báo cáo hoạt động tổ chức Nơi thu thập TT, MC Phương pháp, Mã hóa phương tiện, TT, MC thu điều kiện thực thập thu thập - Tổ chức ĐBCL - PP chính: - H2.2.5.1 - Phòng TCHC Nghiên cứu hồ sơ, (văn thư) văn - VP BGH - Photo toàn - H2.2.5.2 bộ/trích lục văn - Tổ chức ĐBCL - PP chính: - H2.2.5.3 - Phòng TCHC Nghiên cứu hồ sơ, (văn thư) văn - Photo toàn bộ/trích lục văn - H2.2.5.4 - Lập danh sách trích ngang - H2.2.5.5 - Tổ chức ĐBCL - PP chính: - H2.2.5.6 106 động tổ chức góp phần trì, nâng cao chất lượng hoạt động trường Căn để rút điểm mạnh/ tồn đánh giá mức độ đạt tiêu chí so với mục tiêu trường TT Mã minh chứng H2.2.5.1 H2.2.5.2 H2.2.5.3 H2.2.5.4 H2.2.5.5 có hoạt động gì? - Các hoạt động có góp phần trì, nâng cao chất lượng trường không? - Mức độ đáp ứng yêu cầu tiêu chí so với mục tiêu trường nào? + Về cấu tổ chức trường? + Số lượng chất lượng đội ngũ cán bộ? +Việc triển khai hoạt động ĐBCL? tháng/quý/năm - Phòng TCHC - Kế hoạch đảm bảo chất lượng (văn thư) năm (5 năm gần đây); - Kế hoạch triển khai tự đánh giá; - Báo cáo việc triển khai ISO - Danh sách cán tổ chức - Lí lịch trích ngang cán có chuyên môn đo lường đánh giá, ĐBCL - Báo cáo hoạt động tổ chức tháng/quý/năm Danh sách cán Phòng Khảo thí Đảm bảo chất lượng kèm thông tin chức danh, học hàm, học vị, trình độ chuyên môn, ngoại ngữ, tin học cán Danh sách kèm lý lịch trích ngang cán có chuyên môn đo lường đánh giá, ĐBCL Thống kê cán trường tham gia lớp tập huấn đảm bảo chất lượng Bộ Giáo dục - H2.2.5.4 - H2.2.5.6 DANH MỤC MINH CHỨNG Số/ngày tháng Tên minh chứng Nơi ban hành ban hành Quyết định việc thành lập Tổ Khảo thí Đảm Số …/QĐHiệu trưởng bảo chất lượng …./4/2009 Quyết định việc thành lập Phòng Khảo thí Đảm bảo chất lượng đào tạo Nghiên cứu hồ sơ, văn - H2.2.5.7 - Photo toàn bộ/trích lục văn - H2.2.5.8 - H2.2.5.9 - H2.2.5.3 Số …/QĐ….//2010 Loại minh chứng Quyết định Hiệu trưởng Quyết định Phòng KTĐBCL Văn Phòng KTĐBCL Phòng TCHC Phòng KTĐBCL Ghi Minh chứng dùng chung (với tiêu chí:…) Văn Dữ liệu 107 H2.2.5.6 H2.2.5.7 H2.2.5.8 H2.2.5.9 Đào tạo tổ chức kèm theo Quyết định Báo cáo công tác năm 20… kế hoạch 20… Phòng Khảo thí Đảm bảo chất lượng - Kế hoạch đảm bảo chất lượng năm (5 năm gần đây) - Kế hoạch triển khai tự đánh giá - Báo cáo việc triển khai ISO …/6/2012 Phòng KTĐBCL Báo cáo BGH Trường Văn BGH Trường Phòng KTĐBCL Văn Báo cáo 108 Phụ lục Mẫu Phiếu đánh giá tiêu chí Nhóm công tác: PHIẾU ĐÁNH GIÁ TIÊU CHÍ (Phạm vi - trang) Tiêu chuẩn: (copy nguyên số tên tiêu chuẩn)………….………………………………………… Tiêu chí: (copy nguyên số tên tiêu chí)… ……………………….…………………………… Mô tả phân tích hoạt động trường liên quan đến tiêu chí, so sánh đối chiếu với mặt chung, với nhà trường năm trước, với quy định chung: ……………….……………………………………………………………………………………… ………………………………………………………………………………………………………… Điểm mạnh yếu tố cần phát huy: .…………………………………………………………………………………… Những tồn tại, giải thích nguyên nhân: …………………… …………………………………………………………… Kế hoạch hành động (những vấn đề cần cải tiến, biện pháp cần thực kèm theo thời gian, nguồn lực…): ………………………….…………………………………………………………………………… Tự đánh giá: Đánh dấu vào ô đây: Đạt Chưa đạt * Nếu chưa đạt đạt khoảng % yêu cầu, lý * Trường hợp không đánh giá cần ghi rõ lý do: Không có minh chứng tiêu chí không phù hợp, lý khác Người báo cáo (Ký, ghi rõ họ tên) 109 Phụ lục 5: Mẫu báo cáo tiêu chí Báo cáo tiêu chí viết dựa phiếu đánh giá tiêu chí (Phụ lục 4) với phạm vi 1-2 trang/tiêu chí Ví dụ cho báo cáo tiêu chí 2.5 Tiêu chí 2.5.Có tổ chức đảm bảo chất lượng giáo dục đại học, bao gồm trung tâm phận chuyên trách; có đội ngũ cán có lực để triển khai hoạt động đánh giá nhằm trì, nâng cao chất lượng hoạt động nhà trường Mô tả Thực Chỉ thị số 46/2008/CT-BGDĐT ngày 05/8/2008 Bộ trưởng Bộ GD&ĐT việc tăng cường công tác đánh giá kiểm định chất lượng giáo dục, năm 2009, Nhà trường tiến hành thành lập Tổ Khảo thí Đảm bảo chất lượng thuộc phòng Đào tạo [H2.2.5.1] Để phát huy cao công tác đảm bảo tự đánh giá chất lượng đào tạo, ngày 01 tháng 06 năm 2010, Hiệu trưởng nhà trường ban hành Quyết định số 472/ QĐ- việc thành lập Phòng Khảo thí Đảm bảo chất lượng đào tạo [H2.2.5.2] Đội ngũ cán phận chuyên trách đảm bảo chất lượng Phòng gồm 03 cán bộ, nhân viên có 01 Thạc sỹ 02 cử nhân [H2.2.5.3] Nhận thức tầm quan trọng công tác đánh giá đảm bảo chất lượng giáo dục, Nhà trường cử cán Phòng học khóa Thạc sỹ đo lường đánh giá Hiện Phòng có cán có trình độ thạc sỹ đo lường đánh giá giáo dục [H2.2.5.4] Những cán Phòng tham gia chương trình tập huấn công tác tự đánh giá đánh giá Cục Khảo thí Kiểm định chất lượng giáo dục, Bộ GD&ĐT tổ chức [H2.2.5.5] Ngoài ra, cán có kỹ tốt việc sử dụng máy tính, có khả ứng dụng công nghệ thông tin công việc có chứng tiếng Anh từ B1 trở lên [H2.2.5.3] Ngay sau thành lập, Phòng Khảo thí Đảm bảo chất lượng đào tạo trường tham mưu cho lãnh đạo trường đề Kế hoạch đảm bảo chất lượng hàng năm [H2.2.5.7] thành lập Hội đồng tự đánh giá để triển khai công tác tự đánh giá trường [H2.2.5.8] Ngoài ra, năm học 2011-2012, Phòng làm đầu mối việc triển khai ISO 9001:2008 với Viện kiểm định Phát triển chất lượng –IQAD [H2.2.5.9] nhằm nâng cao chất lượng đào tạo, tiến tới đạt chuẩn chất lượng đào tạo Việc thành lập Phòng Khảo thí Đảm bảo chất lượng đào tạo tạo bước chuyển biến mạnh mẽ công tác đảm bảo chất lượng trường [H2.2.5.6] Tuy nhiên, số công việc liên quan đến đánh giá khảo sát nhà trường chưa triển khai có hiệu số lượng cán Phòng [H2.2.5.3], chưa có cán cử tham dự khóa đào tạo kiểm định viên kiểm định chất lượng giáo dục Điểm mạnh Tất cán Phòng Khảo thí Đảm bảo chất lượng đào tạo tập huấn công tác tự đánh giá Cục Khảo thí Kiểm định chất lượng giáo dục, Bộ GD&ĐT tổ chức Tồn Đội ngũ cán Phòng Khảo thí Đảm bảo chất lượng đào tạo thiếu để triển khai có hiệu hoạt động đánh giá đảm bảo chất lượng trường Kế hoạch hành động Trong năm 2015, Nhà trường tuyển dụng thêm 01 cán có chuyên môn đo lường đánh giá làm việc Phòng Khảo thí Đảm bảo chất lượng đào tạo; đồng thời, cử 01 cán Phòng tham gia khóa đào tạo kiểm định viên kiểm định chất lượng giáo dục ĐHQG Hà Nội tổ chức Tự đánh giá: Đạt 110 Phụ lục Mẫu báo cáo tiêu chuẩn Tiêu chuẩn…: .(Ghi tên tiêu chuẩn theo tiêu chuẩn đánh giá) Mở đầu (ngắn gọn): phần mô tả tóm tắt, phân tích chung tiêu chuẩn (vì có điểm giao thoa tiêu chí tiêu chuẩn, nên cần mô tả chung không lặp lại phần phân tích tiêu chí) Tiêu chí …: (Ghi tên tiêu chí theo tiêu chuẩn đánh giá) Mô tả (cần mô tả phân tích tất nội hàm minh chứng liên quan để chứng minh trường đạt không đạt yêu cầu tiêu chí): Điểm mạnh (nêu điểm mạnh bật trường việc đáp ứng yêu cầu tiêu chí): 3.Tồn (nêu tồn trường việc đáp ứng yêu cầu tiêu chí): Kế hoạch hành động (nhằm phát huy mặt mạnh, khắc phục tồn tại, cần đưa biện pháp, nguồn lực dự kiến thời gian hoàn thành): Tự đánh giá: Đạt chưa đạt yêu cầu tiêu chí Tiêu chí …: ( Ghi tên tiêu chí theo tiêu chuẩn đánh giá theo trình tự trên) Tiêu chí… :……… Tiêu chí……: … (tuần tự hết tiêu chí tiêu chuẩn) Kết luậnvề Tiêu chuẩn … : (nêu tóm tắt điểm mạnh bật, tồn tiêu chuẩn; số lượng tiêu chí đạt yêu cầu, số lượng tiêu chí không đạt yêu cầu) (Lưu ý không đánh giá tiêu chuẩn đạt hay chưa đạt yêu cầu) 111 Phụ lục Mẫu trình bày Báo cáo tự đánh giá TÊN CƠ QUAN CHỦ QUẢN TÊN TRƯỜNG Logo trường (nếu có) BÁO CÁO TỰ ĐÁNH GIÁ (Để đăng ký kiểm định chất lượng giáo dục trường …… ) Tỉnh/Thành phố, năm 20… 112 Phần I Đặt vấn đề Mô tả vắn tắt mục đích, quy trình tự đánh giá, phương pháp công cụ đánh giá để cung cấp thông tin bối cảnh đợt tự đánh giá, nhằm giúp người đọc hiểu rõ nội dung báo cáo tự đánh giá Các thông tin phần mô tả tham gia nhóm thành viên nhà trường (khoa, ban, phòng, nhân viên, học sinh, ), cách thức tổ chức thành phần tham gia đợt tự đánh giá, mục đích tự đánh giá, lợi ích mà nhà trường thu Phần II Tổng quan chung Đây phần tóm tắt để giúp người đọc có nhìn tổng thể nhà trường trước đọc báo cáo chi tiết Phần tổng quan nhằm đạt hai mục đích: - Thứ để giúp người đọc hiểu bối cảnh chung nhà trường tầm nhìn, sứ mạng, thông tin sở vật chất, chương trình đào tạo, vấn đề tài chính, vấn đề có ảnh hưởng đến tình hình chung nhà trường - Thứ hai để phát trình triển khai tự đánh giá Phần không cần đề cập tiêu chuẩn đánh giá chất lượng giáo dục, trình bày phát này, phải chúng liên quan đến tiêu chuẩn Trong phần tổng quan chung, phải có thêm thông tin khác để giúp người đọc hiểu rõ báo cáo tự đánh giá Nhà trường cần nhấn mạnh chủ đề ý kiến quan trọng báo cáo tự đánh giá nhằm giúp người đọc hiểu vấn đề quan trọng mà nhà trường xác định đợt tự đánh giá này, qua thấy nhà trường sử dụng tự đánh công cụ để cải tiến nâng cao chất lượng giáo dục (phần tổng quan không 10 trang) Phần III Tự đánh giá nhà trường(theo tiêu chuẩn, tiêu chí): Đây phần báo cáo tự đánh giá (thường dài khoảng 60 - 80 trang), mô tả chi tiết kết tự đánh giá nhà trường, xem xét 10 tiêu chuẩn đánh giá chất lượng giáo dục Trong tiêu chuẩn, xem xét theo tiêu chí Với tiêu chí, thực theo bước sau: - Mô tả trạng: Mô tả đầy đủ, chi tiết, trung thực, khách quan trạng hoạt động nhà trường theo tiêu chí, kèm theo minh chứng Phần mô tả phải ngắn gọn, súc tích, không chi tiết phải cụ thể, đảm bảo tính khái quát nhằm giúp người đọc hiểu rõ hoạt động nhà trường - Đánh giá: Nhà trường đánh giá chất lượng, hiệu hoạt động theo tiêu chí so với mục tiêu đặt ra, mặt mạnh, tồn tại, vướng mắc; phân tích, đưa nhận định giải thích nhằm giúp người đọc hiểu nhà trường lại đánh Có thể có số mặt trường làm tốt nhiều trường khác đánh giá tồn chưa đáp ứng mục tiêu nhà trường đặt chưa phù hợp với nguồn lực nhà trường - Kế hoạch hành động: Nhà trường đưa kế hoạch để tiếp tục trì, phát huy mặt mạnh có giải pháp khắc phục mặt tồn Kế hoạch phải cụ thể thực tế, tránh chung chung (có giải pháp khắc phục, cải tiến, thời gian phải hoàn thành, nguồn lực thực biện pháp giám sát) Kế hoạch nhà trường phải thể tâm cải tiến chất lượng lĩnh vực có tồn đọng, yếu Qua kế hoạch hành động nhà trường, người đọc hiểu rõ khả nhà trường việc tiếp tục cải tiến chất lượng đào tạo nhà trường - Tự đánh giá: Nhà trường tự đánh giá đạt hay chưa đạt yêu cầu tiêu chí 113 Mẫu trình bày phần tự đánh giá trường sau: Tiêu chuẩn 1: .(Ghi tên tiêu chuẩn theo tiêu chuẩn đánh giá) Mở đầu (ngắn gọn): phần mô tả tóm tắt, phân tích chung tiêu chuẩn (vì có điểm giao thoa tiêu chí tiêu chuẩn, nên cần mô tả chung không lặp lại phần phân tích tiêu chí) Tiêu chí (Ghi tên tiêu chí theo tiêu chuẩn đánh giá) Mô tả (cần mô tả phân tích tất nội hàm minh chứng liên quan để chứng minh trường đạt không đạt yêu cầu tiêu chí): Điểm mạnh (nêu điểm mạnh bật trường việc đáp ứng yêu cầu tiêu chí): 3.Tồn (nêu tồn trường việc đáp ứng yêu cầu tiêu chí): Kế hoạch hành động (nhằm phát huy mặt mạnh, khắc phục tồn tại, cần đưa biện pháp, nguồn lực dự kiến thời gian hoàn thành): …… Tự đánh giá: Đạt chưa đạt yêu cầu tiêu chí Tiêu chí 2: (Tương tự tiêu chí 1) Kết luậnvề Tiêu chuẩn 1: (nêu tóm tắt điểm mạnh bật, tồn tiêu chuẩn; số lượng tiêu chí đạt yêu cầu, số lượng tiêu chí không đạt yêu cầu) (Lưu ý không đánh giá tiêu chuẩn đạt hay chưa đạt yêu cầu) Tiêu chuẩn n (Tương tự tiêu chuẩn 1) (Đánh giá hết 10 tiêu chuẩn theo cấu trúc trên) Phần IV Kết luận Kết luận chung công tác tự đánh giá kết tự đánh giá nhà trường Tổng hợp kết tự đánh giá (Phụ lục 8) Hiệu trưởng ký tên, đóng dấu Phần V Phụ lục - Cơ sở liệu kiểm định chất lượng giáo dục (tổng hợp từ sở liệu nhóm -Phụ lục 2): Gồm thông tin khái quát nhà trường dạng báo cáo thực trạng (gồm chủ yếu thông tin định lượng) Thông qua thông tin này, người đọc hình dung tranh toàn cảnh nhà trường, đặc điểm địa lý kinh tế - xã hội, thay đổi xảy ra, dự đoán tình hình người học, khoa, ban, phòng, chương trình giảng dạy, tình hình tài Kết hợp số liệu với tiêu chuẩn đánh giá, người đọc thu nhận đầy đủ thông tin liên quan đến mục tiêu nhiệm vụ trường - Các tài liệu liên quan: định thành lập Hội đồng tự đánh giá, thư ký… , bảng biểu tổng hợp, thống kê, … - Danh mục minh chứng sử dụng trình tự đánh giá viết báo cáo tự đánh giá (Tổng hợp từ danh mục minh chứng nhóm theo - Phụ lục 1) 114 Phụ lục 8: Mẫu tổng hợp kết đánh giá TỔNG HỢP KẾT QUẢ TỰ ĐÁNH GIÁ Mã trường: Tên trường: Khối ngành: Ngày hoàn thành tự đánh giá: Các mức đánh giá: Đ: Đạt; C: Chưa đạt; KĐG: Không đánh giá Tiêu chuẩn 1: Tiêu chuẩn 2: ……………… … … Tiêu chuẩn 3: ……………… … Tiêu chuẩn 4: …………… … … Logo trường (nếu có) … … Tiêu chuẩn 6: ……… … … Tiêu chuẩn 7: … ……………… Tiêu chuẩn 8: ………………… Tiêu chuẩn 9: …………… … Tiêu chuẩn 5: ……………… Tiêu chuẩn 10: …………… … Tổng hợp: - Số tiêu chuẩn có tiêu chí đạt:…….; Số tiêu chí đạt:…… (chiếm….%); - Số tiêu chí chưa đạt: …… (chiếm %); Số tiêu chí không đánh giá: … (chiếm… %) Địa danh, ngày tháng năm 20 GIÁM ĐỐC/HIỆU TRƯỞNG (Ký tên, đóng dấu) 115

Ngày đăng: 03/08/2016, 05:02

Từ khóa liên quan

Tài liệu cùng người dùng

  • Đang cập nhật ...

Tài liệu liên quan