1. Trang chủ
  2. » Luận Văn - Báo Cáo

Thực trạng và xu hướng kiểm định chất lượng các chương trình đào tạo của các cơ sở giáo dục đại học Việt Nam

12 4 0

Đang tải... (xem toàn văn)

Tài liệu hạn chế xem trước, để xem đầy đủ mời bạn chọn Tải xuống

THÔNG TIN TÀI LIỆU

Thông tin cơ bản

Định dạng
Số trang 12
Dung lượng 793,97 KB

Nội dung

Bài viết này trình bày về thực trạng và xu hướng kiểm định chất lượng các chương trình đào tạo của các cơ sở giáo dục đại học Việt Nam hiện nay. Kết quả nghiên cứu có ý nghĩa tham khảo nhất định đặc biệt là đối với các cơ sở giáo dục đại học đang và sẽ có kế hoạch đăng ký tham gia kiểm định các chương trình đào tạo trong thời gian tới. Mời các bạn cùng tham khảo!

Tạp chí Khoa học Cơng nghệ, Số 46, 2020 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM NGUYỄN QUANG VINH Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh nguyenquangvinh@iuh.edu.vn Tóm tắt: Kiểm định chương trình đào tạo khơng xem yêu cầu bắt buộc theo quy định pháp luật mà mục tiêu có tính chiến lược sở giáo dục đại học để khẳng định vị tổ chức với cộng đồng Tính đến 30/6/2020, tổng cộng có 307 chương trình đào tạo tham gia kiểm định đánh giá/công nhận đạt chất lượng theo tiêu chuẩn nước Nghiên cứu thực với mục đích cho người đọc thấy phần thực trạng xu hướng kiểm định chất lượng chương trình đào tạo sở giáo dục đại học Việt Nam Kết nghiên cứu có ý nghĩa tham khảo định đặc biệt sở giáo dục đại học có kế hoạch đăng ký tham gia kiểm định chương trình đào tạo thời gian tới Từ khóa: chương trình đào tạo, kiểm định chất lượng, giáo dục đại học STATUS QUO AND TREND OF ACADEMIC PROGRAM ACCREDITATION AT HIGHER EDUCATION INSTITUTIONS IN VIETNAM Abstract Having academic programs accredited is not only considered as a legislative request but also one of strategic objectives of all higher education institutions to confirm their position to community Until June 30, 2020, 307 academic programs have been accredited and certified being in accordance with the requirement of national and international standards The study aims to show discriptively a partial status quo as well as accreditation trend of academic programs at Vietnam higher education institutions Its result is meaningful as reference particularily to those higher education institutations who are planning to have program accreditation in the coming time Keywords: academic program, higher education, quality accreditation ĐẶT VẤN ĐỀ Luật sửa đổi, bổ sung số điều Luật Giáo dục đại học Quốc hội nước CHXHCN Việt Nam khóa XIV thơng qua ngày 19/11/2018 bắt đầu có hiệu lực từ ngày 01/07/2019 [12] Khoản Điều 33 Luật có quy định: “Nếu chương trình đào tạo q trình đào tạo khơng thực đánh giá kiểm định chất lượng kiểm định chất lượng khơng đạt phải dừng q trình tuyển sinh tiếp theo.” Trên sở đó, Nghị định 99/2019/NĐ-CP hướng dẫn Luật Giáo dục đại học (sửa đổi) ban hành ngày 30/12/2019 có yêu cầu sở giáo dục đại học (CSGDĐH) (gồm Đại học, Trường đại học, Học viện) phải thực công khai đầy đủ trang thông tin điện tử sở nội dung kết kiểm định chương trình đào tạo Trên thực tế, không đợi đến Luật Nghị định ban hành, CSGDĐH nước sớm nhận thức tầm quan trọng xúc tiến hoạt động kiểm định chương trình đào tạo [1] Việc khơng xem yêu cầu bắt buộc theo quy định pháp luật mà mục tiêu có tính chiến lược CSGDĐH để khẳng định vị tổ chức với cộng đồng; đặc biệt, trước yêu cầu ngày cao người học, phụ huynh, doanh nghiệp, quan quản lý bên liên quan xu hội nhập khu vực giới Theo danh sách chương trình đào tạo đánh giá/cơng nhận đạt tiêu chuẩn kiểm định chất lượng Cục Quản lý chất lượng - Bộ Giáo dục Đào tạo (BGDĐT) công bố đến ngày 30/6/2020, tổng cộng có 307 chương trình thuộc 67 đơn vị đào tạo CSGDĐH (khoa thuộc đại học, trường đại học), bao gồm 121 chương trình đánh giá kiểm định theo tiêu chuẩn nước 186 chương trình đánh giá kiểm định theo tiêu chuẩn nước ngồi [2] © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh 250 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM Danh sách chương trình đào tạo đánh giá/cơng nhận chia thành nhóm chính: 1) Nhóm theo tiêu chuẩn nước, 2) Nhóm theo tiêu chuẩn nước ngồi Các chương trình đào tạo nhóm lại xếp theo cột: Cơ sở giáo dục, Tên chương trình đào tạo, Tổ chức đánh giá, Thời điểm đánh giá ngoài, Kết đánh giá/công nhận, Ngày cấp Giấy chứng nhận/công nhận, Ngày Giấy chứng nhận/công nhận hết giá trị Mỗi CSGDĐH trình bày hàng với liệu tương ứng với cột Cùng với đó, danh sách cịn có bảng tên kèm chữ viết tắt 14 tổ chức kiểm định nước nước (bao gồm Trung tâm, Mạng lưới, Ủy ban, Hội đồng, Quỹ, Hiệp hội – gọi chung tổ chức) Hiện chưa có nghiên cứu thức liên quan đến danh sách chương trình đào tạo đánh giá/công nhận công bố lần Vấn đề kiểm định chương trình đào tạo nước số nhật báo đề cập đến với nội dung chủ yếu thống kê, với đó, đưa nhận định tồn liên quan [3][4][5] Việc phân tích thực trạng chương trình đào tạo đánh giá/cơng nhận theo danh sách cập nhập đến 30/6/2020, sở thống kê mô tả so sánh đối chiếu, phần làm rõ nét số đặc điểm liên quan, làm sở tham khảo định đặc biệt CSGDĐH nước có kế hoạch đăng ký tham gia kiểm định chương trình đào tạo thời gian tới Căn vào tính chất liệu thống kê mơ tả bảng Danh sách Cục Quản lý chất lượng - BGDĐT cơng bố, tiêu chí sử dụng phân tích thống kê nghiên cứu bao gồm: Phân loại chương trình theo nhóm đại học khối ngành đào tạo, Phân loại chương trình theo cấp độ tính chất đào tạo, Phân loại chương trình theo tổ chức đánh giá, Phân loại chương trình theo thời gian, Kết đánh giá/cơng nhận Hình trình bày phần danh sách chương trình đào tạo đánh giá/công nhận cập nhập đến ngày 30/6/2020 Hình 1: Danh sách (trích) chương trình đào tạo đánh giá/công nhận cập nhập 30/6/2020 (Nguồn: Cục Quản lý chất lượng, Bộ Giáo dục Đào tạo, 2020) Việc nghiên cứu phân tích bảng danh sách giúp cho trường đại học có tranh tổng quát thực trạng xu hướng kiểm định chất lượng chương trình đào tạo sở giáo dục đại học Việt Nam Thông qua đó, sở giáo dục đưa chiến lược lựa chọn tiêu chuẩn để đánh giá Các tiêu chuẩn giống chất đảm bảo chất lượng, nguyên lý khác nhau, môi trường vận hành khác nhau, dẫn đến yêu cầu khác Trong viết này, tác giả tập trung phân tích điểm giống khác nhau, yếu tố ảnh hưởng đến cơng tác chuẩn bị đánh giá/kiểm định chương trình đào tạo Vấn đề chưa đề cập đến nghiên cứu giáo dục học trước Đó điểm viết © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM 251 KẾT QUẢ ĐÁNH GIÁ/CÔNG NHẬN CHẤT LƯỢNG 2.1 Phân loại chương trình theo nhóm/loại hình CSGDĐH theo vùng địa lý Các chương trình đào tạo danh sách phân loại theo nhóm Đại học quốc gia, Đại học vùng Trường đại học (Hình 2) theo đó, nhóm Đại học quốc gia có 97 chương trình, chiếm tỉ lệ 32%; nhóm Đại học vùng có 35 chương trình, chiếm tỉ lệ 11%; nhóm Trường đại học có 175 chương trình đánh giá/cơng nhận chất lượng, chiếm tỉ lệ nhiều 57% Mặt khác, phân loại hình CSGDĐH theo Luật sửa đổi, bổ sung số điều Luật Giáo dục đại học số 34/2018/QH14 kết phân tích cho thấy CSGDĐH cơng lập có 275 chương trình (xấp xỉ gần 90%) CSGDĐH tư thục có 32 chương trình (xấp xỉ 10%) tham gia kiểm định (Hình 3) Tư thục 10% ĐH quốc gia, 32% Trường ĐH, 57% Công lập 90% ĐH vùng, 11% Số lượng chương trình đào tạo Hình 2: Phân loại chương trình theo nhóm CSGDĐH Hình 3: Phân loại chương trình theo hình thức CSGDĐH (Nguồn: Tổng hợp từ liệu phân tích, 2020) 137 84 35 28 Trung du miền núi Bắc Đồng sông Hồng Bắc Trung Duyên hải 23 Tây Nguyên Đông Nam Bộ Đồng Cửu Long Hình 4: Phân loại chương trình theo vùng địa lý CSGDĐH Việt Nam (Nguồn: Tổng hợp từ liệu phân tích, 2020) Bên cạnh đó, việc thống kê thực xét theo vùng địa lý theo cách BGDĐT thực phân loại CSGDĐH: Vùng Trung du miền núi phía Bắc, vùng Đồng sông Hồng, vùng Bắc Trung Bộ Duyên hải miền Trung, vùng Tây Nguyên, vùng Đông Nam Bộ, vùng đồng sông Cửu Long [14] Hình trình bày kết phân tích thống kê chương trình đào tạo đánh giá/cơng nhận tính đến 30/6/2020 dựa theo vùng địa lý Việc phân tích cho thấy CSGDĐH vùng Đơng Nam Bộ © 2020 Trường Đại học Công nghiệp thành phố Hồ Chí Minh 252 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM có số lượng chương trình đào tạo tham gia kiểm định công nhận/đánh giá nhiều nhất, với 137 chương trình (44,6%), kế CSGDĐH vùng đồng sơng Hồng với 84 chương trình (27,4%), CSGDĐH vùng Bắc Trung Bộ Duyên hải miền Trung với 35 chương trình (11,4%), CSGDĐH vùng Trung du miền núi phía Bắc với 28 chương trình (9,1%), CSGDĐH vùng đồng sơng Cửu Long với 23 chương trình (7,5%); riêng CSGDĐH vùng Tây Ngun khơng có chương trình 2.1 Phân loại chương trình theo khối ngành đào tạo BGDĐT phân chương trình đào tạo theo khối ngành tuyển sinh trình bày Bảng [6] Bảng 1: Các khối ngành tuyển sinh theo phân loại BGDĐT Khối ngành I Khối ngành II Khối ngành III Khối ngành IV Khối ngành V Khối ngành VI Khối ngành VII Khoa học giáo dục đào tạo giáo viên Nghệ thuật Kinh doanh quản lý, Pháp luật Khoa học sống, Khoa học tự nhiên Tốn thống kê, Máy tính cơng nghệ thông tin, Công nghệ kỹ thuật, Kỹ thuật, Sản xuất chế biến, Kiến trúc xây dựng, Nông lâm thủy sản, Thú y Sức khỏe Nhân văn, Khoa học xã hội hành vi, Báo chí thông tin, Dịch vụ xã hội, Khách sạn-du lịch-thể thao dịch vụ cá nhân, Dịch vụ vận tải, Môi trường bảo vệ mơi trường, An ninh quốc phịng (Nguồn: Bộ Giáo dục Đào tạo, 2020) Trên sở phân loại này, Hình trình bày kết phân loại chương trình đào tạo tham gia kiểm định đánh giá/cơng nhận, theo đó, nhiều khối ngành Tốn thống kê, Máy tính công nghệ thông tin, Công nghệ kỹ thuật, …(khối ngành V) với 127 chương trình đào tạo, chiếm tỉ lệ 41%; đặc biệt, khơng có chương trình đào tạo thuộc khối ngành Nghệ thuật (khối ngành II) Còn lại, có 41 chương trình đào tạo thuộc khối ngành Khoa học giáo dục đào tạo giáo viên (khối ngành I), chiếm tỉ lệ 13%; 88 chương trình đào tạo thuộc khối ngành Kinh doanh quản lý, Pháp luật (khối ngành III), chiếm 29%; chương trình đào tạo thuộc khối ngành Khoa học sống, Khoa học tự nhiên (khối ngành IV), chiếm tỉ lệ 3%; 13 chương trình đào tạo thuộc khối ngành Sức khỏe (khối ngành VI), chiếm tỉ lệ 4%; 29 chương trình đào tạo thuộc khối ngành Nhân văn, Khoa học xã hội hành vi, Báo chí thơng tin, …(khối ngành VII), chiếm tỉ lệ 10% Số lượng chương trình đào tạo 140 120 100 80 60 40 20 Khối ngành I Khối ngành III Khối ngành IV Khối ngành V Khối ngành VI Khối ngành VII Hình 5: Phân loại chương trình đào tạo kiểm định đánh giá/công nhận theo khối ngành (Nguồn: Tổng hợp từ liệu phân tích, 2020) © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM 253 2.2 Phân loại chương trình theo cấp độ tính chất đào tạo Các chương trình đào tạo phân loại theo cấp độ đào tạo (sau đại học/đại học) theo tính chất đào tạo (tiên tiến, chất lượng cao) Kết phân tích cho thấy, theo cấp độ đào tạo, hầu hết chương trình đào tạo đại học chiếm đa số, 289 chương trình chiếm tỉ lệ 94%, chương trình đào tạo sau đại học chiếm phần nhỏ, 18 chương trình chiếm tỉ lệ 6% (Hình 6) Dữ liệu thuộc bảng danh sách qua phân tích cho thấy hầu hết chương trình đào tạo tham gia kiểm định, phân loại theo tính chất, chương trình thơng thường, với 280 chương trình; chương trình đào tạo chất lượng cao có 19 chương trình, chương trình đào tạo tiên tiến có chương trình (Hình 7) Sau đại học 6% Thơng thường Chất lượng cao 94% Đại học Tiên tiến Sau đại học Đại học 100 200 300 Hình 6: Phân loại chương trình theo cấp độ đào tạo Hình 7: Phân loại chương trình theo tính chất đào tạo (Nguồn: Tổng hợp từ liệu phân tích, 2020) 2.3 Phân loại chương trình theo tổ chức đánh giá Bảng 2: Danh sách tổ chức kiểm định chất lượng nước Stt Tên viết tắt VNU-CEA VNU-HCM CEA CEA-UD CEA-AVU&C VU-CEA AUN-QA CTI ABET ACBSP 10 FIBAA 11 AMBA 12 IACBE 13 ENAEE 14 HCERES Tên tổ chức Trung tâm Kiểm định chất lượng giáo dục - Đại học quốc gia Hà Nội Trung tâm Kiểm định chất lượng giáo dục - Đại học quốc gia TP Hồ Chí Minh Trung tâm Kiểm định chất lượng giáo dục - Đại học Đà Nẵng Trung tâm Kiểm định chất lượng giáo dục - Hiệp hội trường đại học, cao đẳng Việt Nam Trung tâm Kiểm định chất lượng giáo dục - Trường Đại học Vinh ASEAN University Network - Quality Assurance (Mạng lưới đảm bảo chất lượng trường đại học ASEAN) Commission des Titres d'Ingénieur (Ủy ban văn kỹ sư Pháp) Accreditation Board for Engineering and Technology (Hội đồng kiểm định kỹ thuật công nghệ, Hoa Kỳ) Accreditation Council for Business Schools and Programs (Hội đồng kiểm định trường chương trình đào tạo kinh doanh, Hoa Kỳ) Foundation for International Business Administration Accreditation (Quỹ kiểm định chương trình quản trị kinh doanh quốc tế) Association of MBAs (Hiệp hội MBA) International Accreditation Council for Business Education (Hội đồng kiểm định quốc tế trường đại học đào tạo ngành Kinh doanh) European Network for Accreditation of Engineering Education (Mạng lưới kiểm định đào tạo kỹ thuật châu Âu) Hội đồng cấp cao đánh giá nghiên cứu giáo dục đại học Pháp (Nguồn: Cục Quản lý chất lượng, BGDĐT, 2020) © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh 254 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM Tính đến 30/6/2020, có 14 tổ chức kiểm định chất lượng giáo dục nước tham gia đánh giá cấp giấy chứng nhận chương trình đào tạo đạt chất lượng yêu cầu theo tiêu chuẩn theo quy định Nhà nước (đối với tổ chức nước) tổ chức cơng bố (đối với tổ chức nước) Danh sách cho thấy đa số trường hợp thường chương trình kiểm định tổ chức (Bảng 2) Một số chương trình, ngược lại, nhiều tổ chức tham gia đánh giá nối tiếp Giấy chứng nhận/công nhận kết kiểm định hết giá trị Kết phân tích cho thấy phân bổ chương trình đào tạo đánh giá/cơng nhận tổ chức kiểm định trình bày Hình HCERES ENAEE IACBE AMBA FIBAA ACBSP ABET CTI AUN-QA VU-CEA CEA-AVU&C CEA-UD VNU-HCM CEA VNU-CEA 20 40 60 80 100 120 140 160 Số lượng chương trình Hình 8: Các tổ chức ngồi nước kiểm định 307 chương trình đào tạo tính đến 30/6/2020 (Nguồn: Tổng hợp từ liệu phân tích, 2020) Hình cho thấy Trung tâm Kiểm định chất lượng giáo dục - Đại học quốc gia Hà Nội (VNU-CEA) Trung tâm Kiểm định chất lượng giáo dục - Đại học quốc gia TP Hồ Chí Minh (VNU-HCM CEA) tổ chức nước Mạng lưới đảm bảo chất lượng trường đại học ASEAN (AUN-QA) tổ chức ngồi nước tham gia kiểm định nhiều chương trình đào tạo nhất; cụ thể, 74 chương trình đào tạo VNU-CEA kiểm định (24%), 36 chương trình đào tạo VNU-HCM CEA kiểm định (12%), 148 chương trình đào tạo AUN-QA kiểm định (48%) Tổng cộng tổ chức tham gia kiểm định 84% tổng số 307 chương trình đào tạo Dữ liệu cho thấy xếp tổ chức kiểm định thành nhóm Tổ chức kiểm định nước Tổ chức kiểm định ngồi nước tỉ lệ chương trình đánh giá cơng nhận tương ứng gần 40% (121 chương trình) 60% (186 chương trình) Kết hợp liệu nhóm tổ chức kiểm định (trong nước nước) với liệu nhóm loại hình CSGDĐH (cơng lập tư thục), kết phân tích cho thấy có khác biệt đáng lưu ý (Bảng Hình 9) Cụ thể, CSGDĐH cơng lập lại có số lượng chương trình đào tạo kiểm định Tổ chức kiểm định nước nhiều gấp rưỡi số lượng chương trình đào tạo kiểm định Tổ chức kiểm định nước (176 so với 100) Trong CSGDĐH tư thục, ngược lại, có số lượng chương trình đào tạo kiểm định Tổ chức kiểm định nước nhiều gấp đôi số lượng chương trình đào tạo kiểm định Tổ chức kiểm định nước (21 so với 10) Bảng 3: Thống kê chéo theo tổ chức kiểm định trong/ngoài nước hình thức CSGDĐH cơng lập/tư thục Tổ chức kiểm định nước Tổ chức kiểm định nước Tổng cộng CSGDĐH công lập 100 176 276 CSGDĐH tư thục 21 10 31 Tổng cộng 121 186 307 (Nguồn: Tổng hợp từ liệu phân tích, 2020) © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM 255 Số lượng chương trình đào tạo Ngoài nước: 176 Trong nước: 100 Trong nước: 21 CSGDĐH Cơng lập Ngồi nước: 10 CSGDĐH Tư thục Hình 9: Thống kê chéo theo tổ chức kiểm định trong/ngoài nước hình thức CSGDĐH cơng lập/tư thục (Nguồn: Tổng hợp từ liệu phân tích, 2020) Xét khía cạnh khác, phân tích kết hợp liệu nhóm tổ chức kiểm định (trong nước ngồi nước) với liệu phân loại CSGDĐH theo vùng địa lý (Trung du miền núi phía Bắc, Đồng sông Hồng, Bắc Trung Bộ Duyên hải miền Trung, Đông Nam Bộ, Đồng sông Cửu Long) để tìm hiểu mối quan hệ, kết cho thấy có khác biệt đáng quan tâm thực trạng kiểm định chương trình (Bảng 4) Cụ thể, phía Bắc CSGDĐH vùng Đồng sơng Hồng có số lượng chương trình đào tạo Tổ chức kiểm định nước đánh giá/công nhận nhiều (39/121); phía Nam, CSGDĐH vùng Đơng Nam Bộ có số lượng chương trình đào tạo Tổ chức kiểm định ngồi nước đánh giá/cơng nhận nhiều (108/186) Bảng 4: Thống kê chéo theo tổ chức kiểm định trong/ngoài nước theo vùng địa lý Tổ chức kiểm định nước Tổ chức kiểm định ngồi nước Tổng cộng Trung du, miền núi phía Bắc 28 28 Đồng sông Hồng 39 45 84 Bắc Trung Bộ, Duyên hải miền Trung 13 22 35 Đông Nam Bộ 29 108 137 Đồng sông Cửu Long 12 11 23 Tổng cộng 121 186 307 (Nguồn: Tổng hợp từ liệu phân tích, 2020) 2.4 Phân loại chương trình theo thời gian Hình 10 cho thấy từ năm 2004 có chương trình đào tạo thực kiểm định Các năm sau đó, số lượng chương trình đào tạo thực kiểm định tăng dần theo thời gian Năm 2019 có số lượng chương trình tham gia đạt kết kiểm định nhiều tính từ năm 2004 với 132 chương trình Điều hiểu mà Thông tư số 12/2017/TT-BGDĐT Quy định kiểm định chất lượng CSGDĐH thức có hiệu lực thi hành kể từ ngày 04/07/2017 xem “tối hậu thư” cho viện/trường [7] Đây năm mà Luật sửa đổi, bổ sung số điều Luật Giáo dục đại học bắt đầu có hiệu lực Nghị định 99/2019/NĐ-CP hướng dẫn Luật Giáo dục đại học (sửa đổi) bắt đầu thực thi Hình 11 cho thấy năm 2010 có chương trình đào tạo mà giấy chứng nhận kiểm định hết giá trị tham gia kiểm định từ sớm Các chương trình này, sau đó, tiếp tục tham gia kiểm định tổ chức kiểm định trước đó, tổ chức kiểm định đó, tiếp tục có mặt danh sách Số liệu phân tích cho thấy đến năm 2024, khoảng 1/3 chương trình đào tạo (95 chương trình cơng nhận năm 2019) hết công nhận kết kiểm định Do vậy, năm 2023 có © 2020 Trường Đại học Công nghiệp thành phố Hồ Chí Minh 256 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM “chạy đua” trường nhằm chuẩn bị cho việc tái kiểm định 2024 (Các chứng nhận chương trình đào tạo đạt tiêu chuẩn kiểm định thường có thời hạn định, ví dụ theo chuẩn Việt Nam năm, AUN-QA năm, ABET năm, v.v… [8][9][10]) Hiện có chương trình danh sách có thời điểm giấy chứng nhận/cơng nhận kết kiểm định hết giá trị vào năm 2027 Hình 10: Thời điểm bắt đầu đánh giá chương trình Số lượng chương trình Số lượng chương trình 100 90 80 70 60 50 40 30 20 10 2005 2010 2015 2020 2025 2030 Hình 11: Thời điểm cơng nhận chương trình hết giá trị 2.5 Kết đánh giá/công nhận theo tiêu chuẩn tổ chức kiểm định nước Bản danh sách chương trình đào tạo đánh giá/công nhận đạt tiêu chuẩn kiểm định chất lượng Cục Quản lý chất lượng - BGDĐT cập nhập đến ngày 30/6/2020 cho thấy kết đánh giá/công nhận thể điểm số phần trăm chương trình đào tạo tổ chức kiểm định nước kiểm định; riêng chương trình đào tạo tổ chức kiểm định ngồi nước kiểm định danh sách lại thể kết “Đạt” hay “Không đạt” tổ chức sử dụng thang đo tính điểm đánh giá (ví dụ ABET dùng thang đo mức, AUN-QA dùng thang đo mức) Do vậy, việc phân tích Kết đánh giá/cơng nhận thực chương trình đào tạo đăng ký kiểm định theo tiêu chuẩn tổ chức kiểm định nước Bảng trình bày kết phân tích mơ tả liệu phần mềm SPSS Kết phân tích cho thấy tổng số 121 chương trình, kết thấp đạt 80% kết cao 98% với mức chênh lệch hai kết 18% Kết đánh giá/cơng nhận trung bình 88% - gần tương đương với giá trị Mode, với độ lệch chuẩn kết kiểm đánh giá/công nhận chương trình khoảng 4,5% phương sai 20% Bảng 5: Thống kê mô tả Kết đánh giá/cơng nhận 121 chương trình theo chuẩn nước Kết đánh giá/ cơng nhận Số lượng chương trình Khoảng kết Giá trị nhỏ Giá trị lớn Giá trị trung bình Giá trị trung vị 121 18,00 80,00 98,00 88,578 88 Giá trị Mode Độ lệch chuẩn Phương sai 86 90 4,512 20,363 (Nguồn: Tổng hợp từ liệu phân tích, 2020) Kết phân tích mơ tả liệu Kết đánh giá/cơng nhận cịn thể qua số liệu phân tích mơ tả tần số trình bày Bảng Hình 12 Kết cho thấy có 10 nhóm kết đánh giá/cơng nhận (xếp theo thứ tự từ thấp đến cao tính theo tỉ lệ phần trăm) kết đạt nhiều 86% 90% với số lượng 22 chương trình đào tạo Với kết đánh giá/cơng nhận 98% có (1) chương trình đạt © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM 257 Bảng 6: Thống kê mô tả Kết đánh giá/công nhận 121 chương trình theo chuẩn nước (tiếp) Stt 10 Kết đánh giá/công nhận (%) 80,00 82,00 84,00 86,00 88,00 90,00 92,00 94,00 96,00 98,00 Tổng cộng Tần số 9 22 15 22 17 12 121 Tỉ lệ phần trăm 5,8 7,4 7,4 18,2 12,4 18,2 14,0 5,8 9,9 0,8 100,0 Tỉ lệ phần trăm lũy kế 5,8 13,2 20,7 38,8 51,2 69,4 83,5 89,3 99,2 100,0 Tần số (Nguồn: Tổng hợp từ liệu phân tích, 2020) Giá trị tuyệt đối Hình 12: Biểu đồ tần suất Kết đánh giá/cơng nhận 121 chương trình theo chuẩn nước (Nguồn: Tổng hợp từ liệu phân tích, 2020) THẢO LUẬN Việc phân tích dựa sở thống kê mô tả cho thấy phần thực trạng xu hướng chương trình đào tạo đánh giá/công nhận theo danh sách cập nhập đến 30/6/2020 Cụ thể, 1) nhóm Trường đại học có tỉ lệ chương trình đánh giá/cơng nhận chất lượng nhiều (57%) nhóm Đại học vùng có tỉ lệ chương trình đánh giá/cơng nhận chất lượng (11%); 2) hầu hết chương trình đánh giá/công nhận chất lượng thuộc cấp độ đại học (94%), chương trình đào tạo đánh giá/công nhận chất lượng thuộc cấp độ đào tạo sau đại học chiếm tỉ lệ nhỏ (6%); bên cạnh đó, đa số chương trình tham gia kiểm định chương trình đào tạo thơng thường, số cịn lại chương trình đào tạo tiên tiến chất lượng cao; 3) chương trình đào tạo đánh giá/công nhận chất lượng phần nhiều tổ chức kiểm định nước Trung tâm Kiểm định chất lượng giáo dục - Đại học quốc gia Hà Nội (74/307) Trung tâm Kiểm định chất lượng giáo dục - Đại học quốc gia TP Hồ Chí Minh (36/307) tổ chức kiểm định nước Mạng lưới đảm bảo chất lượng trường đại học ASEAN tham gia đánh giá kiểm định (148/307); 4) năm 2019 có số lượng chương trình tham gia đạt kết kiểm định nhiều (132); dự kiến đến năm 2023 số lượng chương trình tham gia kiểm định tăng nhiều đến thời hạn tái kiểm định; 5) có kiểu kết đánh giá/công nhận đạt chất lượng theo tiêu chuẩn kiểm định tổ chức kiểm định nước “Đạt” hay “Khơng đạt”, đó, © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh 258 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM chương trình tham gia kiểm định tổ chức kiểm định nước có có khác biệt kết đánh giá/cơng nhận: tổng số 121 chương trình, kết đánh giá/công nhận thấp 80% cao 98% - chênh lệch 18%; kết đánh giá/cơng nhận trung bình 88% - gần tương đương với giá trị Mode, với độ lệch chuẩn khoảng 4,5% phương sai 20% Việc phân tích thêm cho kết tỉ lệ chương trình đào tạo đánh giá cơng nhận nhóm tổ chức kiểm định nước so với chương trình đào tạo đánh giá cơng nhận nhóm tổ chức kiểm định ngồi nước xấp xỉ 40 – 60 Trong CSGDĐH công lập có số lượng chương trình đào tạo kiểm định tổ chức kiểm định nước nhiều số lượng chương trình đào tạo kiểm định tổ chức kiểm định nước CSGDĐH tư thục lại ngược lại Có nhiều lý khác để giải thích cho tượng Tuy vậy, có số lý chung xem xét, CSGDĐH cơng lập, so với CSGDĐH tư thục, thường có nguồn lực tài mạnh hơn, nguồn lực giảng viên nguồn lực nghiên cứu có chất lượng tốt hơn; bên cạnh đó, mối quan hệ hoạt động hợp tác quốc tế nghiên cứu, đào tạo, kết nối doanh nghiệp mạnh hơn; cuối cùng, có lịch sử hình thành phát triển lâu (kinh nghiệm nghiên cứu, đào tạo hợp tác nhiều hơn) Một phát khác từ kết phân tích đề cập đến khác biệt liên quan đến vùng địa lý CSGDĐH, CSGDĐH phía Bắc nói chung có xu hướng lựa chọn tổ chức kiểm định nước kiểm định chương trình đào tạo CSGDĐH phía Nam lại có xu hướng lựa chọn tổ chức kiểm định nước Kết đánh giá/cơng nhận mang tính chất tham khảo chương trình đào tạo đánh giá/công nhận nhiều tổ chức kiểm định nước khác với xuất phát điểm, mục đích, đối tượng, tiêu chí, lực, nguồn lực, phương pháp tiếp cận khác CSGDĐH lẫn tổ chức kiểm định [15] Mặc dù vậy, thực tế cho thấy theo thời gian, tổ chức kiểm định nước dần hiệu chỉnh tiêu chí phương pháp kiểm định theo hướng tổ chức kiểm định nước thực hiện, đặc biệt tổ chức có tầm ảnh hưởng mang tính chất khu vực hay giới Thơng tư 12/2017/TT-BGDĐT Quy định Kiểm định chất lượng CSGDĐH BGDĐT ban hành với tiêu chuẩn đánh giá chất lượng xây dựng dựa tiêu chuẩn đánh giá Mạng lưới trường đại học ASEAN (AUN-QA) nhằm thực chủ trương Chính phủ đẩy mạnh công tác kiểm định chất lượng giáo dục theo hướng tiếp cận với khu vực quốc tế, góp phần nâng cao chất lượng giáo dục đại học bối cảnh Việt Nam hội nhập quốc tế ngày sâu rộng Bên cạnh đó, kết phân tích phản ảnh tương đồng xu hướng kiểm định chương trình đào tạo CSGDĐH Việt Nam với nước khu vực Đông Nam Á Úc việc tổ chức kiểm định nước tham gia kiểm định đánh giá/công nhận tỉ lệ lớn (đôi hầu hết) chương trình đào tạo; đồng thời, phát sinh chung vấn đề việc thống công nhận kết kiểm định tổ chức kiểm định khác thực [11] Cũng theo kết thống kê, số lượng chương trình đào tạo CSGDĐH Việt Nam đánh giá AUN-QA chiếm tỉ lệ cao so với chương trình đào tạo đánh giá các tổ chức kiểm định nước Kết phần thể tính hướng ngoại, định hướng nâng tầm quốc tế chương trình đào tạo nhằm bắt kịp xu hướng hội nhập Về bản, tiêu chuẩn AUN-QA tiêu chuẩn BGDĐT xây dựng giống nội hàm tiêu chí đánh giá Điểm khác biệt rõ rệt hai tiêu chuẩn chỗ cách đánh giá Trong tiêu chuẩn BGDĐT thiên kiểm định - theo nguyên tắc (rules-based) với mức điểm rõ ràng tiêu chuẩn AUN-QA lại vận hành theo góc độ nguyên lý (principles-based) Do vậy, việc lựa chọn tiêu chuẩn phù hợp với chương trình đào tạo vấn đề then chốt tham gia đánh giá/kiểm định Theo dự báo năm tới tình hình dịch bệnh COVID19 cịn diễn biến phức tạp, việc lựa chọn đánh giá chương trình đào tạo theo tiêu chuẩn AUN-QA gặp nhiều khó khăn Điều dẫn đến việc tỉ lệ chương trình đào tạo tham gia đánh giá tổ chức kiểm định nước tăng mạnh Một mặt khác, tỉ lệ chương trình đào tạo kiểm định theo tiêu chuẩn ABET chưa cao Nguyên nhân dẫn đến thực trạng giải thích liên quan đến cách thức kiểm định ABET như: ABET đánh giá số ngành nghề định, liên quan đến khoa học bản, kỹ thuật, công nghệ (STEM); việc chuẩn bị cho chương trình đánh giá cần bốn năm thực hiện; chương trình đào tạo cần có khóa sinh viên tốt nghiệp, tiếng Anh ngơn ngữ phải có chương trình đào tạo Do đó, chương trình đào tạo gặp khó khăn lựa chọn kiểm định theo tiêu chí Tương tự ABET, tổ chức kiểm định nước khác thường tập trung đánh giá lĩnh vực định (ví dụ FIBAA đánh © 2020 Trường Đại học Công nghiệp thành phố Hồ Chí Minh THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM 259 giá lĩnh vực liên quan đến kinh tế) Hệ tỉ lệ chương trình đào tạo tham gia kiểm định chất lượng theo tiêu chuẩn tổ chức kiểm định nước ngồi cịn thấp Một vấn đề khó khăn chung khác mà chương trình đào tạo gặp phải lựa chọn tiêu chuẩn nước giới hạn chuyên gia tư vấn nên dẫn đến việc hiểu rõ nội hàm tiêu chí việc triển khai gặp nhiều khó khăn Do đó, việc lựa chọn tiêu chuẩn phù hợp với nội lực chương trình đào tạo điều mà CSGDĐH cần quan tâm đối sánh nghiên cứu Một vấn đề đáng quan tâm liên quan đến việc kiểm định chương trình đào tạo CSGDĐH muốn mở ngành đào tạo trình độ đại học, thạc sĩ, tiến sĩ Điều 33 khoản Luật sửa đổi, bổ sung số điều Luật Giáo dục đại học 2018 có ghi: “… đạt chuẩn kiểm định chất lượng chương trình đào tạo trình độ đại học tự chủ mở ngành đào tạo trình độ thạc sĩ ngành phù hợp; đạt chuẩn kiểm định chất lượng chương trình đào tạo trình độ đại học, thạc sĩ tự chủ mở ngành đào tạo trình độ tiến sĩ ngành phù hợp, trừ ngành thuộc lĩnh vực sức khỏe, đào tạo giáo viên, quốc phòng, an ninh;…” Như đề cập phần đầu, thực áp lực coi trở ngại lớn CSGDĐH có nhu cầu mở ngành Số lượng chương trình đào tạo trình độ đại học, thạc sĩ, tiến sĩ, xét phạm vi nước, nhiều (chỉ riêng Trường Đại học Bách khoa – thành viên Đại học Quốc gia Thành phố Hồ Chí Minh có 34 ngành đào tạo đại học, bên cạnh chương trình đào tạo quy cịn có 11 ngành có chương trình Kỹ sư tài 15 ngành có chương trình Tiên tiến/ Chất lượng cao) [13] Tuy vậy, tính đến 30/6/2020 có 300 chương trình đào tạo kiểm định đánh giá/công nhận đạt chất lượng Cuối cùng, thực tế cho thấy bên cạnh xu hướng CSGDĐH đẩy mạnh việc kiểm định chương trình đào tạo theo tinh thần Luật sửa đổi, bổ sung số điều Luật Giáo dục đại học 2018 hoạt động kiểm định chất lượng sở giáo dục thực “rầm rộ” khơng Một số chun gia có ý kiến nhận xét tổ chức kiểm định nước CSGDĐH phía Bắc quan tâm nhiều đến việc kiểm định chất lượng sở giáo dục tổ chức kiểm định nước CSGDĐH phía Nam lại quan tâm nhiều đến việc kiểm định chất lượng chương trình đào tạo Giả thuyết từ chuyên gia đặt để giải thích khác biệt quan điểm đánh giá tổ chức kiểm định, theo đó, tổ chức kiểm định nước có xu hướng quan tâm nhiều đến minh chứng theo kiểu “trọng chứng trọng cung” tổ chức kiểm định nước ngồi lại có xu hướng quan tâm nhiều đến “tính thuyết phục hợp lý” hệ thống vận hành nội dung xây dựng chương trình đào tạo Những ý kiến xuất phát từ thực tế đáng quan tâm chắn cần có thêm nghiên cứu minh chứng cụ thể tương lai KẾT LUẬN Có thể thấy việc chuẩn bị thực kiểm định chương trình đào tạo trở thành xu hướng tất yếu hầu hết CSGDĐH, không phân biệt loại hình, cấp độ, lĩnh vực đào tạo theo tiêu chuẩn kiểm định hay nước Như đề cập phần đầu, kết kiểm định không giúp dần nâng cao vị sở đào tạo bối cạnh cạnh tranh ngày gay gắt lĩnh vực giáo dục, mà quan trọng hơn, việc chất lượng đào tạo thực coi trọng nhằm đáp ứng thực yêu cầu từ xã hội việc cung cấp nguồn nhân lực có chất lượng Quyết định sử dụng tiêu chuẩn để đánh giá/kiểm định phụ thuộc vào định hướng nội lực bên chương trình Các yếu tố thời gian, ngôn ngữ, nguồn lực, nguyên lý, v.v… cần đối sánh cụ thể, CSGDĐH/chương trình đào tạo đưa định lựa chọn Tuy vậy, cần lưu ý đến việc chạy theo thành tích hay trào lưu xuất xu hướng này, khơng làm giảm ý nghĩa tích cực cơng tác kiểm định mà cịn ảnh hưởng trực tiếp đến chất lượng đào tạo chương trình Kết nghiên cứu có ý nghĩa tham khảo định đặc biệt CSGDĐH có kế hoạch đăng ký tham gia kiểm định chương trình đào tạo thời gian tới Theo thời gian, có thêm nhiều CSGDĐH có chương trình đào tạo tham gia kiểm định đánh giá/công nhận bổ sung vào danh sách Đây tiền đề cho nghiên cứu liên quan đến chủ đề Với liệu thu thập nhiều với phạm vi rộng hơn, phân tích chuyên sâu kiểm định chất lượng chương trình đào tạo kết hợp với kiểm định chất lượng sở giáo dục thực tiếp, bổ sung cho kết nghiên cứu dạng tương lai © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh 260 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM TÀI LIỆU THAM KHẢO [1] Mạnh Xuân (17/9/2018) Kiểm định chất lượng, chuẩn hóa giáo dục đại học Báo Nhân dân điện tử Truy cập: https://nhandan.com.vn/tin-tuc-giao-duc/kiem-dinh-chat-luong-chuan-hoa-giao-duc-dai-hoc-335460/ [2] Bộ Giáo dục Đào tạo (3/6/2020) Danh sách chương trình đào tạo đánh giá/công nhận (cập nhật đến ngày 30/6/2020) [Trực tuyến] Trang Web Bộ GDĐT Truy cập: https://moet.gov.vn/tintuc/Pages/tin-tonghop.aspx?ItemID=6766 [3] Thu Hương (10/9/2019) Kiểm định chương trình đào tạo đại học Báo điện tử Đại đoàn kết Truy cập: http://daidoanket.vn/kiem-dinh-cac-chuong-trinh-dao-tao-dai-hoc-446891.html [4] Thùy Linh (11/9/2019) Kiểm định chất lượng giáo dục đại học nhiều bất cập Tạp chí điển tử Giáo dục Việt Nam Truy cập: https://giaoduc.net.vn/giao-duc-24h/kiem-dinh-chat-luong-giao-duc-dai-hoc-con-nhieu-bat-cappost202309.gd [5] Minh Giảng (30/6/2020) Thêm số chương trình đào tạo đại học đạt chuẩn kiểm định chất lượng Báo điện tử Tuổi trẻ Online Truy cập: https://tuoitre.vn/them-mot-so-chuong-trinh-dao-tao-dai-hoc-dat-chuan-kiem-dinh-chatluong-20200630095006119.htm [6] Bộ Giáo dục Đào tạo (7/5/2020) Thông tư 09/2020/TT-BGDĐT Quy chế tuyển sinh trình độ đại học [7] Bộ Giáo dục Đào tạo (12/5/2017) Thông tư 12/2017/TT-BGDĐT Quy định kiểm định chất lượng sở giáo dục đại học [8] Bộ Giáo dục Đào tạo (19/11/2013) Thơng tư số 38/2013/TT-BGDĐT Quy định quy trình chu kỳ kiểm định chất lượng chương trình đào tạo trường đại học, cao đẳng trung cấp chuyên nghiệp [9] ASEAN University Network-Quality Assurance (AUN-QA) Guidelines for AUN Quality Assessment and Assessors Truy cập: http://aunqa.org/views/front/pdf/publication/Green%20Book%20V2.0_Guidelines%20for%20AUN%20Quality%20Assessme nt%20and%20Assessors.pdf [10] ABET Accreditation Policy and Procedure Manual Truy cập: https://www.abet.org/wpcontent/uploads/2018/02/A001-18-19-Accreditation-Policy-and-Procedure-Manual-2-28-18.pdf [11] Fraser, J M., Teran, A., Pham, H T (2014) Path to Accreditaion Paper presented in 121st ASEE Annual Conference & Exposition, Indianapolis IN (Paper ID #9553, 15-18 June 2014) [12] Quốc hội CHXHCNVN (2018) Luật sửa đổi, bổ sung số điều Luật Giáo dục đại học số 34/2018/QH14, thơng qua ngày 19/11/2018 có hiệu lực từ ngày 01/07/2019 [13] Trường Đại học Bách khoa - Đại học Quốc gia Thành phố Hồ Chí Minh (2019) Chương trình đào tạo Truy cập: http://www.aao.hcmut.edu.vn/index.php?route=catalog/chitietsv&path=59_62&tid=473 [14] Lê Văn (11/8/2017) Những số “biết nói” giáo dục đại học Việt Nam Báo điện tử Vietnamnet Truy cập: https://vietnamnet.vn/vn/giao-duc/tuyen-sinh/nhung-con-so-biet-noi-ve-giao-duc-dai-hoc-viet-nam-389870.html [15] Đỗ Thị Ngọc Quyên (2017) Kiểm định chất lượng giáo dục: Quốc gia hay quốc tế, trường hay chương trình? Báo điện tử Vietnamnet Truy cập: https://vietnamnet.vn/vn/giao-duc/khoa-hoc/kiem-dinh-chat-luong-giao-duc-quocgia-hay-quoc-te-truong-hay-chuong-trinh-414409.html Ngày nhận bài: 14/07/2020 Ngày chấp nhận đăng: 10/11/2020 © 2020 Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh ... Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM 255 Số lượng chương trình đào tạo Ngồi... Trường Đại học Cơng nghiệp thành phố Hồ Chí Minh 258 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM chương trình tham gia kiểm định. .. Hồ Chí Minh 252 THỰC TRẠNG VÀ XU HƯỚNG KIỂM ĐỊNH CHẤT LƯỢNG CÁC CHƯƠNG TRÌNH ĐÀO TẠO CỦA CÁC CƠ SỞ GIÁO DỤC ĐẠI HỌC VIỆT NAM có số lượng chương trình đào tạo tham gia kiểm định công nhận/đánh

Ngày đăng: 14/06/2021, 10:25

TÀI LIỆU CÙNG NGƯỜI DÙNG

TÀI LIỆU LIÊN QUAN

w