Nghiên cứu đề xuất, hoàn thiện tiêu chí đánh giá chất lượng tài trợ nghiên cứu cơ bản (NCCB); sử dụng phương pháp phân tích nhân tố khám phá (EFA) và phân tích nhân tố khẳng định (CFA) để kiểm định thang đo tiêu chí đánh giá chất lượng tài trợ NCCB tại Quỹ Phát triển khoa học và công nghệ Quốc gia ở Việt Nam.
108 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… XÂY DỰNG HỆ THỐNG TIÊU CHÍ ĐÁNH GIÁ CHẤT LƯỢNG TÀI TRỢ NGHIÊN CỨU CƠ BẢN TẠI QUỸ PHÁT TRIỂN KHOA HỌC VÀ CÔNG NGHỆ QUỐC GIA VIỆT NAM Nguyễn Thị Phương1 Quỹ Phát triển khoa học cơng nghệ Quốc gia Tóm tắt: Nghiên cứu đề xuất, hồn thiện tiêu chí đánh giá chất lượng tài trợ nghiên cứu (NCCB); sử dụng phương pháp phân tích nhân tố khám phá (EFA) phân tích nhân tố khẳng định (CFA) để kiểm định thang đo tiêu chí đánh giá chất lượng tài trợ NCCB Quỹ Phát triển khoa học công nghệ Quốc gia Việt Nam Kết nghiên cứu xác định tiêu chí chất lượng tài trợ NCCB gồm tiêu chí thành phần: (1) Mức độ phù hợp; (2) Hiệu tài trợ; (3) Hiệu suất tài trợ; (4) Tác động tài trợ; (5) Mức độ bền vững tài trợ; (6) Kết đạt sau tài trợ, với 29 biến quan sát Kết nghiên cứu cung cấp hiểu biết rõ tiêu chí đánh giá chất lượng tài trợ NCCB cho nghiên cứu tiếp theo, đồng thời, cung cấp sở cho việc đánh giá chất lượng tài trợ NCCB Quỹ Phát triển KH&CN Quốc gia Việt Nam Từ khóa: Chất lượng tài trợ nghiên cứu bản, EFA, CFA, Quỹ NAFOSTED Mã số: 21121402 ESTABLISHMENT OF CRITERIA FOR QUALITY EVALUATION SYSTEM OF BASIC RESEARCH FUNDING AT VIET NAM NATIONAL FOUNDATION FOR SCIENCE AND TECHNOLOGY DEVELOPMENT Abstract: Exploratory factor analysis (EFA) and Confirmatory factor analysis (CFA) was employed to examine the quality scale of basic research funding at the National Foundation for Science and Technology Development in Vietnam The research results have determined the basic research funding quality scale with components: (1) Relevancy; (2) Funding effectiveness; (3) Funding efficiency; (4) Impact sponsorship activities; (5) Sustainability of sponsorship; and (6) results achieved after sponsorship with 29 observed variables The research results provide a theoretical model for the evaluation scale of basic research funding quality for further studies, and at the same time provide a basis for evaluating the quality of basic research funding at the National Foundation for Science and Technology Development in Vietnam Keywords: The basic research funding quality; EFA; CFA, NAFOSTED fund Tổng quan nghiên cứu Tài trợ cho NCCB có vai trị quan trọng xã hội, NCCB bổ sung tri thức cho nhân loại giải mã dần bí ẩn sống xung Liên hệ tác giả: fionaphuong83@gmail.com JSTPM Tập 10, Số 4, 2021 109 quanh, giúp hiểu biết nhiều vận động tự nhiên xã hội Ngoài ra, kết NCCB xem tiền đề quan trọng cho nghiên cứu ứng dụng, cải tiến cơng nghệ, giúp người giải phóng sức lao động tiến tới văn minh nhân loại Những năm gần đây, hoạt động NCCB quan tâm mạnh mẽ, nhiều quốc gia giành phần kinh phí tương đối lớn từ ngân sách nhà nước để tài trợ khơng hồn lại cho hoạt động NCCB, nhiều kết nghiên cứu khoa học công bố sau giai đoạn phát triển khoa học chúng tạo bứt phá lớn mang lại thành công cách mạng KH&CN cho nhân loại Chính thế, từ năm 1950 Thế kỷ XIX, quốc gia có kinh tế phát triển định hướng đầu tư ưu tiên cho hoạt động NCCB như: Hoa Kỳ, Anh, Trung Quốc, Nhật Bản Tại Việt Nam, Chính phủ phê duyệt kinh phí tài trợ cho NCCB cách quy mô năm 2001 thông qua chương trình NCCB cấp Nhà nước Để tiến tới hội nhập quốc tế KH&CN, năm 2003, Chính phủ ban hành Nghị định số 122/NĐ-CP ngày 22/10/2003 thành lập Quỹ Phát triển KH&CN Quốc gia, xem minh chứng cho việc tiếp cận đầu tư cho NCCB Việt Nam theo hướng hội nhập quốc tế nghiên cứu khoa học Bên cạnh kết thu KH&CN, mục tiêu Quỹ hướng tới việc xây dựng môi trường học thuật NCCB tiếp cận với tiêu chuẩn quốc tế, nâng cao chất lượng đào tạo nguồn nhân lực khoa học kế cận, thiết yếu, góp phần nâng cao tiềm lực quốc gia Cùng với trình phát triển kinh tế-xã hội, chất lượng tài trợ NCCB ngày trở thành mối quan tâm cộng đồng xã hội tất lĩnh vực Chất lượng tài trợ NCCB thực trở thành nhân tố định lực cạnh tranh phát triển quốc gia nói chung tổ chức nói riêng Trong nhiều năm qua, việc bảo đảm chất lượng kiểm định chất lượng trình tổ chức, điều hành hoạt động, đánh giá đầu vào kết đầu không áp dụng rộng rãi doanh nghiệp sản xuất mà áp dụng ngày nhiều vào lĩnh vực giáo dục, nghiên cứu KH&CN (Bùi Minh Đức cộng sự, 2019) Tài trợ cho NCCB thông qua quỹ khoa học hình dung việc việc sử dụng ngân sách nhà nước thơng qua mơ hình quỹ đầu tư cơng cho hoạt động NCCB, tổ chức thực việc tài trợ cho NCCB từ NSNN nguồn huy động xã hội khác khơng mục đích lợi nhuận nhằm đạt mục tiêu quản lý nhà nước NCCB theo giai đoạn Đa phần quỹ khoa học có cách thức tổ chức đa dạng loại hình tài trợ, đó, NCCB quản lý chương trình KH&CN cấp độ quốc gia Quỹ Phát triển KH&CN Quốc gia Việt Nam khơng ngoại lệ, chương trình NCCB khoa học tự nhiên kỹ thuật (KHTN&KT) có tiền thân chương trình NCCB KHTN cấp Nhà nước giai đoạn từ năm 2001 đến năm 2005 (Quyết định số 82/2001/QĐ/TTg ngày 24/5/2001 Thủ tướng Chính phủ phê duyệt phương hướng, mục tiêu, nhiệm vụ khoa học công nghệ chủ yếu danh mục chương trình khoa học công nghệ trọng điểm cấp 110 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… Nhà nước giai đoạn năm 2001-2005 Thủ Tướng Chính Phủ ban hành) Khi Nghị định số 122/NĐ-CP ngày 22/10/2003 Chính phủ việc thành lập Quỹ Phát triển KH&CN Quốc gia (NAFOSTED) ban hành, chương trình NCCB KHTN thức chuyển sang tài trợ Quỹ NAFOSTED đổi tên thành chương trình NCCB hai lĩnh vực KHTN&KT khoa học xã hội nhân văn Để đánh giá chất lượng tài trợ NCCB mục tiêu nghiên cứu cần hướng tới mục tiêu hoàn thiện hệ thống tiêu chí đánh giá chất lượng tài trợ NCCB, việc xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ NCCB xác định đặt bối cảnh tài trợ từ Quỹ Phát triển KH&CN Quốc gia Việt Nam, vậy, nghiên cứu chất lượng tài trợ NCCB tác giả tìm hiểu phương pháp luận đánh giá chương trình KH&CN, khái niệm “chương trình KH&CN” Nghị định số 08/2014/NĐ-CP ngày 27/01/2014 Chính phủ Quy định chi tiết hướng dẫn thi hành số điều Luật Khoa học Công nghệ, theo mục Điều phần giải thích từ ngữ: chương trình KH&CN hiểu “chương trình KH&CN nhiệm vụ KH&CN có mục tiêu chung giải vấn đề KH&CN phục vụ phát triển ứng dụng KH&CN trung hạn dài hạn triển khai hình thức tập hợp đề tài KH&CN, dự án sản xuất thử nghiệm, dự án KH&CN” Do đó, việc đánh giá chương trình KH&CN việc xem xét cách có hệ thống khách quan hoạt động chương trình, bao gồm việc thực kết đạt chương trình Việc đánh giá chất lượng tài trợ NCCB việc xác định chất lượng chương trình tài trợ NCCB cách so sánh chương trình với tiêu chuẩn chất lượng định Những tiêu chuẩn chất lượng tổ chức kiểm định chất lượng chương trình KH&CN xây dựng nghiên cứu nhà khoa học đề xuất Trong trình tổng quan tài liệu, tác giả nhận thấy chưa có thống khái niệm chất lượng tài trợ NCCB, nghiên cứu nhận diện nội hàm khái niệm chất lượng tài trợ NCCB theo hướng: “chất lượng tài trợ NCCB hiểu mức độ thỏa mãn mục tiêu tài trợ cho NCCB phạm vi chuẩn mực chấp nhận cơng khai” Trong đó, việc thơng qua tiêu chí đánh giá gồm: phù hợp, hiệu quả, hiệu suất, kết quả, tác động mức độ bền vững tài trợ Để xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ NCCB dạng chương trình, nghiên cứu tổng quan cách tiếp cận tiêu đánh giá chương trình KH&CN Các nhà khoa học, nhà quản lý sử dụng kết nghiên cứu tài liệu tham khảo xây dựng, vận hành hay tìm hiểu chất lượng tài trợ NCCB sau Theo nguyên tắc đánh giá bảng xếp hạng trường đại học giới (QS World University Rankings, 2021) theo nguyên tắc xếp hạng từ Tổ chức Sở hữu trí tuệ giới (WIPO, 2020), hai sản phẩm điển hình từ NCCB nhân lực nghiên cứu khoa học công bố kết nghiên cứu khoa JSTPM Tập 10, Số 4, 2021 111 học tạp chí khoa học quốc tế chuyên ngành uy tín đánh giá hai số tiêu chí có trọng số lớn bảng đánh giá, xếp loại, số phản ánh số phát triển trình độ khoa học, cơng nghệ tri thức quốc gia Chính thế, phát triển mạnh mẽ NCCB nguồn nhân lực nghiên cứu khoa học xem mục tiêu nhắm tới nhiều quốc gia thông qua kênh tài trợ từ Quỹ khoa học giới Trên giới, năm 1993, thực Luật Thực Kết Chính phủ, Hoa Kỳ ban hành tiêu chí đánh giá chương trình KH&CN gồm: phù hợp, chất lượng kết Để giải vấn đề đo lường nghiên cứu thực đánh giá chương trình, NCCB Hoa Kỳ đề nghị tổ chức đánh giá phù hợp, chất lượng dẫn đầu trình độ nghiên cứu Peter H Rossi cộng (2003) xây dựng phương pháp luận đánh giá chương trình KH&CN, sở phương pháp luận đánh giá chương trình KH&CN quốc gia như: CHLB Đức, Hàn Quốc, Trung Quốc nhiều quốc gia khác tiến hành đánh giá chương trình KH&CN với mục đích điều chỉnh kịp thời điểm yếu trình thực chương trình, chất lượng chương trình, quan trọng để có sở thực tiễn trước đưa định việc điều chỉnh sách đầu tư cơng cho chương trình KH&CN Trong bối cảnh tài trợ cơng cho NCCB Việt Nam, tổ chức tài trợ phải đối mặt với hạn chế kinh phí tài trợ, điều kiện môi trường nghiên cứu khoa học Do đó, làm để đảm bảo chất lượng tài trợ NCCB tốt nhất, tối ưu kinh phí tài trợ từ nguồn NSNN để thực mục tiêu đề vấn đề Việt Nam quan tâm Nghiên cứu hướng tới việc: (1) Hồn thiện tiêu chí đo phù hợp để đánh giá chất lượng tài trợ NCCB Việt Nam; (2) Kiểm định thang đo chất lượng tài trợ NCCB lĩnh vực KHTN&KT Việt Nam Nghiên cứu kiểm định thang đo tiêu chí chất lượng tài trợ NCCB với tính chất khởi đầu cho việc đánh giá chất lượng tài trợ NCCB Quỹ Phát triển KH&CN Quốc gia Việt Nam hy vọng cung cấp cho nhà nghiên cứu khoa học hiểu rõ thang đo tiêu chí đánh giá chất lượng tài trợ NCCB, đồng thời, định hướng nâng cao chất lượng tài trợ NCCB lĩnh vực KHTN&KT, hoàn thành sứ mệnh nâng cao chất lượng kết đầu sau tài trợ NAFOSTED giai đoạn tới Phương pháp nghiên cứu 2.1 Hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu Luật Thực Kết Chính phủ Hoa Kỳ - GPRA (1993) sử dụng tiêu chí: (1) Sự phù hợp; (2) Chất lượng; (3) Sự dẫn đầu trình độ nghiên cứu để đo lường nghiên cứu thực đánh giá chương trình NCCB Hoa Kỳ Sau đó, để cụ thể hóa việc đo lường, Hoa Kỳ công bố công cụ để đánh giá chương trình KH&CN với việc sử dụng 112 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… tiêu chí: (1) Mục tiêu thiết kế chương trình; (2) Kế hoạch chiến lược; (3) Quản lý chương trình; (4) Kết chương trình, để đo lường chương trình KH&CN sử dụng từ 25 đến 28 biến quan sát tùy vào loại chương trình KH&CN với mục tiêu cải tiến trình phân bổ ngân sách cách hệ thống có ý nghĩa (PART, 2002) Phương pháp luận đánh giá chương trình KH&CN Peter H Rossi cộng (2003) xây dựng theo nhóm tiêu chí: (1) Sự cần thiết phải xây dựng chương trình; (2) Đánh giá thiết kế logic/lý thuyết; (3) Quá trình thực có tối đa hóa thành khơng; (4) Các chi phí hiệu chương trình kết quả; (5) Tác động chương trình đạt Tại Việt Nam, để vận dụng phương pháp luận Peter H Rossi cộng (2003), tác giả Nguyễn Thị Thu Oanh (2015) nghiên cứu phương pháp luận đánh giá chương trình KH&CN áp dụng thí điểm chương trình KC02 đề xuất 08 tiêu chí 24 biến quan sát: (1) Sự phù hợp gồm biến quan sát; (2) Nguồn lực đề thực gồm biến quan sát; (3) Quản lý chương trình gồm biến quan sát; (4) Kết khoa học gồm biến quan sát; (5) Kết công nghệ gồm biến quan sát; (6) Chuyển giao thương mại hóa kết KH&CN gồm biến quan sát; (7) Tác động lực tiềm lực KH&CN gồm biến quan sát; (8) Tác động kinh tế xã hội gồm biến quan sát Mai Trọng Nhuận cộng (2019) xây dựng tiêu chí gồm tiêu chí với 20 biến quan sát: (1) Hiệu KH&CN gồm 12 biến quan sát; (2) Hiệu nguồn lực thực gồm 04 biến quan sát; (3) Hiệu đào tạo gồm 04 biến quan sát Trong nghiên cứu Việt Nam, nghiên cứu Mai Trọng Nhuận cộng (2019) xây dựng tiêu chí thiên việc đánh giá định lượng giá trị thuộc kết đầu nhiều hiệu KH&CN, hiệu nguồn lực hiệu đào tạo nghiên cứu Nguyễn Thị Thu Oanh (2015) có kết hợp định tính định lượng Các tiêu chí Nguyễn Thị Thu Oanh đưa nhằm đánh giá chương trình KH&CN theo hướng tiếp cận đánh giá chương trình KH&CN hồn chỉnh Mặc dù vận dụng phương pháp luận Peter H Rossi cộng (2003) với tên gọi khác hầu hết tiêu chí đánh giá chương trình KH&CN có điểm chung định, theo ý kiến tư vấn chuyên gia điểm chung chương trình KH&CN thể thơng qua đặc điểm sau: (1) Sự phù hợp chương trình; (2) Đánh giá chi phí hiệu chương trình; (3) Quản lý chương trình, chuyển giao thương mại hóa kết nghiên cứu khoa học; (4) Đánh giá kết tác động mà chương trình đạt (trong đó, kết chia làm hai loại kết khoa học kết công nghệ, tác động chia làm hai loại tác động lực tiềm lực KH&CN tác động kinh tế xã hội) Trong đó, bàn luận tiêu chí đánh giá kết tác động chuyên gia cho kết NCCB mang tính đặc thù JSTPM Tập 10, Số 4, 2021 113 khó thương mại hóa, đem lại giá trị ứng dụng (hầu hết kết khoa học giá trị tri thức đánh giá nhiều thông qua công bố khoa học đào tạo sau đại học); bàn luận tác động từ NCCB với kinh tế xã hội, nghiên cứu Morris cộng (2011) đánh giá thời gian cần thiết để chuyển từ kết NCCB sang nghiên cứu ứng dụng trung bình từ 17 năm sau thời điểm kết NCCB cơng bố Điều cho thấy, việc đánh giá chất lượng NCCB khó khăn thực tế Như vậy, đánh giá tác động từ tài trợ NCCB nên khu trú vào đánh giá tác động lực tiềm lực KH&CN Do vậy, hệ tiêu chí vận dụng cho NCCB khu trú theo tiêu chí thành phần sau: Thứ nhất, tiêu chí phù hợp: nghiên cứu Peter H Rossi cộng (2003), Nguyễn Thị Thu Oanh (2015) tiêu chí PART (2002), luận giải cho phù hợp chất lượng tài trợ NCCB, phù hợp chất lượng tài trợ NCCB hiểu phù hợp mục tiêu chung chất lượng tài trợ NCCB với mục tiêu cụ thể chất lượng tài trợ ngành, lĩnh vực NCCB đảm bảo tính kế thừa hoạt động tài trợ theo giai đoạn quy mơ kinh phí khả thi Thứ hai, tiêu chí hiệu tài trợ: nghiên cứu Mandl cộng (2008), Mai Trọng Nhuận cộng (2019), Albert BanalEstañola cộng (2019), PART (2002); Peter H Rossi cộng (2003); Nguyễn Thị Thu Oanh (2015) vận dụng cho hiệu tài trợ NCCB Trong bối cảnh này, hiệu tài trợ NCCB biểu thông qua giá trị so sánh kết đạt tài trợ NCCB với kinh phí tài trợ ban đầu mục tiêu kết cần đạt được, kết đánh giá thể qua báo cáo đầu tổ chức tài trợ có số liệu tài chính, số lượng đề tài, số lượng đơn vị nhóm nghiên cứu tham gia thực NCCB Thứ ba, tiêu chí hiệu suất tài trợ NCCB: nghiên cứu Mandl & cộng (2008) vận dụng hiệu suất tài trợ NCCB hiệu suất tài trợ NCCB thể thông qua mức độ đạt đầu so với đầu vào, tiến độ thực phân tích nguyên nhân chậm tiến độ, công tác quản lý khâu quy trình quản lý từ tuyển chọn, tài trợ, kiểm tra, nghiệm thu, lý, cấp kinh phí mơ hình tài trợ, quản lý tài trợ NCCB để tìm điểm mạnh, điểm yếu mức độ hợp lý quy trình tài trợ Thứ tư, tiêu chí tác động tài trợ NCCB: nghiên cứu Benedetto Lepori cộng (2018) PART (2002); Peter H Rossi cộng (2003); Nguyễn Thị Thu Oanh (2015) Sổ tay Quản lý dựa vào kết Liên Hợp quốc phát hành năm 2011, tác động tài trợ NCCB hiểu thay đổi/các ảnh hưởng tích cực, hạn chế tức thời lâu dài việc hoạt động tài trợ NCCB với phát triển chung chất lượng 114 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… tài trợ NCCB, lợi ích trực tiếp nhóm nghiên cứu, lợi ích quản lý, cho phát triển kinh tế-xã hội, cho mối quan hệ việc liên kết nghiên cứu nước Khi tham khảo ý kiến chuyên gia NCCB “tác động tài trợ NCCB” chất giải thích phản ánh tác động đầu tư “thay đổi tích cực” “những thay đổi tiêu cực”, “những thay đổi trực tiếp” “những thay đổi gián tiếp” từ hoạt động tài trợ đến nhà khoa học tổ chức nghiên cứu cộng đồng khoa học thực NCCB Thứ năm, tiêu chí mức độ bền vững tài trợ NCCB: Các chuyên gia NCCB làm rõ mức độ bền vững tài trợ NCCB mức độ lâu dài, liên tục hoạt động tài trợ gắn liền với lợi ích từ kết NCCB đem lại cho khoa học, cho xã hội Thứ sáu, tiêu chí kết sau tài trợ NCCB: Theo tài liệu Frascati (2002) Tổ chức hợp tác phát triển kinh tế (OECD) nghiên cứu phát triển (R&D) phân làm loại gồm: NCCB, nghiên cứu ứng dụng, phát triển thực nghiệm Theo tài liệu, loại hình phát triển thực nghiệm hoạt động mang tính hệ thống, dựa vào kiến thức nhận từ nghiên cứu kinh nghiệm thực tiễn, hướng tới việc tạo quy trình, hệ thống, dịch vụ mới; hoàn thiện đáng kể sản phẩm sản xuất lắp đặt nghiên cứu ứng dụng, kết chủ yếu nhằm đem lại giá trị cho lượng hạn chế sản phẩm, nguyên công, phương pháp hệ thống, nghiên cứu ứng dụng đem lại hình thức vận dụng ý tưởng Nếu giai đoạn nghiên cứu ứng dụng phát triển thực nghiệm tri thức thông tin thường cấp sáng chế giữ bí mật, giai đoạn NCCB tri thức hầu hết tồn dạng báo khoa học đăng tải tạp chí khoa học trao đổi với đồng nghiệp thông qua báo cáo hội nghị hội thảo chuyên ngành nhằm mở rộng tri thức, đó, NCCB sản phẩm thường biết đến nhiều công bố khoa học chuyên ngành uy tín Theo quy định tài trợ NAFOSTED (2015) chất lượng kết sau tài trợ quan tâm khía cạnh như: đề tài thực đủ số lượng kết đăng ký; đảm bảo chất lượng kết sau tài trợ theo yêu cầu tổ chức tài trợ thực kết nghiên cứu thời gian thực hợp đồng Do đó, theo tư vấn chuyên gia NCCB kết sau tài trợ NCCB tập trung đánh giá thông qua số số lượng, chất lượng công bố khoa học khuyến khích đào tạo sau đại học thời gian thực hợp đồng Có thể thấy rằng, hầu hết tiêu chí đo lường chất lượng tài trợ NCCB thể tiêu chí đánh giá PART (2002); Peter H Rossi cộng (2003); Nguyễn Thị Thu Oanh (2015) Vì thế, nghiên cứu định sử dụng hệ tiêu chí đo lường gồm tiêu chí với hiệu chỉnh quan sát cho phù hợp với đặc điểm NCCB lĩnh vực Khoa học Tự nhiên Kỹ thuật Hệ tiêu chí đo lường gồm tiêu chí với 29 biến quan sát trình bày Bảng JSTPM Tập 10, Số 4, 2021 115 Bảng Hệ tiêu chí biến quan sát đo lường chất lượng tài trợ NCCB Tiêu chí Biến quan sát Ký hiệu Việc thiết kế chương trình tài trợ NCCB lĩnh vực KHTN&KT phù hợp để đáp ứng nhu cầu NCCB Việt Nam PH1 Quy mô kinh phí tài trợ cho đề tài NCCB lĩnh vực KHTN&KT phù hợp với nhu cầu công bố quốc tế đề tài PH2 Cách thức triển khai tổ chức tài trợ NCCB đáp ứng với nhu cầu NCCB nhà khoa học PH3 Đội ngũ cán NCCB Việt Nam phù hợp để thúc đẩy chất lượng NCCB lĩnh vực KHTN&KT PH4 Kết đầu phù hợp với chất lượng tài trợ PH5 Chính sách nâng cao chất lượng tài trợ NCCB lĩnh vực KHTN&KT phù hợp với chiến lược phát triển KH&CN thời gian tới Việt Nam PH6 Tài trợ NCCB giúp tăng số lượng công bố quốc tế cho Việt Nam HQ1 Tài trợ NCCB giúp tăng số lượng đào tạo sau đại học sau kết thúc đề tài HQ2 Hiệu Tài trợ NCCB giúp tăng số lượng nhà khoa học có vai trị (có khả làm tác giả liên hệ tác giả đứng đầu) công bố tài trợ quốc tế HQ3 Sự phù hợp Tài trợ NCCB liên tục giúp nhà khoa học trì hướng nghiên cứu, từ làm tăng số H-index nhà khoa học HQ4 Tài trợ NCCB giúp tăng số nhóm NC mạnh nước HQ5 Tiêu chí quy định chất lượng cơng bố quốc tế làm giảm tỷ lệ hồ sơ đề xuất nghiên cứu HS1 Được tài trợ NCCB giúp trì tần suất công bố khoa học Hiệu tạp chí quốc tế suất tài trợ Được tài trợ NCCB Việt Nam giúp kết nghiên cứu gia tăng tỷ lệ nhà khoa học Việt Nam công bố quốc tế HS2 HS3 Tài trợ NCCB giúp phát triển nhóm nghiên cứu làm tăng tỷ lệ hồ sơ có chất lượng tốt nghiên cứu HS4 Kết NCCB làm thay đổi tích cực sách tài trợ NCCB Việt Nam TĐ1 Tăng chất lượng công bố quốc tế thực Việt Nam Tác động Tạo hội kết nối tổ chức nghiên cứu ngồi nước, tài trợ nhóm nghiên cứu khoa học ngồi nước Tạo mơi trường nghiên cứu thuận tiện cho nhà khoa học Việt Nam Nâng cao nhận thức NCCB thu hút đông đảo nhà khoa học tham gia vào hoạt động NCCB TĐ2 TĐ3 TĐ4 116 Mức độ bền vững tài trợ Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… Tài trợ NCCB giúp cải thiện chất lượng đào tạo sau đại học Việt Nam Thu hút nhà khoa học tham gia đề tài NCCB nước TĐ5 Tác động tích cực đến phát triển kinh tế, xã hội (đặc biệt số xếp hạng Việt Nam) TĐ6 Phát triển tri thức cho nhân loại tiền đề nghiên cứu BV1 Hình thành mạng lưới liên kết nhóm nghiên cứu xây dựng nhóm nghiên cứu mạnh BV2 Hình thành mạng lưới sở NCCB môi trường nghiên cứu chuyên sâu BV3 Kết đánh giá hội đồng nghiệm thu Kết Thời gian hoàn thành đề tài theo tiến độ thực phê duyệt Các sản phẩm đạt so với đăng ký sau tài trợ Sản phẩm cơng bố quốc tế so với đăng ký Đóng góp vào q trình đào tạo sau đại học KQSTT1 KQSTT2 KQSTT3 KQSTT4 KQSTT5 2.2 Mẫu nghiên cứu Mẫu chọn theo cách thức ngẫu nhiên đơn giản thông qua danh sách nhà khoa học chủ nhiệm đề tài Quỹ tài trợ nghiên cứu Phương pháp chọn mẫu điều tra: sử dụng phương pháp chọn mẫu ngẫu nhiên phân tầng chủ nhiệm đề tài NCCB lĩnh vực KHTN&KT Theo Phạm Văn Quyết, Nguyễn Q Thanh (2011, tr 194) tác giả tính tốn cỡ mẫu theo cơng thức sau: × (1 − ) = ∝/ × Trong đó: - n: mẫu tối thiểu cần xác định - Hệ số tin cậy Z21-α/2= 95% (tra Bảng giá trị hệ số tin cậy t tính sẵn theo hàm t, Lia-pu-nốp giá trị t =1,96) Phạm vi sai số chọn mẫu không vượt 5% (ɛ = 0,05) Do tính chất: (1-p) +p=1, tiêu chí chất lượng tài trợ NCCB mẫu lớn khách quan (1-p) = 0,5 p=0,5 => (1-p) * p =0.5*0.5=0.25 0.5 × (1 − 0.5) = 1.96 × = 384.16 đơn vị nghiê n cứu 0.5 Như cỡ mẫu tố thiểu để đảm bảo số liệu thu thập có độ tin cậy 385 đơn vị nghiên cứu Tác giả khảo sát 538 đơn vị nghiên cứu Cỡ cấu mẫu theo đặc điểm nhân sau: 90,71% nam 9,29% nữ; 9,48% GS, 27,14% PGS, 63,75% TS; 48,88% trường đại học, 47,77% viện nghiên cứu, 3,35% đơn vị khác Các chuyên ngành tham gia khảo sát có số phiếu thu hợp lệ tổng số phiếu hợp lệ chiếm tỷ lệ sau: ngành JSTPM Tập 10, Số 4, 2021 117 Tốn chiếm tỷ lệ 9,50%, ngành Khoa học Thơng tin Máy tính chiếm tỷ lệ 23,70%, ngành Vật lý chiếm tỷ lệ 11,70%, ngành Hóa học chiếm tỷ lệ 18,20%, ngành Khoa học Trái đất Môi trường chiếm tỷ lệ 5,60%, ngành Sinh học Nông nghiệp chiếm tỷ lệ 16,50%, ngành Cơ học chiếm tỷ lệ 8,90% ngành Y sinh Dược học chiếm tỷ lệ 5,90% 2.3 Phương pháp phân tích Hệ tiêu chí đánh giá chất lượng tài trợ NCCB gồm 06 tiêu chí 29 biến quan sát sử dụng thang đo Likert với mức độ đánh giá từ (1) Rất không đồng ý đến (5) Rất đồng ý, để khảo sát ý kiến nhà khoa học Tác giả thực kiểm định sau: Kiểm định độ tin cậy thang đo Cronbach’s alpha nhằm mục đích xem xét biến quan sát có đo lường cho khái niệm cần đo hay không Để đánh giá sơ thang đo ta đánh giá độ tin cậy thang đo hệ số Croncbach’s Alpha Theo Nguyễn Đình Thọ Nguyễn Thị Mai Trang (2008) biến có hệ số tương quan biến - tổng (corrected item - total correlation) nhỏ 0,3 bị loại tiêu chuẩn chọn thang đo có độ tin cậy Cronbach’s Alpha từ 0,6 trở lên (Hoàng Trọng Chu Nguyễn Mộng Ngọc, 2008) Nhiều nhà nghiên cứu cho Croncbach’s Alpha từ 0,8 đến gần thang đo lường tốt, từ 0,7 đến 0,8 sử dụng được, từ 0,6 trở lên sử dụng trường hợp khái niệm nghiên cứu mới người trả lời bối cảnh nghiên cứu Vì vậy, nghiên cứu xây dựng hệ tiêu chí đánh giá chất lượng tài trợ NCCB lĩnh vực Khoa học tự nhiên kỹ thuật Quỹ Phát triển KH&CN Quốc gia Việt Nam chấp nhận biến quan sát có hệ số tương quan biến tổng (Corected Item-Total correlation) nhỏ 0,3 tiêu chí có hệ số Cronbach’s Alpha lớn 0,6 xem xét giữ lại quan sát Phân tích nhân tố khám phá (Exploratory Factor Analysis - EFA) Phương pháp phân tích nhân tố khám phá sử dụng để kiểm tra tính đơn khía cạnh thang đo đo lường khía cạnh khác khái niệm nghiên cứu Phương pháp EFA thuộc nhóm phân tích đa biến phụ thuộc lẫn nhau, nghĩa khơng có biến phụ thuộc biến độc lập mà dựa vào mối tương quan biến với EFA dùng để rút gọn tập k biến quan sát thành tập F (F0,3 xem đạt mức tối thiểu, >0,4 xem quan trọng, >=0,5 xem có ý nghĩa thực tiễn; Hệ số KMO theo tiêu chuẩn 0,5 ≤ KMO ≤ 1; Kiểm định Bartlett có ý nghĩa thống kê (Sig < 0,05); Phần trăm phương sai toàn (Percentage of variance) > 50% 118 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… Phân tích nhân tố khẳng định (Confirmatory Factor Analysis - CFA) Phân tích nhân tố khẳng định kỹ thuật thống kê mơ hình cấu trúc tuyến tính (SEM) CFA cho kiểm định biến quan sát (mesured variables) đại diện cho nhân tố (constructs) tốt đến mức CFA bước EFA CFA sử dụng thích hợp nhà nghiên cứu có sẵn số kiến thức cấu trúc tiềm ẩn sở, đó, mối quan hệ hay giả thuyết (có từ lý thuyết hay thực nghiệm) biến quan sát nhân tố sở nhà nghiên cứu thừa nhận trước tiến hành kiểm định thống kê Phương pháp CFA sử dụng để khẳng định lại tính đơn biến, đa biến, giá trị hội tụ phân biệt thang đo đánh giá chất lượng tài trợ NCCB Quỹ NAFOSTED Các ngưỡng chấp nhận tối ưu mơ hình theo Hair cộng (2010, 654) Chi-square/df (cmin/df) 0,9; TLI>0,9; RMSEA 0,3 nên đạt yêu cầu (Hair cộng sự., 2006), đó, biến đo lường thành phần sử dụng cho phân tích EFA 3.2 Phân tích nhân tố khám phá EFA Kết EFA (với phép trích nhân tố sử dụng Principal Axis Factoring (PAF) phép quay khơng vng góc Promax) cho thấy, có tiêu chí rút trích với phương sai trích 57,549% (>50%) đạt yêu cầu Các biến quan sát có hệ số tải nhân tố (Factor Loading) lớn 0,5, kết EFA cho thấy: Kiểm tra điều kiện phân tích nhân tố, ta có KMO = 0,827 đạt yêu cầu lớn 0,5 Sig (Bartlett’s Test) = 0,000 < 0,05 (Hair cộng 2006) cho thấy biến quan sát có tương quan với tổng thể Tổng phương sai trích 57,549% > 50% cho biết nhân tố rút trích giải thích 57,549% biến thiên liệu JSTPM Tập 10, Số 4, 2021 119 điều tra Nhìn chung, tiêu chí khơng có s thay đổi nên tên nhóm tiêu chí giữ nguyên Vậy ậy chất lượng l tài trợ NCCB sau đánh giá sơ bao gồm với tiêu chí 29 biến bi quan sát rút đặt tên sau: Tiêu chí - Sự phù hợp, Tiêu chí - Hiệu tài trợ NCCB, Tiêu chí - Hiệu suất tài trợ NCCB, Tiêu chí - Tác động tài trợ NCCB, Tiêu chí 5Mức độ bền vững tài trợ NCCB Tiêu chí - Kết sau tài trợ NCCB 3.3 Phân tích nhân tốố khẳng định CFA Kết CFA (Hình 1) cho thấy trọng số biến quan sát đạt chuẩn cho phép (>0,5) có ý nghĩa ĩa thống kê k (các giá trị p 0,000) Như vậy, kết luận ận biến quan sát dùng d để đo lường tiêu chí chất lượng tài trợ NCCB đạt ợc giá trị hội tụ Kết cho thấy mơ hình có 362 bậc ậc tự do, giá trị kiểm định chi-square=0.000 chi với pvalue = 751.707; chi-square/df = 2.077 chỉỉ số (CFI = 0,948, TLI = 0,942, v RMSEA = 0,045) mơ hình phù hợp ợp với liệu thị trường tr tiêu chí Phù hợp (PH); Hiệu tài trợ ợ NCCB (HQ); Hiệu suất tài t trợ NCCB (HS); Tác động tài trợ ợ NCCB (TĐ); Bền vững tài t trợ NCCB (BV); Kết sau tài trợ (KQSTT) đạt tính đơn hướng ớng Hệ số tương t quan tiêu chí với sai lệch chuẩn kèm theo ều nhỏ h 1, vậy, tiêu chí Phù hợp (PH); Hiệu tài trợ ợ NCCB (HQ); Hiệu suất tài t trợ NCCB (HS); Tác động tài trợ NCCB (TĐ); Bền vững tài ài trợ tr NCCB (BV); Kết sau tài trợ (KQSTT) đạt ợc giá trị phân biệt (Bảng (B 2) Nguồn:: Tính tốn c tác giả từ liệu khảo sát Hình Kết ết CFA hệ thống tiêu ti chí đo lượng chất lượng tài trợ NCCB 120 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… Bảng Tóm tắt kết kiểm định thang đo chất lượng tài trợ NCCB Quỹ NAFOSTED Việt Nam Số biến quan sát Cronbach Tổng hợp Phương sai trích (%) Phù hợp (PH) 0.835 0.854 50.030 Hiệu tài trợ NCCB (HQ) 0.879 0.880 59.611 Hiệu suất tài trợ NCCB (HS) 0.775 0.789 60.772 Tác động tài trợ NCCB (TĐ) 0.865 0.870 60.585 Bền vững tài trợ NCCB (BV) 0.880 0.881 80.604 Kết sau tài trợ (KQSTT) 0.898 0.901 71.623 Tiêu chí Độ tin cậy Giá trị Đạt yêu cầu Nguồn: Tính tốn tác giả từ liệu khảo sát Kết đánh giá độ tin cậy thang đo, độ tin cậy tổng hợp thành phần > 0,7 Tổng phương sai trích thành phần >50,0%, vậy, biến quan sát phản ánh tốt khái niệm đo lường chất lượng tài trợ NCCB Kết luận Kết phân tích số liệu xây dựng tiêu chí đánh giá đo lường chất lượng tài trợ NCCB thông qua khảo sát ý kiến nhà khoa học bao gồm tiêu chí: (1) Sự phù hợp; (2) Hiệu tài trợ NCCB; (3) Hiệu suất tài trợ NCCB; (4) Tác động tài trợ NCCB; (5) Mức độ bền vững tài trợ NCCB; (6) Kết sau tài trợ NCCB với 29 biến quan sát Khi vận dụng tiêu chí nêu đánh giá chất lượng tài trợ NCCB giai đoạn 2009-2019 Quỹ Phát triển KH&CN Quốc gia tài trợ thực hiện, kết cho thấy, giá trị trung bình thu từ chất lượng tài trợ NCCB lĩnh vực KHTN&KT đạt 3,88/5 điểm, đánh giá tốt (với thang đo từ 1-5 tương ứng với mức đánh giá từ không tốt đến tốt), điểm thành phần tiêu chí là: TT Tiêu chí đánh giá Điểm trung bình Sự phù hợp 3,34 Kết sau tài trợ 3,66 Về hiệu tài trợ 3,98 Tác động tài trợ 4,03 Hiệu suất tài trợ 4,08 Mức độ bền vững 4,18 Tổng 3,88 JSTPM Tập 10, Số 4, 2021 121 Như vậy, từ kết thu thấy rằng, để nâng cao chất lượng tài trợ NCCB lĩnh vực KHTN&KT Quỹ Phát triển KH&CN Quốc gia tài trợ tác giả kiến nghị giải pháp nâng cao điểm đánh giá tiêu chí: (1) Sự phù hợp chất lượng tài trợ; (2) Kết sau tài trợ; (3) Hiệu tài trợ Các tiêu chí có điểm trung bình cộng đồng khoa học đánh giá tốt, cần có định hướng phát huy trì ổn định Việc sử dụng hệ thống tiêu chí đánh giá chất lượng tài trợ NCCB đóng góp thêm thơng tin, làm sở cho giải pháp nâng cao, cải thiện chất lượng tài trợ NCCB Việt Nam Đây sở cho Quỹ NAFOSTED làm tảng để xây dựng tiêu chí đánh giá nâng cao chất lượng tài trợ NCCB Việt Nam thời gian tới Tuy nhiên, phạm vi khảo sát nghiên cứu dừng lại đối tượng chủ nhiệm đề tài, đó, tham gia góp phần làm tốt chất lượng nghiên cứu cịn cần có phối hợp đơn vị nghiên cứu, đối tác nhóm nghiên cứu nước (F.M Andrews, 1979; Lee cộng sự, 2011; Susanne Søndergaard cộng sự, 2007) Trong nghiên cứu tiếp theo, nên thu thập thêm ý kiến đối tượng tổ chức nghiên cứu đối tác liên quan trực tiếp trình nghiên cứu để có tiêu chí đánh giá chất lượng tài trợ NCCB cách hoàn chỉnh bao quát nhất./ TÀI LIỆU THAM KHẢO Nghị định số 122/NĐ-CP ngày 22/10/2003 Chính phủ việc thành lập Quỹ Phát triển KH&CN Quốc gia Nghị định số 08/2014/NĐ-CP ngày 27/01/2014 Chính phủ Quy định chi tiết hướng dẫn thi hành số điều Luật Khoa học công nghệ Thông tư số 37/2014/TT-BKHCN ngày 12/12/2014 Bộ Khoa học Công nghệ Quy định quản lý đề tài nghiên cứu Quỹ Phát triển KH&CN Quốc gia tài trợ Bùi Minh Đức, Nguyễn Thị Thu Hà, Nguyễn Đình Đức (2019) “Vai trị nhóm nghiên cứu việc cơng bố quốc tế lĩnh vực khoa học tự nhiên kỹ thuật” VNU Journal of Science: Education Research, Vol 35, No (2019) 12-23 Hoàng Trọng Chu Nguyễn Mộng Ngọc (2007) Thống kê ứng dụng kinh tếxã hội, Hà Nội, Nxb Thống kê, Mai Trọng Nhuận cộng (2019) “Đánh giá hiệu đề tài, dự án, chương trình khoa học cơng nghệ: Trường hợp Chương trình Khoa học Cơng nghệ phục vụ phát triển bền vững vùng Tây Bắc” VNU Journal of Science: Earth and Environmental Sciences, Vol 36, No (2020) 17-28 Nguyễn Đình Thọ Nguyễn Thị Mai Trang (2011) Nghiên cứu khoa học Marketing - Ứng dụng mơ hình cấu trúc tuyến tính SEM Hà Nội, Nxb Lao động Nguyễn Thị Thu Oanh (2015) Nghiên cứu hoàn thiện phương pháp luận đánh giá 122 Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản… chương trình khoa học cơng nghệ thơng qua việc đánh giá thí điểm chương trình kH&CN cấp Nhà nước Đề tài cấp Bộ KH&CN Andrews (1979) “The international study: its data sources and measurement procedures”, Scientific Productivity, The Effectiveness of Research Groups in Six Countries, Cambridge University Press, pp.17-52 10 Hair cộng (2010) Multivariate data analysis (7th ed.): Prentice-Hall, Inc Upper Saddle River, NJ, USA 11 Hair cộng (2006) Multivariate data analysis (6th ed) Pearson Prentice Hall 12 Lee cộng (2011) “Research output and economic productivity: a Granger causality test” Scientometrics, 89(2), 465 DOI: 10.1007/s11192-011-0476-9 13 Luke Georghiou, David Roessner (2000) “Evaluating technology programs: tools and methods” Research Policy, Volume 29, Issues 4-5, April 2000, Pages 657-678 14 Morris cộng (2011) “The answer is 17 years, what is the question: understanding time lags in translational research” Journal of the Royal Society of Medicine, 01 Dec 2011, 104(12):510-520 15 Nunnally, J & Berstein, I.H (1994) Pschychometric Theory (3rd ed.) New York: McGraw-Hill 16 PART (2002), Program Assessment Rating Tool (PART), introduced in 2002 Its overall purpose is to assess program/ OMB's Program Assessment Rating Tool (PART), 17 Peter H Rossi cộng (2003) Evaluation: A Systematic Approach, SAGE Publications, Incorporated, ISBN-10 and ISBN 13.(Hardcover, Revised edition) 18 Susanne Søndergaard cộng (2007) Sharing knowledge: contextualising sociotechnical thinking and practice The Learning Organization ... thiện hệ thống tiêu chí đánh giá chất lượng tài trợ NCCB, việc xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ NCCB xác định đặt bối cảnh tài trợ từ Quỹ Phát triển KH&CN Quốc gia Việt Nam, ... thang đo tiêu chí chất lượng tài trợ NCCB với tính chất khởi đầu cho việc đánh giá chất lượng tài trợ NCCB Quỹ Phát triển KH&CN Quốc gia Việt Nam hy vọng cung cấp cho nhà nghiên cứu khoa học hiểu... gia vào hoạt động NCCB TĐ2 TĐ3 TĐ4 116 Mức độ bền vững tài trợ Xây dựng hệ thống tiêu chí đánh giá chất lượng tài trợ nghiên cứu bản? ?? Tài trợ NCCB giúp cải thiện chất lượng đào tạo sau đại học Việt