học (nghiên cứu trong nước)
Đề tài Nâng cao chất lượng quản lý đề tài/dự án nghiên cứu khoa học tại trường Đại học Y Hà Nội đã nghiên cứu nhu cầu của cán bộ khoa học trường Đại
học Y Hà Nội về hoạt động quản lý đề tài/dự án khoa học công nghệ. Đối tượng nghiên cứu là chủ nhiệm đề tài, thư ký đề tài và các cán bộ nghiên cứu khoa học của trường có trình độ từ tiến sỹ trở lên. Nghiên cứu đã sử dụng phương pháp điều tra khảo sát trên 200 cán bộ khoa học của trường về qui trình quản lý đề tài/dự án khoa học cơng nghệ, về những khó khăn trong thực hiện các đề tài nghiên cứu khoa học cũng như mức độ khó khăn. Nghiên cứu cho thấy nhu cầu của các cán bộ nghiên cứu khoa học của trường có nhu cầu cao đối với bộ phận quản lý khoa học về hỗ trợ tư vấn lập đề cương, xây dựng định hướng nghiên cứu, hướng dẫn quy trình tuyển chọn đề tài, trao quyền tự chủ cho các chủ nhiệm đề tài…Các khó khăn trong thực hiện đề tài chủ yếu tập trung trong khâu thanh quyết tốn kinh phí nghiên cứu khoa học, thủ tục mua sắm vật tư hoá chất phục vụ nghiên cứu phức tạp (Trần Lê Giang, 2010). Tuy nhiên, nghiên cứu này chỉ giới hạn đối tượng nghiên cứu (cán bộ nghiên cứu khoa học và quy trình quản lý nghiên cứu khoa học) trong phạm vi Trường Đại học Y Hà Nội, chưa nghiên cứu nhu cầu của các cán bộ khoa học bên ngồi trường nên chưa có tính đại diện cao về nhu cầu của các nhà khoa học.
Nhằm xây dựng bộ tiêu chí để đánh giá hiệu quả hoạt động khoa học và công nghệ, một nghiên cứu của Viện Khoa học Thuỷ lợi Việt Nam đã khảo sát thực trạng và đánh giá hiệu quả hoạt động KH&CN của các đơn vị nghiên cứu trực thuộc Viện bằng phương pháp phỏng vấn trực tiếp các cán bộ khoa học trong Viện (gồm các nhóm đối tượng: cán bộ quản lý và cán bộ nghiên cứu khoa học). Nghiên cứu đưa ra 30 tiêu chí gồm 7 tiêu chí cơ bản và 23 tiêu chí phụ để đánh giá. Kết quả, nghiên cứu đã chỉ ra được các tiêu chí như: Số bài báo được cơng bố trong nước; Số tiến bộ kỹ thuật, giải pháp hữu ích được công nhận (do Bộ/Tỉnh công nhận); Số lượng hợp đồng chuyển giao công nghệ được ký kết… là các tiêu chí được cho là rất cần thiết
trong đánh giá hiệu quả hoạt động khoa học và công nghệ của các đơn vị nghiên cứu thuộc Viện. Các tiêu chí Đổi mới cơng tác quản lý, nghiên cứu; Số lượng mơ hình thí điểm được nhân rộng ít quan trọng hơn trong 30 tiêu chí (Viện Khoa học Thuỷ lợi Việt Nam, 2014). Hạn chế của nghiên cứu là bộ tiêu chí chỉ áp dụng để đánh giá hiệu quả hoạt động đối với các đơn vị sự nghiệp có nghiên cứu khoa học, khơng áp dụng được để đánh giá hiệu quả hoạt động của cơ quan quản lý nghiên cứu khoa học.
Nhìn chung, các nghiên cứu trên đã khảo sát ý kiến của cán bộ nghiên cứu trong đánh giá, đề xuất tiêu chí đánh giá hiệu quả hoạt1 động khoa học và công nghệ đối với đơn vị sự nghiệp có nghiên cứu khoa học; nhưng chưa nghiên cứu đánh giá hiệu quả hoạt động quản lý nghiên cứu khoa học dựa trên so sánh, đánh giá các quy trình quản lý đang sử dụng cũng như chưa đi vào khảo sát trực tiếp nhu cầu của nhà khoa học đối với chính quy trình quản lý. Trong khi, để nâng cao hiệu quả hoạt động này và đáp ứng tốt nhất nhu cầu của nhà khoa học, thì việc khảo sát nhu cầu của họ là rất cần thiết và có khả năng đáp ứng đúng nguyện vọng để tạo sự kích thích trong nghiên cứu khoa học.
2.2.2 Các nghiên cứu sử dụng mơ hình CIPP (nghiên cứu ngồi nước)
- Nghiên cứu về đánh giá chương trình phịng chống tự tử tại Cao Hùng, Đài Loan
Ho et al. (2011) đã thực hiện nghiên cứu nhằm đánh giá hiệu quả hoạt động của Trung tâm Phòng chống Tự tử (KSPC) của thành phố Cao Hùng, Đài Loan, trong thời gian từ tháng 6 năm 2005 đến tháng 6 năm 2008. Nghiên cứu đã sử dụng mơ hình CIPP để đánh giá chương trình phịng chống tự tử tại Cao Hùng. Bốn mơ hình đánh giá đã được áp dụng để đánh giá các KSPC: đánh giá bối cảnh nền và nguồn gốc của các trung tâm, đánh giá đầu vào các nguồn lực của trung tâm, đánh giá quá trình hoạt động của dự án phịng chống tự tử, và đánh giá sản phẩm của dự án. Việc đánh giá bối cảnh cho biết nhiệm vụ của KSPC là để hạ thấp tỷ lệ tử vong. Việc đánh giá đầu vào đánh giá hiệu quả của nguồn nhân lực và các khoản trợ cấp
thành phố Cao Hùng. Trong việc đánh giá quá trình, các tác giả đã kiểm tra các chiến lược phịng chống tự tử của KSPC, đó là một phiên bản sửa đổi của Chiến lược Quốc gia Phòng chống Tự tử Úc. Trong việc đánh giá sản phẩm, bốn mục tiêu chính được đánh giá: (1) tỷ lệ tự tử tại Cao Hùng, (2) các báo cáo các trường hợp tự tử, (3) dòng khủng hoảng gọi, và (4) điện thoại tư vấn. Từ năm 2005 đến năm 2008, số lượng các buổi tư vấn qua điện thoại (1.432, 2.010, 7.051, 12.517) và dòng khủng hoảng gọi (0, 4.320, 10.339, 14.502) tăng lên. Do sự gia tăng trong báo cáo các trường hợp tự tử (1.328, 2.625, 2.795, và 2.989, tương ứng), trường hợp nào được báo cáo đầy đủ trong quá khứ, nhóm nghiên cứu này đã liên lạc được với những người cần giúp đỡ. Trong cùng thời gian này, tỷ lệ tư vấn trong nữa năm giảm đáng kể đối với những người nhận dịch vụ, và tỷ lệ tự tử (21.4, 20.1, 18.2 và 17.8 trên 100.000 dân, tương ứng) cũng giảm. Chương trình phịng chống tự tử tại Cao Hùng có giá trị thực hiện trên cơ sở liên tục nếu hạn chế tài chính được giải quyết.
- Sử dụng mơ hình CIPP để đánh giá chương trình giảng dạy kỹ thuật
Tseng et al. (2010) đã mơ tả việc sử dụng mơ hình đánh giá bối cảnh, đầu vào, quá trình và sản phẩm (CIPP) để thiết kế và phát triển một ma trận đánh giá cho một chương trình đào tạo kỹ thuật. Nghiên cứu này bàn về lý thuyết CIPP và sự phát triển, sử dụng nó trong ngành giáo dục để đánh giá các chương trình giảng dạy. Ngồi ra, nghiên cứu trình bày việc ứng dụng đánh giá mơ hình CIPP cho các chương trình đào tạo kỹ thuật tại thời điểm hiện tại. Cuối cùng, các nhà nghiên cứu đã thiết kế ma trận đánh giá CIPP của chương trình giảng dạy cơng nghệ nano và thành lập một ban chuyên gia để phân tích các giá trị sử dụng. Sáu thành viên chuyên gia bao gồm hai chuyên gia đánh giá giáo trình và một chuyên gia từ mỗi lĩnh vực sau đây: chương trình giảng dạy phát triển nano, giáo dục kỹ thuật, nghiên cứu giáo dục và giáo dục dạy nghề. Sau khi các nhà nghiên cứu tổng hợp ý kiến của các chuyên gia bằng bảng câu hỏi, một phiên bản của ma trận đánh giá CIPP cho các chương trình giảng dạy cơng nghệ nano được hồn thành bằng cách sử dụng
những lời đề nghị của nhóm chuyên gia. Các ma trận đã được cung cấp cho việc sử dụng đánh giá chương trình giáo dục kỹ thuật.
- Sử dụng mơ hình CIPP để đánh giá một chương trình giảng dạy Anh ngữ tại trường đại học công
Nghiên cứu này do Tunc (2010) thực hiện nhằm đánh giá hiệu quả của Chương trình học tại Trường Dự bị Đại học ở Ankara thông qua các ý kiến của các giảng viên và sinh viên, sử dụng mơ hình đánh giá CIPP. Với 406 sinh viên theo học các trường dự bị năm học 2008-2009 và 12 giảng viên giảng dạy trong chương trình tham gia vào nghiên cứu. Các số liệu được thu thập thông qua báo cáo bảng câu hỏi của sinh viên và một lịch trình phỏng vấn được thiết kế cho các giáo viên hướng dẫn. Bên cạnh đó, để có được thơng tin chi tiết hơn về các trường dự bị, các tài liệu, văn bản liên quan đã được kiểm tra. Nghiên cứu đã sử dụng phương pháp phân tích thống kê mô tả các dữ liệu dựa trên bảng câu hỏi và phương pháp suy luận, phân tích nội dung đã được phỏng vấn thực tế để phân tích dữ liệu định tính. Kết quả nghiên cứu chỉ ra rằng các chương trình tại Trường Dự bị Đại học Ankara đã đáp ứng một phần cho mục đích phục vụ của nó. Nghiên cứu cũng cho thấy rằng để làm cho chương trình có hiệu quả hơn, cần một số cải thiện về điều kiện, nội dung, tài liệu và khối lượng của chương trình.
Qua các nghiên cứu đã tham khảo, phương pháp đánh giá theo mơ hình CIPP được vận dụng khơng theo một khn mẫu, mà vận dụng linh hoạt tuỳ theo từng hoàn cảnh, đối tượng, mục tiêu của từng nghiên cứu với nội dung và phương pháp đánh giá khác nhau.
Kết luận chương 2
Chương 2 là cơ sở lý thuyết liên quan đến đề tài, trình bày một số khái niệm có liên quan đến quản lý NCKH; trình bày mơ hình đánh giá CIPP; các nghiên cứu có liên quan đến đánh giá công tác quản lý nghiên cứu khoa học, các nghiên cứu ứng dụng mơ hình CIPPP.
Nhiều khái niệm được đưa ra nhưng khái niệm tập trung của nghiên cứu này là về quản lý NCKH và quy trình quản lý NCKH theo Luật Khoa học và Cơng nghệ năm 2013.
Mơ hình CIPP có 4 loại đánh giá (bối cảnh - đầu vào – quá trình – sản phẩm), được sử dụng rộng rãi để đánh giá việc áp dụng cải tiến chương trình hoặc đánh giá kết quả của một chương trình. Các nghiên cứu áp dụng mơ hình CIPP đã đưa ra cho thấy phương pháp áp dụng có khác nhau tùy thuộc vào mục đích, đối tượng của từng nghiên cứu.
CHƯƠNG 3
PHƯƠNG PHÁP NGHIÊN CỨU 3.1 Khung phân tích
Hình 3.1 Khung phân tích đánh giá cơng tác quản lý NCKH
Đề tài đánh giá cơng tác quản lý NCKH thơng qua phân tích nhu cầu của nhà khoa học đối với quy trình quản lý NCKH và quy trình quản lý kinh phí. Đồng thời, đánh giá cơng tác quản lý NCKH thơng qua mơ hình CIPP với 4 giai đoạn: đánh giá bối cảnh, đánh giá đầu vào, đánh giá quá trình, đánh giá sản phẩm.
3.2 Phương pháp thu thập số liệu nghiên cứu
Đối với phân tích nhu cầu của cán bộ nghiên cứu khoa học, đề tài sử dụng số liệu sơ cấp thông qua phương pháp khảo sát thu thập thông tin bằng bảng hỏi để khảo sát ý kiến của các nhà khoa học, các cán bộ nghiên cứu khoa học, phân tích kết quả dựa trên các thông tin thu thập được.
Đối với nội dung đánh giá công tác quản lý nghiên cứu khoa học, đề tài sử dụng số liệu thứ cấp được thu thập từ các báo cáo của thành phố Cần Thơ trong lĩnh vực KH&CN từ năm 2011-2015, sử dụng phân tích theo mơ hình CIPP.
Nội dung các phương pháp được trình bày theo các nội dung sau đây:
3.2.1 Khảo sát ý kiến nhà khoa học
- Mẫu khảo sát:
Do tổng thể nhỏ và xác định được tổng thể (cán bộ tham gia ĐTDA khoa học cấp thành phố giai đoạn 2011-2015), nên cỡ mẫu được xác định theo công thức Slovin:
n = N/(1+Ne2)
Với N là kích thước tổng thể, e là sai số cho phép, n là cỡ mẫu.
Với tổng thể 624 cán bộ tham gia các đề tài nghiên cứu khoa học cấp thành phố giai đoạn 2011-2015, cỡ mẫu phù hợp với mức sai số 10% được tính như sau:
n = N/(1+Ne2) = 624/(1+624*(0,1)2) = 86,18 tương đương 87 người. Như vậy, cần khảo sát với cỡ mẫu cần thiết là 87 người.
Tuy nhiên, để đảm bảo thu được số người trả lời từ 87 trở lên, tác giả chọn ngẫu nhiên 200 người từ danh sách cán bộ tham gia thực hiện đề tài để gửi khảo sát, nhiều hơn gấp đôi cỡ mẫu cần thiết để dự phịng trường hợp bảng hỏi khơng được phản hồi đầy đủ (do sử dụng phương pháp khảo sát qua email và khảo sát trực tuyến), hoặc bảng trả lời không hợp lệ.
- Các bước tiến hành khảo sát: sử dụng phương pháp điều tra xã hội học để
khảo sát ý kiến của các nhà khoa học, các bước chính để thực hiện khảo sát gồm : - Bước 1: Xây dựng các chỉ tiêu, thiết kế bảng hỏi;
- Bước 2: Khảo sát thử;
- Bước 3: Hoàn chỉnh bảng hỏi; - Bước 4: Khảo sát chính thức;
- Bước 5: Xử lý và phân tích dữ liệu điều tra.
Hình 3.2 Các bước tiến hành khảo sát nhu cầu của nhà khoa học
- Nội dung khảo sát: được thể hiện trong bảng câu hỏi (xem Phụ lục). Trong
đó bao gồm hai phần:
Phần 1. Thông tin về người được khảo sát: những thông tin cá nhân về đối tượng khảo sát như tuổi, giới tính, trình độ, khu vực cơng tác, loại hình nhiệm vụ chính, lĩnh vực nghiên cứu…
Phần 2. Nội dung khảo sát: Những khó khăn và những nhu cầu của cán bộ nghiên cứu khoa học với quy trình quản lý nghiên cứu khoa học và quản lý kinh phí.
- Phương pháp và thời gian khảo sát: sử dụng khảo sát gián tiếp bằng bảng
câu hỏi được gửi qua email và khảo sát trực tuyến.
Khảo sát qua email: tác giả soạn thảo, hoàn thiện bảng câu hỏi và gửi cho các cán bộ nghiên cứu khoa học. Kết hợp với điện thoại đề nghị trả lời khảo sát, điện thoại nhắc lại, và điện thoại cảm ơn. Trong thời gian 9 ngày từ ngày 14-22/12/2015, tác giả nhận được phản hồi của 29 người qua email, 01 phản hồi gửi bản giấy. Trong thời gian này, nhận thấy có một số bất tiện cho người được khảo sát trong việc trả lời và trong thu thập kết quả, tác giả tìm hiểu và sử dụng phương pháp khảo sát trực tuyến, phương pháp khảo sát này phù hợp với đối tượng là cán bộ nghiên cứu khoa học.
Khảo sát trực tuyến thông qua Google Docs: ưu điểm của khảo sát trực tuyến là tạo thuận lợi cho người được khảo sát khi trả lời câu hỏi mà không làm mất nhiều thời gian như cách khảo sát qua email (người được khảo sát tải file về máy lưu lại, trả lời câu hỏi, gửi file trả lời bằng email). Ưu điểm nữa mà tác giả chọn khảo sát trực tuyến là kết quả tổng hợp khảo sát có thể được xem và tải về dưới dạng bảng tính (micrsoft excel) để xử lý, khơng mất thời gian nhập liệu và tránh được các sai
sót khi nhập liệu. Trong thời gian từ 17/12/2015 đến 04/01/2016, sau khi gửi liên kết khảo sát trực tuyến qua địa chỉ mail và điện thoại cho đối tượng nghiên cứu, tác giả nhận 93 phản hồi trực tuyến của các cán bộ nghiên cứu khoa học.
Tổng số cán bộ đã được gửi khảo sát bằng email và khảo sát trực tuyến là 200 người. Tổng số lượt trả lời của hai hình thức khảo sát là 123 lượt.
- Phương pháp xử lý và phân tích số liệu điều tra:
Xử lý số liệu điều tra: việc xử lý số liệu điều tra được thực hiện như sau:
+ Chuẩn bị dữ liệu: dữ liệu thu về trước khi nhập liệu, được mã hố, sau đó thiết kế định dạng nhập dữ liệu và nhập trực tiếp vào phần mềm máy tính.
+ Làm sạch dữ liệu: dữ liệu do chính tác giả thu thập, việc kiểm tra dữ liệu được thực hiện để kiểm tra tính chính xác của dữ liệu (về con số, logic của câu trả lời). Dữ liệu sau khi kiểm tra, được hiệu chỉnh (những câu trả lời không đầy đủ, những câu trả lời khơng thích hợp,.. được quay lại người trả lời để làm sáng tỏ, suy luận từ những câu trả lời khác, hoặc loại bỏ phiếu điều tra). Trong 29 phiếu trả lời qua mail, có 5 phiếu trả lời thiếu câu hỏi về giới tính (tác giả bổ sung giới tính do chính tác giả lập danh sách từ các lý lịch khoa học của cán bộ tham gia thực hiện đề