7. Kết cấu của khóa luận
1.3.4. Những khó khăn trong đánh giá chính sách cải cách TTHC
Một trong những thách thức chính trong việc xác định các yếu tố thúc đẩy hiệu quả cải cách TTHC có liên quan đến bản chất vô hình của dịch vụ. Ví dụ, rất khó xác định đầu ra của dịch vụ (Filipo, 1988). Hơn nữa, các hình thức vốn trí tuệ khác nhau rõ ràng có tác động thiết yếu đến hiệu quả cải cách TTHC. Ví dụ, cường độ lao động trong việc cung cấp nhiều dịch vụ có nghĩa là các yếu tố, như năng lực và động lực của nhân viên, cần được tính đến trong việc xác định
các phương tiện để cải thiện hiệu quả. Do đó, hiệu quả cải cách TTHC dường như là một lĩnh vực màu mỡ để nghiên cứu về vô hình và vốn trí tuệ.
Việc thiếu cơ chế thị trường và thực tế là nhiều dịch vụ công có thể được coi là độc quyền hỗ trợ kiểm tra hiệu suất tổ chức rộng hơn để đảm bảo chắc chắn mức chất lượng. Nó đã được ghi nhận trong các nghiên cứu về hiệu suất dịch vụ công rằng các khung từ khu vực tư nhân (như Thẻ điểm cân bằng) có thể không bao gồm tất cả các yếu tố của hiệu suất tổ chức quan trọng đối với các tổ chức công cộng (Talbot, 1999).
1.4. Các mô hình và phương pháp đánh giá hiệu quả chính sách cải cách TTHC
1.4.1. Các mô hình đánh giá chính sách cải cách TTHC
1.4.1.1. Mô hình đánh giá hiệu suất
Boyne (2002) trình bày các quan điểm sau đây về hiệu suất dịch vụ công: đầu ra (số lượng và chất lượng), hiệu quả (chi phí cho mỗi đơn vị đầu ra), kết quả dịch vụ (ví dụ hiệu quả và tác động chính thức), đáp ứng (ví dụ sự hài lòng của nhân viên, sự hài lòng của người dân) và dân chủ kết quả (ví dụ như xác suất và sự tham gia). Những gì phân loại này không trình bày rõ ràng là mối liên kết giữa các yếu tố khác nhau của hiệu suất tổ chức. Tuy nhiên, một số quan điểm như đầu ra, kết quả và hiệu quả là thú vị từ công chúng quan điểm hiệu quả cải cách TTHC. Có hai mô hình hiệu suất tổ chức khá phổ biến của các tổ chức công cộng bao gồm một chuỗi các bước trong quy trình sản xuất dịch vụ. Những mô hình này là 3Es (kinh tế -> hiệu quả -> hiệu quả) và IOO (đầu vào -> đầu ra -> kết quả) (Boyne, 2002; Midwinter, 1994). Những mô hình này có liên quan nhưng không hoàn toàn phù hợp (Midwinter, 1994).
Theo (Midwinter, 1994) và Boyne (2002), mô hình IOO bao gồm tất cả các yếu tố của mô hình 3Es trong khi đầu vào bao gồm chi tiêu, hiệu quả là tỷ lệ đầu ra so với đầu vào và kết quả bao gồm hiệu quả. Đầu vào có thể bao gồm chi tiêu, nhân sự và thiết bị, đầu ra có thể bao gồm số lượng và chất lượng (ví dụ: tốc độ) của dịch vụ và kết quả có liên quan đến, ví dụ: hiệu quả chính thức của một dịch vụ và tác động và công bằng của nó.
Stainer & Stainer (1998) đã trình bày một mô hình hiệu quả cải cách TTHC công cộng liên quan chặt chẽ đến hai mô hình được kiểm tra ở trên. Đầu vào tài nguyên thường được đo bằng chi phí, đầu ra là lợi ích nhận được là kết quả ngay lập tức của các quy trình.
1.4.1.2. Mô hình hài lòng của người dân
Mô hình đánh giá hiệu quả chính sách cải các TTHC dựa trên mô hình đánh giá sự hài lòng về chất lượng dịch vụ của người sử dụng dịch vụ. Sự hài lòng của người sử dụng là phản ứng của họ về sự khác biệt cảm nhận của người dân giữa kinh nghiệm đã biết và sự mong đợi (Parasuraman và cộng sự, 1988). Theo Philip Kotler (1991), sự thỏa mãn - hài lòng là mức độ trạng thái cảm giác của một người bắt nguồn từ việc so sánh kết quả thu được từ việc tiêu dùng sản phẩm/dịch vụ với những kỳ vọng của chính họ. Theo lý thuyết về sự thỏa mãn chất lượng dịch vụ của Parasuraman và cộng sự (1988), sự thỏa mãn chất lượng được đo lường bằng hiệu số giữa chất lượng mong đợi và chất lượng cảm nhận của người dân.
Dựa vào mô hình và thang đo của Parasuraman (1988), Cronin và Taylor (1992), tác giả đề xuất mô hình nghiên cứu hiệu quả chính sách công áp dụng đối với các lĩnh vực cụ thể gồm 6 yếu tố ảnh hưởng đến sự hài lòng của người dân về chính sách công (áp dụng đối với CCHC) bao gồm: Tính hiệu quả, Tính tiện ích, Dễ sử dụng, An toàn dữ liệu, Sự tin cậy, Sự sẵn sàng của hệ thống dịch vụ.
1.4.2. Phương pháp nghiên cứu định lượng đánh giá tác động chính sách cải cách TTHC
1.4.2.1. Mục tiêu nghiên cứu tác động chính sách cải cách TTHC - Xác định tình huống phản thực (counterfactual):
Trong nghiên cứu tác động chính sách, xác định tình huống phản thực là giai đoạn quan trọng. Xác định tình huống phản thực là so sánh “thực tế” với "phản thực tế", tức là phải trả lời câu hỏi nếu không có tác động chính sách cải cách TTHC thì đối tượng trong nhóm can thiệp chính sách cải cách TTHC có thay đổi tương đương với đối tượng trong nhóm đối chứng hay không. Tình huống phản thực phải thỏa mãn:
(1). Nhóm đối chứng không nhận được chính sách cải cách TTHC, không bị tác động từ xa bởi chính sách cải cách TTHC.
(2). Nhóm tác động chính sách cải cách TTHC ban đầu khi chưa có chính sách cải cách TTHC càng giống nhóm đối chứng càng tốt.
Ví dụ, khi chưa có tác động chính sách cải cách TTHC cải cách TTHC, hai nhóm tác động chính sách cải cách TTHC và không chịu tác động chính sách cải cách TTHC có sự hài lòng tương đồng hay “ngang bằng”, tức là cả hai nhóm trước can thiệp có cùng một mức quan sát (trong trường hợp này là Y0). Sau khi can thiệp của chính sách cải cách TTHC, nhóm can thiệp có mức độ hài lòng
được coi là Y2 còn mức hài lòng của nhóm đối chứng là Y1. Do vậy, hiệu quả của can thiệp chính sách cải cách TTHC có thể được thể hiện bằng (Y2 – Y1).
-Tính toán hiệu quả can thiệp bình quân (ATE):
Mục tiêu của nghiên cứu tác động chính sách cải cách TTHC là tính toán tác động can thiệp trung bình ATE. Trong nghiên cứu tác động chính sách cải cách TTHC, ATE là chỉ số dùng đánh giá của các can thiệp chính sách cải cách TTHC. ATE được ước tính từ một mẫu ngẫu nhiên bằng cách sử dụng so sánh kết quả trung bình cho các đơn vị được can thiệp và không được can thiệp. ATE thực chất là chỉ số so sánh quan hệ nhân quả mà nhà nghiên cứu muốn biết chính sách cải cách TTHC có tác động đến nhóm can thiệp như mục tiêu đặt ra hay không.
Để xác định chính thức ATE, chúng tôi xác định hai kết quả tiềm năng: là giá trị của biến kết quả cho từng đối tượng quan sát nếu họ không được can thiệp bởi chính sách cải cách TTHC, là giá trị của biến kết quả cho từng đối tượng quan sát nếu họ được can thiệp bởi chính sách cải cách TTHC. Ví dụ là tình trạng hài lòng về chính sách cải cách TTHC cải cách TTHC của đối tượng quan sát nếu họ không được sử dụng dịch vụ hành chính công quy định bởi chính sách cải cách TTHC và là tình trạng hài lòng về chính sách cải cách TTHC cải cách TTHC nếu họ được thụ hưởng chính sách cải cách TTHC.
Hiệu quả can thiệp bởi chính sách cải cách TTHC cho đối tượng quan sát được đưa ra bởi hàm số 1:
. (1)
ATE được tính toán bởi hàm số 2 đối với toàn bộ các quan sát:
(2)
Nếu chúng ta có thể quan sát, đối với mỗi đối tượng quan sát và trong một mẫu quan sát đại diện lớn, có thể ước tính ATE đơn giản bằng cách lấy giá trị trung bình của trên toàn mẫu. Tuy nhiên, chúng ta không thể quan sát cả hai và cho mỗi đối tượng quan sát vì một đối tượng quan sát không thể vừa được can thiệp bởi chính sách cải cách TTHC vừa không được can thiệp bởi chính sách cải cách TTHC. Ví dụ, trong ví dụ về thuốc, chúng ta chỉ có thể quan sát cho những người đã nhận được thuốc và những người không nhận được nó. Đây là vấn đề chính mà các nhà khoa học phải đối mặt trong việc đánh giá hiệu quả can thiệp bởi chính sách cải cách TTHC và đã kích hoạt một lượng lớn các kỹ thuật ước lượng (Holland, Paul W., 1986).
- Tính toán hiệu quả can thiệp trên đối tượng được can thiệp (TOT):
Hiệu quả can thiệp trên đối tượng được can thiệp (TOT) cũng là mục tiêu của nghiên cứu tác động chính sách cải cách TTHC. Khác với chỉ số hiệu quả can thiệp bình quân ATE, Hiệu quả can thiệp trên đối tượng được can thiệp TOT là chỉ số hiệu quả trung bình tính toán tác động của chính sách cải cách TTHC trong nhóm đối tượng nằm trong vùng tác động chính sách cải cách TTHC. Ví dụ: hiệu quả của can thiệp trung bình của chính sách cải cách TTHC cải cách TTHC lên tất cả các cá nhân trong vùng can tiệp chính sách cải cách TTHC.
Giả sử nhóm được chính sách cải cách TTHC can thiệp . Mỗi đối tượng quan sát có các kết quả tiềm năng tương ứng tác động bởi chính sách cải cách TTHC và
TOT được tính toán bởi phương trình 3 cho toàn bộ mẫu:
(3)
TOT được tính toán bởi phương trình 4 đối với đối với nhóm được chính sách cải cách TTHC can thiệp:
(4)
1.4.2.2. Các phương pháp định lượng tác động chính sách cải cách TTHC
- Phương pháp chọn mẫu ngẫu nhiên:
Phương pháp này tính toán sự can thiệp của chính sách cải cách TTHC dựa trên mẫu ngẫu nhiên nhằm tránh tình trạng sai số lựa chọn, với điều kiện các tác động của chính sách cải cách TTHC được khảo sát ở mức độ ngẫu nhiên. Phương pháp này tính toán như sau:
Hiệu quả can thiệp bình quân (ATE) giữa các đơn vị tham gia và đối chứng
Hiệuquả can thiệp trên đối tượng được can thiệp (TOT), là một chỉ số hẹp hơn cho phép so sánh giữa các đơn vị tham gia và nhóm đối chứng, với điều kiện đối tượng tham gia ở khu vực có can thiệp.
Bản chất của phương pháp chọn mẫu ngẫu nhiên thể hiện ở việc chọn ra một mẫu đối tượng ngẫu nhiên từ quần thể phù hợp, sau đó các đối tượng quan sát trong mẫu được phân bổ ngẫu nhiên vào nhóm can thiệp và đối chứng. Sau đó tính toán hiệu quả can thiệp trung bình theo phương trình 5:
ATE = E[Yi(1) – Yi(0)] (5)
Một trong những giả định trong phương trình 5 là mọi quan sát trong quần thể đều có cơ hội được chọn ngang nhau.
Nếu chọn mẫu không ngẫu nhiên và chỉ quan sát trên một mẫu nhỏ từ quần thể, E[Yi(1)] sẽ không nhất thiết bằng E[Yi(1)|Ti = 1] và E[Yi(0)] không nhất thiết bằng E[Yi(0)|Ti = 0].
Có hai loại chọn mẫu ngẫu nhiên là chọn mẫu ngẫu nhiên thuần túy và chọn mẫu ngẫu nhiên bán phần:
Các bước thực hiện chọn mẫu ngẫu nhiên thuần túy gồm: Bước 1: Chọn mẫu ngẫu nhiên từ quần thể cần quan tâm
Bước 2: Mẫu thực nghiệm được phân chia ngẫu nhiên thành hai nhóm: a) nhóm can thiệp có tiếp cận can thiệp chính sách cải cách TTHC, và b) nhóm đối chứng không tiếp nhận chính sách cải cách TTHC.
Bước 3: Tính hiệu quả can thiệp bằng phương pháp bình phương tối thiểu (OLS).
và chọn mẫu ngẫu nhiên bán phần. Do chọn mẫu ngẫu nhiên thuần túy rất khó thực hiện trong thực tế, nên chọn mẫu ngẫu nhiên không thuần túy (hay bán phần) được thay thế. Trong đó các ví dụ can thiệp và đối chứng được chọn ngẫu nhiên, dựa trên một số đặc trưng được quan sát X (chẳng hạn, sở hữu đất đai hay thu nhập…).
Tính toán tác động can thiệp bằng phương pháp bình phương tối thiểu OLS với tập hợp dữ liệu cả nhóm can thiệp và không can thiệp bởi chính sách cải cách TTHC. Có hai cách chọn mẫu ngẫu nhiên:
Chọn vượt mức: Nếu chính sách cải cách TTHC chỉ có nguồn lực hạn chế thì có thể phân bổ ngẫu nhiên hoạt động triển khai cho một phân nhóm đối tượng đạt tiêu chuẩn, còn số đối tượng đạt tiêu chuẩn còn lại không được tiếp nhận chính sách cải cách TTHC có thể được coi là nhóm đối chứng.
Ngẫu nhiên từng bước: phương thức này tham gia dần dần vào chính sách cải cách TTHC trên một loạt các khu vực đạt tiêu chuẩn, trong khi các nhóm đối chứng đại diện cho các khu vực đạt tiêu chuẩn vẫn chờ tiếp nhận chính sách cải cách TTHC.
Ngẫu nhiên trong nội bộ nhóm: Tuy vậy, trong phương thức ngẫu nhiên từng bước, nếu độ trễ từ lúc bắt đầu chính sách cải cách TTHC đến khi thực sự nhận được các lợi ích lớn thì có thể nảy sinh nhiều tranh luận hơn về việc khu vực nào cần được tiếp nhận chính sách cải cách TTHC trước.
Thiết kế khuyến khích: Thay vì chọn ngẫu nhiên can thiệp, các nhà nghiên cứu gán ngẫu nhiên đối tượng với một tuyên bố hay sáng kiến để được tham gia chính sách cải cách TTHC. Một số thông báo về chính sách cải cách TTHC sẽ được cung cấp trước (trong thời gian điều tra ban đầu để tiết kiệm chi phí hay thời điểm nào đó trước khi triển khai chính sách cải cách TTHC cho một nhóm nhỏ ngẫu nhiên đối tượng thụ hưởng đủ tiêu chuẩn. Hiệu ứng lan tỏa cũng có thể được tính toán dễ dàng trong trường hợp này nếu có thu thập dữ liệu về các mạng lưới xã hội của đối tượng quan sát nhận được thông báo, để biết được tỉ lệ tham gia có khác biệt gì giữa các hộ có liên hệ hay không có liên hệ.
Các vấn đề trong chọn mẫu ngẫu nhiên:
Vấn đề đạo đức: Hạn chế can thiệp nhất định đối với một tập hợp ngẫu nhiên và cho phép nhóm ngẫu nhiên khác được nhận can thiệp.
Tính hợp lý ngoại tại: những tác động xác định được từ dự án thí điểm có thể không phải là chỉ báo chính xác về tác động của dự án trên phạm vi toàn quốc.
Tuân thủ nảy sinh khi có một bộ phận đối tượng quan sát được mời tham gia can thiệp không tham gia. Ngược lại, một số thành viên trong nhóm đối chiếu lại được tiếp nhận can thiệp.
Những hiệu ứng lan tỏa sẽ phát sinh khi can thiệp tác động đến cả nhóm đối chứng lẫn mẫu tham gia, do đó gây nhiễu trong tính toán tác động chính sách cải cách TTHC.
Tác dụng của điều tra ban đầu: Lợi ích: Tạo điều kiện cho phép khảo cứu mối liên hệ giữa các điều kiện ban đầu và tác động của chính sách cải cách TTHC; Có ích khi thực hiện thực nghiệm chính sách cải cách TTHC, vì ở các khu vực can thiệp có thể đã có những chính sách cải cách TTHC hay hoạt động tương tự trước khi triển khai chính sách cải cách TTHC mới; Cho phép kiểm tra xem việc chọn mẫu ngẫu nhiên có được thực hiện hợp lý hay không. Bất lợi: Có thể sẽ tốn kém và phải được thực hiện một cách thận trọng; có thể dẫn đến sai số trong tác động chính sách cải cách TTHC do làm biến đổi các tình huống phản thực.
Vướng mắc trong Chọn mẫu ngẫu nhiên: Những yếu tố bối cảnh ở những nơi này thường phổ biến đến mức có thể gây nhiễu cho quá trình triển khai ngẫu nhiên và tiếp đến là chất lượng của các tác động chính sách cải cách TTHC; Việc thực nghiệm thực địa ngẫu nhiên các chính sách cải cách TTHC phúc lợi tiền mặt ở Mỹ đã hạn chế mức độ hợp lý ngoại tại bằng cách làm rõ ảnh hưởng của các chính sách cải cách TTHC tương tự ở tầm quốc gia.
- So sánh điểm xu hướng (PSM):
Hiệu quả của một chính sách cải cách TTHC có thể được đánh giá thông qua sự chênh lệch trong kết quả giữa nhóm bị tác động và nhóm đối chứng ở cùng kì quan sát. Để kết quả đánh giá được tin cậy đòi hỏi các đối tượng so sánh phải có sự tương đồng về một số đặc điểm cơ bản (covariates). Cụ thể, từ các đặc điểm cơ bản của đối tượng chúng ta sử dụng các mô hình logit hoặc probit để ước tính điểm xu hướng cho các đối tượng, từ đó hình thành mẫu so khớp để