4.1 Quá trình thực hiện phương pháp Delphi
4.1.2 Phương pháp thu thập và phân tích dữ liệu
Hình thức gửi BCH: BCH Delphi sẽ đƣợc gửi đến các chuyên gia thông qua hình thức gửi trực tiếp và email. Các chuyên gia có quyền lựa chọn hình thức thuận tiện cho mình nhất. Nhiều chuyên gia lựa chọn hình thức gửi trực tiếp để đƣợc trao đổi sâu hơn về các khía cạnh của nghiên cứu. Phần còn lại chọn hình thức gửi mail vì họ không có nhiều thời gian để gặp trực tiếp. Hơn nữa, hình thức gửi mail có ƣu điểm nữa là họ thích trả lời bất kỳ lúc nào họ muốn.
Xây dựng BCH: Quá trình xây dựng BCH Delphi đƣợc tiến hành qua 3 giai đoạn đƣợc thể hiện trong Hình 4.2.
Giai đoạn 1 Động não
Tổng hợp các giải pháp ứng phó từ tổng quan tài liệu của các nghiên cứu trước. Loại bỏ những giải pháp trùng lặp.
BCH vòng 1: Nhờ các chuyên gia liệt kê các giải pháp ứng phó có thể áp dụng đối với từng NTRRKT.
Tổng hợp giải pháp từ tất cả các chuyên gia và tổng quan tài liệu, loại bỏ những giải pháp trùng lặp.
BCH vòng 2: Gửi BCH gồm danh sách các giải pháp để các chuyên gia xác nhận. Những giải pháp có sự đồng ý của trên 50% chuyên gia sẽ đƣợc đƣa vào BCH Vòng 3.
Hoàn thiện danh sách các giải pháp cuối cùng.
Giai đoạn 2 Khảo sát
BCH vòng 3: Chủ động liên hệ trước với các chuyên gia và lần lượt gửi BCH theo cách thuận lợi nhất cho từng người.
Thu thập BCH, phân tích kết quả, kiểm định sự nhất quán của các nhóm cho từng giải pháp thông qua kiểm định phi tham số Krukall Wallis với độ tin cậy 95%.
BCH vòng 4: Bao gồm những giải pháp chƣa đạt sự nhất quán ở vòng 3 và những giải pháp bổ sung.
Tiến hành gửi BCH và phân tích đến khi đạt đƣợc sự nhất quán hoàn toàn.
Giai đoạn 3 Xếp hạng,
phân tích
Tính toán trị trung bình cho từng giải pháp.
Phân tích, đánh giá kết quả khảo sát.
Gửi báo cáo nghiên cứu đến các chuyên gia.
Hình 4.2 Quá trình thực hiện phương pháp Delphi (Dựa theo [108]) Giai đoạn 1: Động não
* BCH vòng 1: thu thập các giải pháp
Công việc đầu tiên trong giai đoạn này là tham khảo các nghiên cứu tương tự trong nước và thế giới về lĩnh vực QLRR nói chung và RR trong ngành giao thông nói riêng.
Tập hợp tất cả các giải pháp có thể áp dụng cho từng NTRRKT. Các giải pháp này đƣợc tập hợp và phân bố lần lƣợt cho 4 bên liên quan chính.
Tuy nhiên các giải pháp từ các nghiên cứu trước cũng chỉ mang tính chất tham khảo. Điều quan trọng nhất đó là làm thế nào để thu đƣợc các giải pháp thực tế của các chuyên gia một cách tốt nhất. Muốn làm đƣợc điều này, tác giả đã gặp trực tiếp các chuyên gia để trao đổi, giải thích, đƣa ra những ví dụ cụ thể giúp họ nắm rõ vấn đề. Sau đó, tác giả tiến hành gửi BCH cho từng người. BCH này được thiết kế tương đối đơn giản, gồm các câu hỏi mở, trong đó có sẵn 4 cột dành riêng cho các bên liên quan chính đƣợc thể hiện ở Phụ lục 19.
Khi phân tích kết quả phản hồi từ BCH Vòng 1, việc đầu tiên là loại bỏ những giải
pháp trùng lặp. Sau đó kết hợp với các giải pháp từ các chuyên gia cũng nhƣ từ các nghiên cứu trước, tác giả tiến hành xây dựng BCH Vòng 2. Có một điều đáng chú ý đó là có nhiều chuyên gia góp ý nên gộp 2 NTRR “Máy móc thiết bị thi công không đảm bảo” và “Hư hỏng máy móc, thiết bị thi công”. Sau khi xem xét tính khoa học và thực tiễn, tác giả quyết định gộp 2 nhân tố này thành một nhân tố duy nhất “Máy móc thiết bị thi công không đảm bảo, thường xuyên hư hỏng”.
* BCH Vòng 2: Xác nhận danh sách các giải pháp
Mục đích của BCH vòng này là nhờ các chuyên gia xác nhận danh sách những giải pháp đã tập hợp ở vòng trước. Các chuyên gia sẽ được cung cấp toàn bộ danh sách các giải pháp đã đƣợc phân bổ cho các bên liên quan chính. Và nhiệm vụ của họ là (a) xác nhận các giải pháp trên thông qua hình thức đồng ý hay không đồng ý và (b) đề xuất thêm những giải pháp khác (nếu có). Để dễ dàng hơn cho các chuyên gia nên BCH Vòng 2 chỉ dừng lại ở mức độ đồng ý hay không đồng ý. Mặt khác, vòng này cũng chỉ xem nhƣ vòng sơ loại, các giải pháp đƣợc sự đồng thuận trên 50% sẽ đƣợc đánh giá chi tiết hơn trong các vòng sau.
Nội dung BCH đƣợc trình bày trong Phụ lục 20. Có 23/24 chuyên gia phản hồi đúng hẹn. Một chuyên gia vì bận việc cá nhân nên hẹn tham gia vào vòng sau. Kết quả, có 4 giải pháp bị loại bỏ vì không đạt sự đồng thuận của 50% chuyên gia. Bên cạnh đó cũng có nhiều giải pháp đƣợc các chuyên gia bổ sung thêm. Sau khi sàng lọc những giải pháp bổ sung đó, tác giả quyết định sử dụng một số giải pháp bổ sung vào BCH Vòng 3. Kết quả của khảo sát Vòng 2 đƣợc thể hiện chi tiết trong Phụ lục 21.
Giai đoạn 2: Khảo sát * BCH Vòng 3
Nhƣ vậy, sau khi rà soát tính hợp lý của tất cả các giải pháp thông qua việc xác nhận của tất cả các chuyên gia, tác giả tiến hành thực hiện xây dựng BCH Vòng 3.
Hình 4.3 Thang đo Likert 5 đƣợc sử dụng cho BCH Delphi
BCH Vòng 3 bao gồm các giải pháp đƣợc chọn ở Vòng 2 và các giải pháp bổ sung
thêm ở Vòng 2. Ở Vòng 3, các chuyên gia đƣợc cung cấp thang đo Likert 5 để đánh giá mức độ đồng ý một cách chi tiết hơn. Theo đó, từng giải pháp sẽ đƣợc đánh giá mức độ quan trọng thông qua điểm số có đƣợc từ cuộc khảo sát. Ngoài các giải pháp đã nêu trong BCH, các chuyên gia vẫn có thể tiếp tục bổ sung thêm những giải pháp khác mà họ cảm thấy cần thiết. BCH Vòng 3 đƣợc trình bày chi tiết trong Phụ lục 22.
Kết quả Vòng 3, tất cả các chuyên gia đã phản hồi đúng thời gian dự kiến, không có chuyên gia nào bỏ cuộc.
Kiểm định phi tham sốKruskal-Wallis được sử dụng để đo lường sự nhất quán của các bên liên quan đối với các giải pháp đề xuất bằng phần mềm SPSS. Kiểm định đối với ngƣỡng có ý nghĩa thống kê là 5%. Nếu giải pháp nào có < 5%, điều đó có nghĩa là có sự khác nhau trong quan điểm của các bên liên quan, do đó cần phải đƣợc đánh giá lại. Ngƣợc lại, nếu giải pháp nào có > 5% thì không cần phải đƣa vào BCH Vòng 4. Có 2 giải pháp bị loại do trị trung bình đánh giá chung của 24 chuyên gia nhỏ hơn 3.0 và 8 giải pháp chƣa đạt đƣợc sự nhất quán ở Vòng 3 (Phụ lục 23). Kết quả chi tiết của kiểm định Kruskal-Wallis đƣợc thể hiện ở Phụ lục 24.
* BCH Vòng 4
Sau khi đã thực hiện đánh giá sự nhất quán, BCH Vòng 4 bao gồm các nhân tố chƣa đạt sự nhất quán và báo cáo kết quả khảo sát trong Vòng 3. Bên cạnh đó, trong quá trình thực hiện khảo sát ở Vòng 3, tác giả đã ghi nhận thêm những giải pháp bổ sung từ chuyên gia. Sau khi đối chiếu và rà soát lại với những giải pháp đã có, 30 giải pháp đã đƣợc bổ sung thêm vào BCH Vòng 4 (Phụ lục 25).
Trong BCH Vòng 4, các giải pháp bổ sung sẽ đƣợc bôi đậm và dùng chữ màu đỏ để các chuyên gia dễ nhận biết (Phụ lục 26). Về cơ bản, BCH Vòng 4 không có nhiều khác biệt so với Vòng 3. Thang đo Likert vẫn đƣợc sử dụng. Sau khi hoàn tất, BCH đƣợc tiếp tục gửi đến các chuyên gia.
Trong quá trình thực hiện nghiên cứu này không có chuyên gia nào bỏ cuộc sau 4 vòng. Kiểm định Kruskal Wallis đƣợc thực hiện cho những giải pháp đƣợc đánh giá trong BCH Vòng 4. Tất cả các giải pháp đều đạt đƣợc sự nhất quán của các bên liên quan với hệ số α > 5%. Kết quả đƣợc thể hiện chi tiết trong Phụ lục 27. Quá trình khảo
sát Delphi kết thúc và bắt đầu chuyển sang giai đoạn phân tích dữ liệu.
Giai đoạn 3: Phân tích, đánh giá
Quá trình phân tích, đánh giá bắt đầu bằng việc tổng hợp lại kết quả sau Vòng 3 và Vòng 4. Những giải pháp đã đạt sự nhất quán ở Vòng 3 thì kết quả đánh giá ở Vòng 3 chính là kết quả dùng để phân tích cuối cùng. Có 8 giải pháp chƣa đạt sự nhất quán cùng với các giải pháp bổ sung thì sử dụng kết quả ở Vòng 4.
Căn cứ vào kết quả phân tích đánh giá ở Vòng 3 và Vòng 4, các giải pháp ứng phó đối với từng NTRRKT mà đạt đƣợc sự nhất quán của các chuyên gia thì sẽ đƣợc chọn để xây dựng hệ thống giải pháp ứng phó đối với từng NTRRKT đó.