1.3.1. Qỳa trỡnh chuyển ngữ và hoàn thiện thang đo. [37][38][39][40][41][42]
Theo tổ chức y tế thế giới (WHO) mục đớch của quỏ trỡnh chuẩn húa một bộ cụng cụ nghiờn cứu là bao gồm quỏ trỡnh chuyển ngữ và điều chỉnh/thớch ứng (adaptation) bộ cụng cụ, là đạt được một phiờn bản ngụn ngữ khỏc từ bộ cụng cụ bằng tiếng Anh. Trọng tõm của quỏ trỡnh đú là giữ được nội dung thang đo, đảm bảo về cấu trỳc ngụn ngữ, cỏc khỏi niệm và cỏc yếu tố văn húa. Một bộ cụng cụ ỏp dụng tốt phải cú độ tin cậy và giữđược tớnh tự nhiờn và chấp nhận được bởi một cộng đồng.
Quy trỡnh thực hiện chuẩn húa một bộ cụng cụ gồm 4 bước:
1. Chuyển ngữthang đo sang tiếng Việt
2. Một ban chuyờn gia xem xột bản dịch và dịch ngược lại. 3. Làm khảo sỏt thử nghiệm và đỏnh giỏ quỏ trỡnh phỏng vấn 4. Bản dịch hoàn thiện
Bước 1: Chuyển ngữthang đo sang tiếng Việt
Thường do hai chuyờn gia hoặc tỏc giả nghiờn cứu thực hiện dịch độc lập. Họ phải cú ngoại ngữ tiếng Anh và cú nhiều hiểu biết vềvăn húa đú. Phương cỏch tiếp cận bản dịch là nhấn mạnh tớnh văn húa, ngụn ngữ tự nhiờn nhất cú thể để cú bản dịch cú thể được sử dụng rộng rói. Chỳ ý cần được xem xột trong quỏ trỡnh này: Người dịch phải luụn hướng đến khỏi niệm tương đồng của một từ hoặc cụm từ, nờn xem xột định nghĩa của thuật ngữ gốc và cố gắng dịch nú theo cỏch phự hợp nhất. Người dịch phải dịch đơn giản, rừ ràng và sỳc tớch cõu chữ. Cõu văn rừ ràng, đơn giản nhất cú thể trỏnh cõu dài, cõu phức đa nghĩa.
Bước 2: Một ban chuyờn gia xem xột bản dịch và dịch ngược lại.
Thường do chuyờn gia cú cả ngụn ngữ Anh và Việt Nam xem xột chỉnh sửa bản dịch xuụi: Xỏc định và thống nhất cỏc khỏi niệm, vấn đề và cỏc thuật ngữ dịch chưa chuẩn xỏc, cũng như bất kỳ sự khỏc biệt nào giữa bản dịch và cỏc phiờn bản hiện tại hoặc cú thểso sỏnh trước đú, cũng như tỡm cỏc khỏi niệm, cỏc lựa chọn thay thế. Sốlượng chuyờn gia trong ban tựy thuộc, nhưng phải bao gồm tỏc giả dịch gốc, chuyờn gia về y, và chuyờn gia cú kinh nghiệm về phỏt triển cụng cụ và dịch thuật như ngụn ngữ, tõm lý. Dịch ngược: Sử dụng cỏch tiếp cận tương tự như bước một,
thang đo sẽ được dịch ngược lại sang tiếng Anh bởi một dịch giả độc lập, cú tiếng mẹđẻ là tiếng Anh hoặc (hiểu biết rừ vềvăn húa bản địa) và khụng cú kiến thức về lĩnh vực liờn quan thang đo. Nếu cú sự khỏc biệt thỡ sẽ cú buổi thảo luận với ban chuyờn gia đểđạt được một kết luận thống nhất, một thang đo hoàn chỉnh.
Bước 3: Làm khảo sỏt thử nghiệm và đỏnh giỏ quỏ trỡnh phỏng vấn
Phỏng vấn một mẫu dõn số nhất định là cần thiết để đỏnh giỏ thang đo về qỳa trỡnh dịch thuật và để điều chỉnh, sửa đổi chi tiết. Mỗi trắc nghiệm/ cụm trắc nghiệm nờn phỏng vấn tối thiểu 10 người, gồm cả hai giới, cỏc nhúm tuổi, đa dạng về thành phần kinh tế xó hội khỏc nhau. Và cú những chỳ ý khi thực hiện phỏng vấn như: cỏch đặt cõu hỏi, cú vấn đề gỡ tế nhị gõy khú chịu cho người bệnh, người phỏng vấn cú kinh nghiệm… Trong phần này sẽ thực hiện đỏnh giỏ tớnh giỏ trị và độ tin cậy của thang đo.
Bước 4: Bản dịch hoàn thiện
Sau khi thực hiện cỏc bước trờn tỏc giả của nghiờn cứu sẽ tập hợp, chỉnh sửa lại theo cỏc ý kiến gúp ý để hoàn thiện thang đo.
1.3.2. Cỏc nguyờn tắc cơ bản của quỏ trỡnh chuẩn húa thang đo.
Trong cỏc nghiờn cứu về chuẩn húa cụng cụ cỏc cõu hỏi về chuẩn húa đặt ra khi nghiờn cứu:
- Giỏ trị nội dung (Content validity): Thang đo này nội dung cú bao phủ được cỏc vấn đề cần nghiờn cứu khụng?
đề chỳ ý trong này là cỏc lý thuyết rừ ràng, cú hội đồng chuyờn gia xõy dựng và tuõn theo những quy trỡnh chuẩn.
Độ tin cậy về tớnh ổn định bờn trong cấu trỳc thang đo:
- Độ tin cậy cao khi chỉ sốCronback ’s alpha > 0,7;
- Tương quan cao với cỏc lĩnh vực khỏc khi chỉ sốCronback ’s alpha > 0,4; - Chỉ sốCronback ’s alpha < 0,4: khụng cú tớnh tương quan giữa cỏc lĩnh vực bờn trong thang đo.
Độ tin cậy và tớnh giỏ trị là hai vấn đề cốt lừi và độc lập khi chuẩn húa một thang đo. Tớnh giỏ trịthường coi là mức độ chớnh xỏc thỡ độ tin cậy là khảnăng đỳng cao nhất.
* Tớnh giỏ trị (Validity) của thang đo:
Tớnh giỏ trị là mức độ mà một thang đo ngụn ngữ cú khảnăng đo lường cỏi mà nú dự định đo lường. Một nghiờn cứu cú giỏ trị nếu cỏc kết quả của nú tương ứng với sự thật: nghiờn cứu khụng được cú sai số hệ thống, và sai số ngẫu nhiờn càng nhỏ càng tốt.
- Giỏ trị nội dung (content validity): Giỏ trị nội dung là cỏc trắc nghiệm của thang đo đú được trỡnh bày như thế nào, sự bao phủ vấn đề nghiờn cứu. Khi thiết kế nội dung thang đo ngụn ngữ thỡ cấu trỳc nội dung, sự liờn kết phải đảm bảo phự hợp với cỏc lĩnh vực ngụn ngữ. Đồng thời cũng xem xột về tớnh toàn diện và phự hợp cho mỗi độ tuổi.
- Giỏ trị cấu trỳc (construct validity): Giỏ trị cấu trỳc là đỏnh giỏ liệu rằng thang đo cú đo lường được những gỡ nú dự định đo lường hay khụng. Xem xột cỏc trắc nghiệm cụ thể về cấu trỳc, mối tương quan với cỏc trắc nghiệm khỏc, cỏc nhúm nghiờn cứu khỏc nhau và tỏc động của can thiệp lờn điểm số như thế nào. Để đỏnh giỏ tớnh giỏ trị về cấu trỳc của thang đo thường sử dụng phương phỏp phõn tớch yếu tố khẳng định (CFA) với thang đo chuyển ngữ và chỉnh sửa. Với thang đo xõy dựng mới thường sử dụng phương phỏp phõn tớch yếu tốthăm dũ (EFA).
- Giỏ trị tiờu chuẩn (criterion validity): Cỏc cõu hỏi trắc nghiệm khi đỏnh giỏ theo mốc tuổi thỡ cú phự hợp hay khụng, cú sự phõn biệt giữa cỏc nhúm khỏc nhau
hay khụng, điểm số thể hiện như thế nào. Đỏnh giỏ sử dụng độ nhạy (sensitivity) và độđặc hiệu (specificity).
- Giỏ trị bề mặt (face validity): Khụng cú chỉ số đỏnh giỏ nhưng rất hữu ớch trong chuẩn húa thang đo. Thụng thường khi xõy dựng một bộ cụng cụ mới thỡ cần đỏnh giỏ đầy đủ cỏc giỏ trị trờn [39][40][41][42].
Đường cong ROC: Từ ROC (Receiver Operating Characteristic) bắt nguồn từ lĩnh vực vật lý được gọi là thuyết phỏt hiện tớn hiệu (Signal detection theory). Từ sau những năm 1970, thuyết phỏt hiện tớn hiệu này dược dựng để diễn dịch kết quả cỏc test trong chẩn đoỏn y học. Mỗi điểm trờn đường cong ROC là tọa độtương ứng với tần suất dương tớnh thật (độ nhạy) trờn trục tung và tần suất dương tớnh giả (1-độ đặc hiệu) trờn trục hoành. Đường biểu diễn càng lệch về phớa bờn trờn và bờn trỏi thỡ sự phõn biệt giữa 2 trạng thỏi (vớ dụ cú bệnh hoặc khụng bệnh) càng rừ. Độ chớnh xỏc (accuracy) được đo lường bằng diện tớch dưới đường cong ROC. Nếu diện tớch bằng 1 là test rất tốt và nếu bằng 0,5 thỡ test khụng cú giỏ trị. Xỏc định đơn giản mức độ chớnh xỏc của test chẩn đoỏn dựa vào hệ thống điểm:
0,80 - 0,90 = tốt (A)
0,60 - 0,70 = tạm được (B) 0,50 - 0,60 = khụng giỏ trị (C)
Trong cỏc thang đo chẩn đoỏn bệnh, đường cong ROC được dựng để tỡm điểm ngưỡng chẩn đoỏn (cut - off) của cỏc biến định lượng cú giỏ trị phõn biệt hai trạng thỏi bệnh và khụng bệnh tốt nhất, cú nghĩa là tỡm ngưỡng (threshold) cú độ nhạy và độ đặc hiệu cao nhất [44][45][46][47].
* Về độ tin cậy: Một bộ cụng cụ là đỏng tin cậy nếu cỏc phộp đo của nú phự hợp và chớnh xỏc hoặc gần “giỏ trị đỳng” nhất. Độ tin cậy là cỏc giỏ trị quan sỏt được. Đú là giỏ trị đỳng và lỗi đo lường, cỏc lỗi cú trị số càng thấp thỡ độ tin cậy càng cao và ngược lại. Cú nhiều cỏch đo lường độ tin cậy như chỉ số tương quan Pearson, Kappa.
Độ tin cậy kiểm tra lại (test-retest): là thước đo sử dụng để thể hiện mức độổn định của điểm kiểm tra theo thời gian, đỏnh giỏ sự đỏp ứng với hai thời điểm khảo
sỏt khỏc nhau. Độ tin cậy được đo bằng sựtương quan điểm số giữa hai lần đỏnh giỏ này. Sựtương quan càng caothỡ độổn định của thang đo càng lớn.
Độ ổn định trong (internal consistency): Một phương phỏp đo độ ổn định bờn trong rất phổ biến hiện nay là bằng hệ số Cronback’s alpha. Độ tin cậy phụ thuộc vào số lượng trắc nghiệm trong thang đo. Nếu thang đo cú dưới 10 trắc nghiệm thỡ hệ sốtương quan trong chỉđạt 0,2 và độ tin cậy là 0,714. Tuy nhiờn khi thang đo cú sốlượng trắc nghiệm trờn 20 trởlờn thỡ độ tin cậy sẽđảm bảo hơn.
Độ tin cậy về sự thống nhất khi đỏnh giỏ (agreement reliability): thường dựng khi một thang đo cú hai người trở lờn cựng thực hiện, dựng chỉ số Weighted Kappa đểđo lường, kết quả chỉ số > 0,75 là rất tốt; > 0,4 là khỏ. [43][47][48].