Xây dựng khung chất lượng và các chỉ tiêu chất lượng tại Cục Thống kê Lao động

Trong hai năm qua, Văn phòng Giá cả và Điều kiện sống (OPLC) của Cục Thống kê Lao động Hoa Kỳ đã thực hiện một dự án để xác định khung chất lượng cho bốn chương trình giá. Sáng kiến này bắt đầu với việc xem xét lại các khái niệm và khung chất lượng; chúng tôi tóm tắt những phát hiện từ nỗ lực đó, phân biệt giữa chất lượng sản phẩm và chất lượng quy trình và xem xét các biện pháp chất lượng liên quan. Sau đó, các nhà quản lý chương trình OPLC đã báo cáo các biện pháp và biến số mà họ theo dõi như một phần nỗ lực của họ để đánh giá chất lượng. Điều nổi lên là sự phân chia giữa tầm quan trọng tương đối lớn hơn trong tài liệu chất lượng về chất lượng đầu ra và giảm tổng sai số điều tra và theo dõi cân bằng hơn cả về các biện pháp chất lượng đầu ra và các biện pháp vận hành chi tiết về chất lượng của quy trình tác nghiệp điều tra - đầu vào để phát triển đầu ra chất lượng cao. Dựa trên nhận thức này, OPLC đã phát triển một khung đồng thuận cho bốn chương trình kết hợp cả các biện pháp chất lượng đầu vào (quy trình) và đầu ra (sản phẩm). Những gì nổi lên từ nỗ lực này là một khung áp dụng các phương pháp kiểm soát quy trình thống kê hỗn hợp đến chất lượng với các khung quản lý chất lượng truyền thống được sử dụng trên nhiều cơ quan thống kê.

THỐNG KÊ QUỐC TẾ VÀ HỘI NHẬP XÂY DỰNG KHUNG CHẤT LƯỢNG VÀ CÁC CHỈ TIÊU CHẤT LƯỢNG TẠI CỤC THỐNG KÊ LAO ĐỘNG Michael Horrigan, Polly Phipps, Scott Flicker Cục Thống kê Lao động, Massachusetts Ave N.E., Washington, DC 20212 Tóm tắt: Trong hai năm qua, Văn phịng Giá Điều kiện sống (OPLC) Cục Thống kê Lao động Hoa Kỳ thực dự án để xác định khung chất lượng cho bốn chương trình giá Sáng kiến bắt đầu với việc xem xét lại khái niệm khung chất lượng; chúng tơi tóm tắt phát từ nỗ lực đó, phân biệt chất lượng sản phẩm chất lượng quy trình xem xét biện pháp chất lượng liên quan Sau đó, nhà quản lý chương trình OPLC báo cáo biện pháp biến số mà họ theo dõi phần nỗ lực họ để đánh giá chất lượng Điều lên phân chia tầm quan trọng tương đối lớn tài liệu chất lượng chất lượng đầu giảm tổng sai số điều tra theo dõi cân biện pháp chất lượng đầu biện pháp vận hành chi tiết chất lượng quy trình tác nghiệp điều tra - đầu vào để phát triển đầu chất lượng cao Dựa nhận thức này, OPLC phát triển khung đồng thuận cho bốn chương trình kết hợp biện pháp chất lượng đầu vào (quy trình) đầu (sản phẩm) Những lên từ nỗ lực khung áp dụng phương pháp kiểm sốt quy trình thống kê hỗn hợp đến chất lượng với khung quản lý chất lượng truyền thống sử dụng nhiều quan thống kê Từ khóa: Tổng sai số điều tra, quản lý chất lượng, kiểm sốt quy trình thống kê Giới thiệu Cục Thống kê Lao động Hoa Kỳ (BLS) quan tìm hiểu thực tế Chính phủ Liên bang lĩnh vực rộng lớn kinh tế lao động điều kiện lao động Đầu quan trọng phân loại thành bốn khía cạnh - giá cả; việc làm thất nghiệp; bồi thường điều kiện làm việc; suất - với nhiều chương trình khía cạnh Đã có nhiều cơng trình đáng kể nhiều thập kỷ trở lại việc phát triển số liệu chất lượng cho chương trình BLS khác nỗ lực định kỳ để phát triển mô hình cơng cụ tồn Cục để đánh giá chất lượng (ví dụ, Dippo, 1997) Tuy nhiên, khơng tồn khung đánh giá chất lượng tồn diện có hệ thống Cục Bài viết tóm tắt nỗ lực BLS OPLC để tạo khung chất lượng cho bốn chương trình điều tra: Điều tra Chi tiêu người tiêu dùng (CE), số giá tiêu dùng (CPI), số giá sản xuất (PPI) Chương trình Giá quốc tế (IPP) Dự án đạo Phó ủy viên BLS OPLC, Michael Horrigan, nỗ lực củng cố, tối ưu hóa ghi lại quy trình chất lượng chương trình Cơng việc thúc đẩy việc cơng nhận lượng chương trình áp dụng nhiều tiêu chất 21  cho quy trình nội cho đầu tương ứng họ có khơng qn phạm vi bao phủ chiều sâu chương trình Trước phát triển khung chung cho quy trình sản xuất nội chất lượng đầu ra, OPLC liên hệ với Văn phòng Nghiên cứu Phương pháp điều tra (OSMR) BLS yêu cầu tóm tắt loại khung chất lượng tồn hệ thống thống kê Hoa Kỳ, cộng đồng thống kê quốc tế tổ chức khu vực tư nhân tham gia thu thập phổ biến liệu Sau xem xét mở rộng quy trình cịn tồn đồng tác giả OSMR cung cấp cho viết này, Scott Fricker Polly Phipps, ban quản lý OPLC phát triển khung đồng thuận biện pháp chất lượng để hướng dẫn đánh giá quy trình tác nghiệp điều tra nội kết thống kê tạo chương trình Bài viết báo cáo nỗ lực Phần cung cấp tóm tắt đánh giá OSMR tài liệu chất lượng Phần báo cáo tranh luận bốn chương trình OPLC để đạt đồng thuận Phần tóm tắt khung đồng thuận số liệu chất lượng kết tranh luận Khung chất lƣợng BLS quan thống kê liên bang khác Hoa Kỳ cam kết mạnh mẽ để tạo số liệu thống kê chất lượng Nhưng, ý nghĩa “chất lượng” chúng tơi gì? Ở phần chúng tơi xem xét khái niệm khác chất lượng thống kê chất lượng điều tra, xem xét hai khung chất lượng phổ biến tổ chức thống kê áp dụng Chúng mô tả tiêu chuẩn hướng dẫn Văn phòng Quản lý Ngân sách Hoa Kỳ (OMB), quan chịu trách nhiệm giám sát đo lường chất lượng chương trình, sách quy trình quan liên bang 22 2.1 Đánh giá khung chất lƣợng Có hai khung khái niệm liên quan đến chất lượng thống kê chất lượng điều tra Đầu tiên khung tổng sai số điều tra (TSE), bắt nguồn từ tài liệu thống kê truyền thống đặc biệt tập trung vào tính xác liệu điều tra Khung thứ hai gồm nhiều yếu tố chất lượng, bao gồm phù hợp sản phẩm thống kê để sử dụng khách hàng người dùng có nguồn gốc từ phong trào Quản lý chất lượng toàn diện (TQM) Khung quản lý chất lượng (QM) khác Sự khác biệt hai khung thơng số kỹ thuật chúng thông số chất lượng tầm quan trọng lớn vào nhu cầu người dùng liệu tìm thấy phương pháp QM (Xem Lyberg, 2012 để biết cách xử lý triệt để nguyên tắc TSE QM, quan điểm lịch sử phát triển khái niệm chất lượng điều tra) Tổng sai số điều tra khái niệm mơ tả thuộc tính sai số thống kê ước tính điều tra cách kết hợp tất nguồn sai số phát sinh trình điều tra Khung tổng sai số điều tra tập trung vào chất lượng liệu điều tra đo độ xác sai số bình phương trung bình (độ chệch phương sai) ước tính, với mục tiêu giảm sai số điều tra quan trọng chất lượng liệu giảm thiểu chi phí điều tra Có số khác biệt nhỏ cách xác định thuật ngữ “tổng sai số điều tra”, có thống rộng rãi yếu tố cấu thành Ví dụ, sai số thường nhóm thành hai nhóm - sai số chọn mẫu sai số phi chọn mẫu Trái ngược với phương pháp tiếp cận chất lượng TSE, khung QM tập trung vào phù hợp việc sử dụng sản phẩm thống kê nhóm người dùng khác xác định chất lượng xác  định biện pháp chất lượng Loại khung mở rộng khái niệm chất lượng thành nhiều chiều Độ xác thước đo chất lượng xác định rõ ràng định lượng Các thước đo khác mà người dùng có xu hướng ưu tiên bao gồm: Tính phù hợp, tính kịp thời, khả tiếp cận, khả giải thích tính chặt chẽ Tính phù hợp định nghĩa sản xuất thông tin khái niệm phù hợp sử dụng khái niệm đo lường phù hợp chủ đề Việc thông tin có kịp thời truy cập người dùng hay không hai yếu tố chất lượng bổ sung Khả giải thích tập trung vào sẵn có khái niệm, biến, phân loại, phương pháp thu thập, xử lý ước tính cho người dùng để họ tự đánh giá Tính chặt chẽ liên quan đến thơng tin phù hợp với khung rộng lớn; việc sử dụng khái niệm tiêu chuẩn, biến phương pháp phân loại; thơng tin xác nhận với liệu liên quan Các khung QM áp dụng nhiều quan thống kê quốc gia (ví dụ, xem Thống kê Canada, 2002, ví dụ ban đầu), có khác biệt quan tổ chức Ví dụ, Hoa Kỳ, Hội đồng Chính sách Thống kê Liên ngành đưa tính phù hợp, tính xác, tính kịp thời phổ biến/khả tiếp cận (các biện pháp đầu thống kê), bổ sung chi phí thành tích nhiệm vụ tiêu chuẩn hiệu suất quan thống kê liên bang Hoa Kỳ Khung quốc tế bao gồm chi phí gánh nặng người trả lời quy trình thống kê xem xét khả đo lường chi phí gánh nặng quan trọng, cho phép đánh giá cân chi phí lợi ích liệu chất lượng đầu Eurostat phát triển khung chất lượng Quy tắc thực hành rộng rãi dựa tiêu chuẩn Hệ thống Thống kê châu Âu (ESS) Các tài liệu đưa thông số kỹ thuật để đánh giá chất lượng hiệu suất, bao gồm cần đưa vào báo cáo, tiêu chất lượng sản phẩm cụ thể đo lường biến số chất lượng quy trình Ngồi ra, điều tra người dùng, công cụ tự đánh giá, công cụ kiểm toán, dán nhãn chứng nhận đề cập Cẩm nang Eurostat (Ehling Korner, 2007) Quỹ Tiền tệ Quốc tế (2012) có khung đánh giá chất lượng liệu đặt cho tiêu chính, bao gồm CPI PPI Các chiều bao gồm: Tính tồn vẹn, tính đắn phương pháp, độ xác độ tin cậy, khả phục vụ khả tiếp cận Các chiều tập trung vào tiêu thước đo thống kê, kết nối với khung ESS (Laliberte, Grunewald Probst, 2004) Nhiều quan sâu vào chi tiết để xác định tiêu mặt hàng đo lường chất lượng Thông thường, bước quy trình điều tra sử dụng phần khung bước điều tra phổ quát chi tiết Với mức độ chi tiết mà quan đặt ra, việc ưu tiên biện pháp chất lượng thường hữu ích; ví dụ, Văn phòng Thống kê Quốc gia (ONS) Anh xác định danh sách ngắn biện pháp chất lượng sản phẩm Thống kê Canada cung cấp hướng dẫn tiêu chất lượng cho 17 bước điều tra (2009) ONS tập trung vào loại (2013) Ngồi ra, Eurostat đưa số lượng nhỏ biện pháp chất lượng cụ thể cho tiêu kinh tế, bao gồm số hài hòa giá tiêu dùng số sản phẩm cơng nghiệp (Mazzi cộng sự, 2005) Nó ban hành hướng dẫn để cải thiện chất lượng quy trình sản xuất điều tra, thông qua việc xây dựng biểu đồ luồng quy trình, xác định giám sát 23  biến quy trình quan trọng giai đoạn khác chu kỳ điều tra1 Những hướng dẫn mở rộng cơng việc trước Biemer Caspar (1994) Morganstein Marker (1997), đồng thời cung cấp kỹ thuật để phân tích biến quy trình vận hành theo thời gian để cải thiện khả quy trình 2.2 Chƣơng trình Chất lƣợng quan thống kê khác Hoa Kỳ Hệ thống thống kê Hoa Kỳ mạng lưới quan thống kê phi tập trung, hoạt động theo tiêu chuẩn chất lượng OMB đặt Năm 2002, OMB ban hành hướng dẫn cuối để đảm bảo tối đa hóa chất lượng thơng tin phổ biến quan liên bang”2 Thuật ngữ chất lượng sử dụng bao gồm tiện ích, tính khách quan tính tồn vẹn Tiện ích đề cập đến tính hữu ích thơng tin cho người dùng Tính khách quan bao gồm liệu thông tin phổ biến trình bày cách xác, rõ ràng, đầy đủ không thiên vị, vấn đề xác Tính tồn vẹn liên quan đến bảo mật bảo vệ thông tin khỏi truy cập sửa đổi trái phép, thỏa hiệp thông tin thông qua tham nhũng giả mạo Các quan phát triển hướng dẫn chất lượng thông tin riêng họ; tài liệu hướng dẫn kết từ quan không bao gồm loại biện pháp thực BLS giải hướng dẫn trang web với thảo luận hướng dẫn khác cách chúng đáp ứng, phần với hướng dẫn cụ thể tính tồn vẹn liệu Phần tồn vẹn liệu thảo luận quy trình bảo mật, quy trình an toàn an ninh, thu thập phổ biến liệu3 Tất quan thống kê liên bang khác phát triển hướng dẫn Năm 2006, OMB đưa 20 tiêu chuẩn hướng dẫn cho điều tra thống kê bao gồm quy trình điều tra: Phát triển khái niệm, phương pháp thiết kế; thu thập liệu; xử lý hiệu chỉnh liệu, đưa ước tính dự đốn, phân tích liệu, xem xét quy trình phổ biến sản phẩm thông tin4 Các biện pháp hiệu suất cụ thể liên quan đến nguyên tắc bao gồm phân tích độ chệch khơng trả lời đơn vị không trả lời 80% mục trả lời 70% hạng mục sử dụng báo cáo nghiên cứu độ chệch phạm vi tỷ lệ phạm vi giảm xuống 85% Cục Điều tra Dân số Hoa Kỳ quan xác định phát triển tài liệu tiêu chuẩn để cung cấp hướng dẫn bổ sung chương trình, hoạt động bao gồm vấn đề phương pháp hoạt động độc đáo5 Chúng chỉnh tiêu chuẩn với tiện ích, tính khách quan kích thước tồn vẹn đặt OMB Tài liệu bao gồm hướng dẫn chi tiết kỹ lưỡng, định nghĩa yêu cầu cho tất hoạt động, kỹ thuật, quy trình hệ thống liên quan đến giai đoạn quy trình điều tra Nói chung, tài liệu khơng bao gồm biện pháp thực http://epp.eurostat.ec.europa.eu/portal/page/portal/ aualitv/documents/HANDBOOK%20ON%20IMPRQ VING%20 QUALITY.pdf http://www.whitehouse.gov/omb/fedreg_final_ information_quality_guidelines 24 http://www.bls.gov/bls/quality.htm http://www.bls.gov/bls/data integrity.htm http://www.whitehouse.gov/sites/default/files/omb/ inforeg/statpolicy/standards stat surveys.pdf http://www.census.gov/auality/standards/index.html  Các ý kiến Khung chất lƣợng cho OPLC Được hưởng lợi từ đánh giá tài liệu họp giao ban OSMR cung cấp, ban quản lý OPLC đặt nhiệm vụ phát triển khung đồng thuận Bước phát triển tài khoản chi tiết biện pháp chất lượng áp dụng chương trình để xác định lĩnh vực phổ biến khác biệt Điều thực thông qua loạt ghi nhớ tóm tắt chi tiết trao cho ban quản lý OPLC biện pháp chất lượng áp dụng chương trình Như họp giao ban ra, số biện pháp chất lượng có điểm chung số có khác biệt bốn chương trình OPLC Đồng thời, có số biện pháp độc đáo ba chương trình giá chất thống kê giá Ví dụ, mơ tả tiếp theo, có biện pháp kiểm tra tùy chọn thực hàng hóa dịch vụ “định giá lại” sở thay đổi chất lượng khơng cịn có sẵn để định giá Một mẫu xe mới, dòng quần áo ngừng sản xuất mặt hàng nhập thay đổi nước xuất xứ ba ví dụ thách thức độc đáo mà chương trình giá phải đối mặt nỗ lực đẩy lùi hàng hóa dịch vụ xác từ tháng sang tháng khác Ngồi ra, chương trình thứ tư, điều tra CE, điều tra hộ gia đình, giới thiệu số yếu tố độc đáo liên quan đến mục điều tra không trả lời mà khơng có thiết lập dựa chương trình giá sở Một lợi ích bất ngờ việc chia sẻ thông tin việc xác định thông lệ thu thập liệu theo điều tra chương trình khác quan tâm Không nơi xác thực so với thuyết trình CPI giám sát thay họ Một tính quan trọng việc thu thập liệu giá tùy chọn thực mặt hàng rổ hàng hóa chọn để định giá tháng thay đổi nội dung khơng cịn có sẵn để định giá Các tùy chọn chọn người thu thập liệu điều chỉnh quy tắc quy trình thu thập liệu chi tiết liên quan đến việc xác định thay đổi nội dung mặt hàng xác định giá (chẳng hạn thay đổi màu sắc), ước tính giá trị thay đổi chất lượng trường hợp thay đổi đáng kể (và định sử dụng phương pháp thay đổi chất lượng phù hợp nhất), thay cho mặt hàng tương tự khác (và điều chỉnh chất lượng hai mặt hàng), định mặt hàng tạm thời khơng có (và sử dụng phương pháp gán giá ghi chép trước để chuyển tiếp), ngừng mặt hàng bắt đầu loạt giá cho mặt hàng CPI ghi lại tùy chọn thực cho mặt hàng kiểm tra xu hướng tùy chọn theo loại mặt hàng Các chương trình PPI IPP kể từ áp dụng phiên việc theo dõi thay Một khía cạnh bất ngờ khác việc chia sẻ phương pháp đo lường chất lượng này, khía cạnh quan trọng khung chất lượng đồng thuận cuối chúng tơi, phân chia rõ ràng tồn PPI IPP, nói cách khác với tầm quan trọng tương đối lớn đo lường quy trình tác nghiệp CPI, biện pháp liên quan đến đo lường đầu Tất ba điều tra có hai khía cạnh, tầm quan trọng tương đối số lượng biện pháp lĩnh vực bất ngờ IPP tạo báo cáo chi tiết hàng tháng biện pháp xử lý chi phối khía cạnh quy trình tác nghiệp Như ví dụ minh họa, biện pháp chất lượng 25  “100% tất TSUSA/B ánh xạ sang SCG TSUSA/B đến ánh xạ thứ cấp xác trước chạy chỉnh sửa khung tuần thứ ba tháng Hai tháng Chín năm” PPI có tầm quan trọng tương tự biện pháp xử lý, khơng hồn tồn chi tiết Mặc dù CPI có số biện pháp xử lý, chúng không chi tiết biện pháp theo dõi IPP PPI Khi xây dựng khung đồng thuận, định đưa bao gồm phần riêng biện pháp quy trình tác nghiệp, thấy phần tiếp theo, giải tập hợp biện pháp có tính phổ biến cao ba chương trình giá, thừa nhận số chương trình, đặc biệt IPP, chọn theo dõi biện pháp xử lý mức độ chi tiết tốt nhiều so với chương trình khác Trái ngược với IPP PPI, CPI có số lượng đo lường tương đối lớn liên quan đến chất lượng đầu Một lý quan trọng cho khác biệt CPI PPI/IPP việc trước tạo ước tính sai số chuẩn hàng năm cho số, đó, PPI IPP không xây dựng biện pháp khác cho số Thật vậy, phần đường đạt khung đồng thuận cơng việc tích cực mà PPI IPP thực để xây dựng phương sai tương lai loại đo lường chất lượng liên quan đến sai số điều tra từ CPI đáng quan tâm Điều tra CE, điều tra hộ gia đình, khác biệt với ba chương trình giá nhiều khía cạnh Một khía cạnh trở nên rõ ràng lập tức, thực tế nguyên tắc hướng dẫn CE việc phát triển khung chất lượng việc áp dụng rõ ràng phương pháp đo lường sai số điều tra tổng thể Có số yếu tố góp phần vào việc thơng qua 26 mục tiêu CE để giảm thiểu tổng sai số điều tra Điểm mấu chốt số việc đánh giá thấp chi tiêu người tiêu dùng số mặt hàng định (đặc biệt mặt hàng liên quan đến thói quen cá nhân chi tiêu cho thuốc rượu) biết khơng phù hợp với ước tính có từ liệu bán hàng kinh doanh độc lập Đồng thời, CE thực thiết kế lại điều tra việc giảm sai số điều tra kiểm chứng nguyên tắc đạo nỗ lực thiết kế lại (cùng với việc giảm gánh nặng tương ứng) Tầm quan trọng sai số điều tra mối quan tâm việc đánh giá thấp khiến CE quan tâm đến khía cạnh cụ thể chất lượng khơng có tầm quan trọng ưu tiên ba chương trình giá Điều đặc biệt nỗ lực CE để kiểm tra gắn kết ước tính họ so với điều tra nguồn liệu hành khác, mức độ chi tiêu người tiêu dùng phân phối chi tiêu theo loại mặt hàng Như với thước đo chất lượng nào, việc đưa kết luận tầm quan trọng tương đối biện pháp chất lượng định so với biện pháp khác thường vấn đề mức độ Trong chương trình giá, khơng có tồn biện pháp thay đáng kể giá sản xuất tiêu dùng, người ta ý nhiều đến hành vi số giá liên quan đến số giá khác (Ví dụ: Hành vi giá biến động đầu vào đến sản xuất có phản ánh phần biến động sản phẩm mà đầu vào có giá trị đáng kể so với tổng chi phí sản xuất) hành vi số giá theo thời gian Điều nói đến, CPI gần bắt tay vào loạt dự án thú vị để so sánh việc phân phối mặt hàng chọn để chọn mẫu với phân phối ngụ ý liệu máy quét cho  mặt hàng, kiểm tra gắn kết quy trình chọn mẫu nội Hƣớng tới Khung chất lƣợng chung Để đến khung đồng thuận, chúng tơi dựa vào việc u cầu chương trình để phản ứng với phiên nhỏ khung chất lượng bao gồm biện pháp phù hợp với chúng tơi học từ đánh giá tài liệu chia sẻ thực tiễn chương trình (và sau thảo luận) Chúng tơi sớm định phát triển hệ thống gồm hai phần, phần nhấn mạnh vào chất lượng đầu phần thứ hai nhấn mạnh vào quy trình tác nghiệp làm phát sinh đầu Các đo lường chất lượng đầu chia thành 14 loại riêng biệt: (1) Mức độ liên quan; (2) Độ xác độ tin cậy - sai số chọn mẫu; (3) Độ xác độ tin cậy - sai số phi chọn mẫu; (4) Phạm vi sai số; (5) Sai số đo lường; (6) Sai số xử lý; (7) Sai số hiệu chỉnh; (8) Sai số mơ hình hóa; (9) Tính kịp thời; (10) Khả tiếp cận; (11) Khả giải thích; (12) Tính chặt chẽ; (13) Chi phí; (14) Uy tín, liêm bảo mật Khung quy trình tác nghiệp dựa quy trình tác nghiệp có liên quan đến ba chương trình giá CE: (1) Thiết kế/khái niệm; (2) Chọn mẫu; (3) Thu thập liệu; (4) Ứớc tính; (5) Cập nhật trọng số; (6) Phổ biến Trong nhiều khía cạnh, đặc điểm kỹ thuật biện pháp đầu chất lượng dễ tiếp cận nhờ nhấn mạnh tương đối vào chất lượng tài liệu học thuật tính phổ biến lớn chương trình biện pháp mà họ áp dụng, trường hợp phương sai, biện pháp họ muốn thông qua tương lai Như đề cập trên, biện pháp quy trình tác nghiệp khác mức độ chi tiết tương đối chúng, đó, đồng thuận mà bạn thấy nhằm tìm nhiều điểm chung có thể, cho phép tồn biện pháp chi tiết cụ thể Khi bắt đầu định biện pháp chất lượng mình, khía cạnh đánh giá tài liệu Fricker/Phipps trở nên rõ ràng cần phải phát triển biện pháp liên quan đến nhu cầu người dùng, biện pháp không đề cập rõ ràng biện pháp chất lượng cụ thể chương trình Điều khơng có nghĩa chương trình riêng lẻ khơng cố gắng đo lường mức độ đáp ứng nhu cầu người dùng (mặc dù thực tiễn khác nhau), nhiều họ khơng đưa thực tiễn vào khung chương trình riêng họ Điểm thứ hai đặc biệt chứng với biện pháp kịp thời khả tiếp cận Cuối cùng, hai trình bày đưa cho thấy, có số chồng chéo tự nhiên sản lượng cụ thể biện pháp quy trình tác nghiệp mà chúng tơi áp dụng Chúng tơi có số thảo luận cố gắng phát triển biện pháp loại trừ lẫn qua hai mơ hình cuối định cho phép chép lý đơn giản mơ hình có biện pháp chất lượng khơng tìm thấy mơ hình khác có biện pháp phổ biến Các phương pháp tìm thấy cho phương pháp có giá trị gia tăng mặt quản lý chương trình chúng tơi đưa quan điểm khác chất chất lượng quy trình đầu điều tra Bảng hiển thị biện pháp chất lượng đầu từ khung đồng thuận OPLC; Bảng trình bày biện pháp chất lượng quy trình tác nghiệp Các bảng liệt kê kích thước chất lượng chính, định nghĩa chúng số liệu chất lượng liên quan cho chất lượng sản phẩm quy trình 27  Bảng 1: Các biện pháp chất lượng đầu OPLC Thơng số chất lƣợng Tính phù hợp Định nghĩa Dữ liệu có thỏa mãn nhu cầu người dùng khơng? Là chương trình sản xuất thơng tin khái niệm hay không? Các biện pháp chất lƣợng đầu OPLC Chương trình cung cấp tuyên bố tường thuật liên quan liệu họ Điều bao gồm mô tả mục tiêu đo lường chương trình, liệu tạo ra, hệ thống phân loại sử dụng phạm vi bảo hiểm cập nhật sản phẩm liệu Chương trình thu thập phản hồi từ người dùng liệu hài lòng nhu cầu liệu họ thông qua nhiều chế phản hồi cách thường xun Chương trình có mơ tả văn xác định khoảng trống biết việc đáp ứng nhu cầu ưu tiên người dùng để khép lại khoảng trống Tài liệu cập nhật cách thường xuyên 2a Tính xác độ tin cậy - sai số chọn mẫu Là chương trình giảm thiểu tổng sai số điều tra ngẫu nhiên? Sai số chuẩn Hệ số biến thiên Sai số chuẩn tương đối Khoảng tin cậy 2b Sai số phạm vi Sai số phạm vi phát sinh thiếu sót, trùng lặp sai số nội dung Chương trình có cố gắng đo lường sát tổng thể phạm vi tổng thể mục tiêu không? Sai số không trả lời thu thập thông tin đầy đủ tất đơn vị mẫu chọn Chương trình có tính tốn tỷ lệ đơn vị mục trả lời khơng? Tỷ lệ ngồi phạm vi Tỷ lệ phân loại sai Dưới phạm vi 2c Sai số không trả lời Tỷ lệ đơn vị trả lời (có trọng số khơng có trọng số) Tỷ lệ trả lời mục % trọng số cuối từ ô không gán cho hạng mục ước tính Tỷ lệ xung đột 2d Sai số đo lường Sai số đo lường xảy đáp ứng cung cấp khác với giá trị thực quy cho người trả lời, người vấn, bảng câu hỏi phương pháp thu thập Chương trình có cố gắng so sánh kết với nguồn khác không? So sánh điểm chuẩn Quy trình thay Phạm vi điều bao gồm: - Tỷ lệ thay - Phần trăm mục liên kết - Phần trăm chất lượng mặt hàng điều chỉnh - Phần trăm hạng mục khơng tìm thấy vật thay 28  Thơng số chất lƣợng 2e Sai số xử lý 2f Sai số hiệu chỉnh 2g Sai số mơ hình hóa Tính kịp thời Định nghĩa Sai số xử lý sai số kết điều tra cuối phát sinh từ việc thực sai phương pháp thực lên kế hoạch xác Ví dụ, chương trình có theo dõi số lượng lỗi mã hóa nhập liệu phát kết vấn lại khơng? Chương trình có theo dõi số lượng kích thước tương đối phiên xuất ban đầu cuối không? Sai số mơ hình hóa xảy sử dụng phương pháp, hiệu chỉnh, hồi quy tổng quát, điều chỉnh theo mùa vụ mơ hình khác khơng có thành phần xác trước đó, để tính tốn thống kê số Chương trình có cố gắng để tìm hiểu ảnh hưởng sai số liên quan đến mơ hình chúng khơng? Các ước tính điều tra báo cáo kịp thời để tối đa hóa tính hữu ích chúng? Là liệu tài liệu liên quan phát hành theo lịch trình? Khả tiếp cận Chương trình có cung cấp cơng cụ trích xuất liệu thân thiện với người dùng không? Là truy cập vào liệu giá phải chăng? Khả giải thích Chất lượng phạm vi tài liệu điều tra giải thích khái niệm phương pháp điều tra gì? Các biện pháp chất lƣợng đầu OPLC Tỷ lệ sai số chỉnh sửa Tỷ lệ sai số mã hóa Tỷ lệ sai số nhập liệu Kích thước tương đối sửa đổi khái niệm ước tính xuất cuối Mức độ phù hợp số liệu thống kê phù hợp cho loạt điều chỉnh theo mùa vụ Chương trình cung cấp tường thuật mơ tả dịng sản phẩm họ, tính định kỳ chúng đánh giá tổng thể tính kịp thời Số lượng tin tức phát hành năm, theo lịch trình cơng bố trước Độ trễ kết thúc thu thập liệu cơng bố ước tính Chương trình cung cấp tường thuật khả tiếp cận liệu sản phẩm chúng Đánh giá người dùng khả truy cập Số lượng người đăng ký vào ấn phẩm chương trình Số lượng u cầu thơng tin ghi nhận hàng tháng Số lần truy cập web tổng thể theo sản phẩm, hàng tháng Chương trình cung cấp tường thuật mơ tả tài liệu họ có sẵn khái niệm phương pháp luận Đánh giá người dùng khả diễn giải 29  Thơng số chất lƣợng Tính chặt chẽ Giá Tính tin cậy, liêm chính, bảo mật Định nghĩa Mức độ mà liệu lấy từ nguồn khác đo lường tượng, tương tự ước tính tạo chương trình? Chi phí thu thập, xử lý phổ biến liệu gì? Các ước tính tạo chương trình điều tra xem đáng tin cậy đến mức độ nào? Ở mức độ chương trình tổ chức xem có tính tồn vẹn? Chương trình có bảo vệ tính bảo mật người trả lời không? Các biện pháp chất lƣợng đầu OPLC Chương trình tiến hành nghiên cứu thực so sánh ước tính với ước tính có nguồn gốc từ nguồn thay Chi phí nhận trực tiếp đầy đủ cho đơn vị bắt đầu (PPI/IPP/CPI C & S/CPI nhà ở/Nhật ký CE/Phỏng vấn CE) phân tầng theo phương thức thu thập Chi phí nhận trực tiếp đầy đủ cho đơn vị vấn lại (PPI/IPP/CPI C & S/CPI nhà ở/Nhật ký CE/Phỏng vấn CE) phân tầng theo phương thức thu thập Số lượng phân phối người trả lời theo phương pháp thu thập liệu (PPI/IPP/ Nhật ký CE/Phỏng vấn CE) Vi phạm liệu báo cáo quý năm Số lỗi tìm thấy số công bố sau phát hành Bảng 2: Đo lường chất lượng quy trình tác nghiệp Thơng số chất lƣợng Thiết kế/Khái niệm Chọn mẫu 30 Định nghĩa Quy trình tác nghiệp xác định mục tiêu ước tính chương trình điều tra cách mục tiêu đo thông qua cơng cụ quy trình thu thập liệu Quy trình tác nghiệp xác định (các) khung chung sử dụng để chọn mẫu để thu thập liệu, quy trình chọn mẫu quy trình định kỳ cho việc lấy lại mẫu (nếu phù hợp) phương pháp điều chỉnh mức độ mẫu theo thời gian Các biện pháp chất lƣợng đầu OPLC Chương trình cung cấp tường thuật (các) mục tiêu ước tính chương trình điều tra sở lý thuyết/khái niệm cho mục tiêu Chương trình cung cấp tuyên bố tường thuật mô tả khung chung có liên quan, q trình chọn mẫu phương pháp để điều chỉnh mẫu theo thời gian Tuổi trung bình mẫu tổng thể theo đặc điểm có liên quan ngành sản phẩm, nhân học Chỉ có IPP/PPI So sánh kích thước mẫu nhắm mục tiêu so với thực tế  Thông số chất lƣợng Thu thập liệu Dự toán Cập trọng số nhật Tính phổ biến Định nghĩa CPI, PPI, IPP Trong Chương trình giá BLS, quy trình tác nghiệp mơ tả sưu tập giá thu thập sở, bao gồm bước phân chia thực Nhà kinh tế thực địa để có hàng hóa dịch vụ xác định giá tính tốn lại mặt hàng Trong chương trình CE, quy trình tác nghiệp bao gồm việc thu thập liệu cho vấn hàng quý Điều tra hộ gia đình CE thu thập liệu cho Nhật ký CE tuần Quy trình tác nghiệp bao gồm nhiều bước cần thiết để dịch liệu thu thập thông qua việc thu thập liệu phát triển ước tính để xuất Các bước bao gồm chỉnh sửa, cắt bỏ, điều chỉnh trọng lượng, điều chỉnh theo mùa vụ, phân tích ngoại lệ chuẩn bị tệp ước tính xem xét đăng xuất cuối Các biện pháp chất lƣợng đầu OPLC Tất Tỷ lệ đơn vị trả lời (có trọng số khơng trọng số) Ước tính độ dài trung bình vấn phương pháp thu thập liệu Số lượng phân phối người trả lời theo phương pháp thu thập liệu Tỷ lệ đơn vị trả lời cụ thể CPI/PPI, IPP (có trọng số khơng có trọng số) để bắt đầu đánh giá lại Tỷ lệ thay Tỷ lệ điều chỉnh chất lượng theo phương pháp Chương trình cung cấp tường thuật mô tả phương pháp ước tính Tỷ lệ tranh chấp % trọng số cuối từ ô không bịtranh chấp cho hạng mục ước tính Chương trình tiến hành nghiên cứu thực so sánh ước tính với ước tính có nguồn gốc từ nguồn thay Chỉ có tỷ lệ thay IPP/PPI Kích thước tương đối sửa đổi khái niệm ước tính xuất cuối Quy trình tác nghiệp mô tả kết hợp trọng số chung cập nhật (chẳng hạn thông qua quyền Cục Tổng Điều tra Dân số thập niên Điều tra dân số Quinquinniel, yếu tố khác) Chương trình cung cấp tường thuật mô tả kế hoạch trọng số cách cập nhật trọng số Quy trình tác nghiệp mô tả việc đăng thông cáo báo chí điều tra, sở liệu, phân tích liệu, tài liệu phương pháp điều tra, số cách khác cách cộng đồng người dùng liệu truy cập sử dụng tài liệu xuất chúng tơi Chương trình cung cấp tường thuật sản phẩm dịch vụ mà cung cấp cho cơng chúng Đánh giá người dùng hiệu việc phổ biến Tóm tắt hiệu suất để phát hành chuỗi liệu tệp liệu vi mô # loạt liệu công bố Số lần truy cập web tổng thể theo sản phẩm, hàng tháng 31  Thảo luận Khung chất lượng phát triển cho chương trình giá BLS dựa cách tiếp cận Eurostat, Thống kê Thụy Điển quan thống kê khác Hoa Kỳ để phát triển số chất lượng cho điều tra họ Họ áp dụng mơ hình chất lượng đa chiều phù hợp với phương pháp dựa QM xác định biện pháp chất lượng cho đầu sản phẩm quy trình tác nghiệp điều tra Mục tiêu khung là: (1) Xác định (tiềm năng) nguồn sai số; (2) Phát triển nhận thức rủi ro tương đối sai số định lượng chúng có thể; (3) Xác định lỗ hổng phương pháp luận; (4) Thúc đẩy việc sử dụng tích hợp thơng tin giám sát; (5) Giúp ưu tiên lĩnh vực cần cải thiện hoạt động điều tra Khi phát triển khung này, OPLC kết hợp nhiều tính tìm thấy phương pháp tiếp cận để đánh giá chất lượng điều tra tận dụng chuyên môn đội ngũ nhân viên họ, người quản lý thực hoạt động điều tra cụ thể Chúng cung cấp số quan sát trình phát triển khung kết Đầu tiên, đa dạng chương trình OPLC - bao gồm điều tra hộ gia đình sở cá thể, loại quy trình tác nghiệp khác biện pháp chất lượng dành riêng cho chương trình khác số lượng mức độ chi tiết - khiến cho việc tạo khung tồn diện, gặp khó khăn Các tinh chỉnh lặp lặp lại cần thiết để xây dựng tính linh hoạt đầy đủ thành cách tiếp cận đồng thuận phù hợp chương trình cần thêm công việc để vận hành đầy đủ biện pháp chất lượng phát triển hướng 32 dẫn cụ thể theo chương trình cho số liệu Thứ hai, lưu ý trên, có chồng chéo đáng kể biện pháp chất lượng sản phẩm quy trình liệt kê Bảng Bảng 2, tương đối biện pháp xử lý có sẵn thời gian thực (hoặc gần thời gian thực), giới hạn hoạt động giám sát hoạt động can thiệp liên kết với phương pháp kiểm sốt q trình thống kê điển hình Bài viết trình bày khung đồng thuận, nhấn mạnh yếu tố thước đo chất lượng phổ biến bốn chương trình, nhiên, che giấu liệu quy trình chi tiết sử dụng để đánh giá chất lượng hai chương trình OPLC Ví dụ: Chương trình IPP thường xuyên xuất báo cáo chất lượng nội theo dõi tiến trình nhiều mục tiêu chất lượng quy trình (ví dụ: Phần trăm mặt hàng trả lại, phần trăm tầng xuất bản, tính kịp thời sửa đổi ấn phẩm, ) Tương tự, chương trình CE phát triển số liệu để đánh giá tác động thay đổi thiết kế chất lượng sản phẩm quy trình (dựa thơng tin lịch sử liên hệ ước tính điều tra cho đơn vị mẫu) đề xuất quy trình để phát triển, thực báo cáo số liệu Do đó, quan sát thứ ba chương trình sở hạ tầng đánh giá chất lượng có chương trình ảnh hưởng đến tốc độ tích hợp nâng cao khung chất lượng tổng thể trình bày Việc triển khai rộng khuôn khổ OPLC trình diễn chương trình tiếp tục phát triển sáng kiến chất lượng (Xem tiếp trang 13)  Sự phù hợp tính xác việc thực chương trình thống kê theo Bộ tiêu chí chất lượng thống kê nào? Chất lượng thông tin thống kê nhà nước ngành Thống kê quan tâm hàng đầu Trước đây, chất lượng thống kê xem xét tiêu thức, gồm: Phù hợp, đầy đủ, xác, kịp thời, khả tiếp cận, khả giải thích Đến nay, Bộ tiêu chí chất lượng thống kê nhà nước ban hành áp dụng không cụ thể hóa tiêu thức chất lượng nói trên, mà cịn bổ sung số tiêu chí quy trình sản xuất thống kê, mơi trường thể chế cho hoạt động thống kê, nhằm phản ánh cách toàn diện chiều chất lượng thống kê nhà nước Quá trình quản lý chất lượng thống kê từ tiêu thức đến Bộ tiêu chí chất lượng thống kê nhà nước trình phát triển liên tục, có hệ thống phù hợp với điều kiện kinh tế - xã hội đất nước thông lệ quốc tế giai đoạn1 Như đề cập, ban hành áp dụng Bộ tiêu chí chất lượng thống kê nhà nước không nhằm giải hạn chế, bất cập chất lượng thống kê nay, mà làm sở cho việc cải thiện, nâng cao chất lượng thống kê nhà nước, đáp ứng nhu cầu ngày tăng lên tổ chức, cá nhân sử dụng thông tin thống kê Do đó, kết thực chương trình thống kê phù hợp, xác hiệu Người sử dụng thông tin thống kê sử dụng Bộ tiêu chí chất lượng thống kê nhà nước để tự nhận biết, kiểm chứng mức độ tin cậy thống tin thống kê nhà nước công bố phổ biến; đưa định sử dụng cuối Tiếp đến, người sử dụng thông tin thống kê có để tin tưởng sử dụng Năm 2012, UNSC công bố khuyến nghị quốc gia xây dựng tiêu chí chất lượng thống kê dựa gNQAF hiệu thông tin hệ thống tổ chức thống kê nhà nước sản xuất, công bố Đặc biệt người sử dụng nhà quản lý, phân tích, hoạch định sách sử dụng thông tin thống kê tốt tạo sách tốt hơn, hiệu Tài liệu tham khảo: Quốc hội (2015), Luật Thống kê số 89/2015/QH13 thông qua Kỳ họp thứ Mười Quốc hội Khóa XIII, ngày 23/11/2015; Thủ Tướng Chính phủ (2019), Quyết định số 01/QĐ-TTg ban hành Bộ tiêu chí chất lượng thống kê nhà nước đến năm 2030, ngày 05/01/2019; Thủ Tướng Chính phủ (2017), Quyết định số 643/QĐ-TTg phê duyệt Đề án tăng cường quản lý nhà nước chất lượng thống kê đến năm 2030, ngày 11/7/2017; UNSC (2012), Guideline for the template for generic assurance framework national quality Tiếp theo trang 32 Chúng hy vọng chương trình BLS khác áp dụng giúp tinh chỉnh khung chất lượng Mặc dù có thách thức nỗ lực (ví dụ: Phân cấp tổ chức, phức tạp gia tăng việc đáp ứng nhu cầu chương trình, nguồn lực cân nhắc hoạt động đa dạng), có hội thực để thúc đẩy hoạt động đánh giá chất lượng có chương trình để xây dựng hệ thống linh hoạt có hệ thống khung để quản lý chất lượng sản phẩm hoạt động điều tra BLS Hoàng Linh (dịch) Nguồn: https://www.bls.gov/osmr/pdf/st140050.pdf 13 ... liệu thống kê chất lượng Nhưng, ý nghĩa ? ?chất lượng? ?? chúng tơi gì? Ở phần xem xét khái niệm khác chất lượng thống kê chất lượng điều tra, xem xét hai khung chất lượng phổ biến tổ chức thống kê. .. kiến chất lượng (Xem tiếp trang 13)  Sự phù hợp tính xác việc thực chương trình thống kê theo Bộ tiêu chí chất lượng thống kê nào? Chất lượng thông tin thống kê nhà nước ngành Thống kê quan... cận chất lượng TSE, khung QM tập trung vào phù hợp việc sử dụng sản phẩm thống kê nhóm người dùng khác xác định chất lượng xác  định biện pháp chất lượng Loại khung mở rộng khái niệm chất lượng