Các tiêu chí đánh giá chất lƣợng sử dụng

Một phần của tài liệu Đánh giá hiệu quả ứng dụng hệ thống quản lý tiền tệ và phát hành kho quỹ tập trung tại ngân hàng nhà nước việt nam (cmo) (Trang 72 - 88)

CHƯƠNG 4: XÂY DỰNG BỘ TIÊU CHÍ VÀ PHƯƠNG PHÁP ĐÁNH GIÁ CHẤT LƢỢNG HỆ THỐNG CMO ĐỀ XUẤT

4.4 Bộ tiêu chí đề xuất đánh giá chất lƣợng hệ thống CMO

4.4.1 Các tiêu chí đánh giá chất lƣợng sử dụng

4.4.1.1 Hiệu quả sử dụng đối với Cục/Chi cục PHKQ

Bảng 4. 4: Phép đánh giá hiệu quả sử dụng đối với Cục/Chi cục PHKQ

Tên phép đánh giá

Mục đích của phép đánh

giá Phương pháp áp dụng Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

Kiểm soát đƣợc dòng tiền đang lưu thông

Kiểm tra hệ thống có hỗ trợ chức năng giúp lãnh đạo Cục/Chi cục PHKQ kiểm soát đƣợc dòng tiền đang lưu thông (các loại tiền, tài sản được in, đúc hàng năm hiện đang được lưu hành ở đâu).

- Phỏng vấn lãnh đạo, cán bộ nghiệp vụ Cục/Chi cục PHKQ về các chức năng giúp kiểm soát được dòng tiền đang lưu thông.

- Kiểm tra tài liệu đặc tả hệ thống hoặc kiểm tra trực tiếp hệ thống các chức năng hỗ trợ lãnh đạo Cục/Chi cục kiểm soát đƣợc dòng tiền đang lưu thông.

- Nếu hệ thống có hỗ trợ chức năng kiểm soát đƣợc dòng tiền đang lưu thông:

 X = 100

- Nếu hệ thống không hỗ trợ chức năng kiểm soát đƣợc dòng tiền đang lưu thông:

 X = 0

X - Hệ thống CMO

59 Tên phép đánh

giá

Mục đích của phép đánh

giá Phương pháp áp dụng Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

Tiết kiệm thời gian trong công tác kiểm kê các quỹ tại Cục/Chi cục PHKQ

Đảm bảo hệ thống CMO cho phép thực hiện công tác kiểm kê các quỹ tại Cục/Chi cục PHKQ, giúp tiết kiệm thời gian so với kiểm kê khi chƣa có hệ thống CMO. (kiểm kê là công tác nghiệp vụ phải thực hiện hàng ngày và kiểm kê liên vụ theo định kỳ)

- Phỏng vấn các cán bộ trực tiếp thực hiện công tác kiểm kê tại Cục/Chi cục PHKQ và so sánh với thời gian kiểm kê khi chƣa có hệ thống CMO.

- A= Thời gian trung bình thực hiện công tác kiểm kê trên hệ thống CMO.

- B= Thời gian trung bình thực hiện kiểm kê khi chƣa có hệ thống CMO.

 A/B ≤ 1/2  X=100

 1/2 < A/B < 1  X= 100 - A/B×100

 A/B ≥ 1  X=0

X

- Cán bộ thực hiện kiểm kê tại Cục/Chi cục PHKQ

Giảm thiểu thời gian kiểm tra số dƣ tồn kho tại Cục/Chi cục

Đảm bảo hệ thống CMO cho phép thực hiện tra số dƣ tồn kho tại Cục/Chi cục PHKQ, giúp tiết kiệm

- Phỏng vấn các cán bộ trực tiếp thực hiện công tác nghiệp vụ tại Chi cục PHKQ và so sánh với thời gian kiểm tra tồn kho khi

- A= Thời gian trung bình thực hiện công tác kiểm tra tồn kho trên hệ thống CMO.

- B= Thời gian trung bình thực hiện kiểm tra tồn kho

X

- Cán bộ nghiệp vụ tại Chi cục PHKQ

60 Tên phép đánh

giá

Mục đích của phép đánh

giá Phương pháp áp dụng Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

PHKQ thời gian so với công tác kiểm tra số dƣ tồn kho khi chƣa có hệ thống CMO.

(kiểm tra tồn kho thực tế là công tác nghiệp vụ phải thực hiện hàng ngày)

chƣa có hệ thống CMO. khi chƣa có hệ thống CMO.

 A/B ≤ 1/2  X=100

 1/2 < A/B < 1  X= 100 - A/B×100

 A/B ≥ 1  X=0

Hỗ trợ thống kê, báo cáo, sổ quỹ

- Đảm bảo hệ thống hỗ trợ đầy đủ các mẫu biểu, báo cáo, sổ quỹ tại Cục/Chi cục PHKQ theo quy định.

- Cán bộ đánh giá kiểm tra tài liệu đặc tả hệ thống/ Biên bản nghiệm thu hệ thống hoặc kiểm tra trực tiếp trên hệ thống CMO, đếm số lƣợng các báo cáo, sổ quỹ hệ thống cho phép tra cứu và so sánh với số lƣợng các báo cáo, sổ quỹ bắt buộc phải thực hiện khi chƣa có hệ thống CMO.

- Kiểm tra tài liệu Quy trình

- A = Số lƣợng các báo cáo, sổ quỹ trên hệ thống CMO.

- B = Tổng số các báo cáo, sổ quỹ bắt buộc.

 X=A/B x 100

X - Hệ thống CMO

61 Tên phép đánh

giá

Mục đích của phép đánh

giá Phương pháp áp dụng Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

nghiệp vụ kho quỹ, đếm số lƣợng các báo cáo, sổ quỹ bắt buộc phải thực hiện.

Hỗ trợ ban lãnh đạo trong công tác ra quyết định quản lý và điều hòa tiền mặt

Hệ thống hỗ trợ ban lãnh đạo Cục/Chi cục PHKQ nhƣ thế nào trong công tác ra quyết định quản lý và điều hòa tiền mặt.

- Cán bộ đánh giá kiểm tra trực tiếp hệ thống và hồ sơ đặc tả hệ thống, đếm số lƣợng các chức năng hỗ trợ ban lãnh đạo Cục/Chi cục PHKQ trong công tác ra quyết định quản lý và điều hòa tiền mặt.

- Phỏng vấn lãnh đạo Cục/Chi cục PHKQ về các chức năng của lãnh đạo Cục/Chi cục PHKQ cần thực hiện trong công tác ra quyết định quản lý và điều hòa tiền mặt.

- A = Số lƣợng các chức năng trên hệ thống CMO hỗ trợ ban lãnh đạo Cục/Chi cục PHKQ trong công tác ra quyết định quản lý và điều hòa tiền mặt.

- B = Tổng số các chức năng lãnh đạo Cục/Chi cục PHKQ cần thực hiện trong công tác ra quyết định quản lý và điều hòa tiền mặt.

 X=A/B x 100

X

- Hệ thống CMO - Lãnh đạo

Cục/Chi cục PHKQ

62 4.4.1.2 Hiệu quả sử dụng đối với chi nhánh NHNN

Bảng 4. 5: Phép đánh giá hiệu quả đối với chi nhánh NHNN

Tên phép

đánh giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành

phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

Giảm thiểu công việc thủ công

Đảm bảo hệ thống CMO hỗ trợ hầu hết các chức năng nghiệp vụ quan trọng trong công tác nghiệp vụ quản lý kho quỹ tại chi nhánh NHNN, giúp cán bộ nghiệp vụ tại các chi nhánh NHNN tiết kiệm thời gian, công sức so với thực hiện các công việc nghiệp vụ thủ công.

- Cán bộ đánh giá kiểm tra tài liệu đặc tả hệ thống/ Biên bản nghiệm thu hệ thống hoặc kiểm tra trực tiếp trên hệ thống CMO, đếm số lƣợng các chức năng nghiệp vụ tại các chi nhánh NHNN mà hệ thống CMO hỗ trợ.

- Kiểm tra tài liệu Quy trình nghiệp vụ kho quỹ (theo Công văn số

8742/NHNN-PHKQ ngày

06/11/2009 của Cục phát hành và kho quỹ), đếm số chức năng nghiệp vụ tại các chi nhánh NHNN cần

- A = Số lƣợng các chức năng nghiệp vụ hệ thống CMO hỗ trợ.

- B = Tổng số các chức năng nghiệp vụ cần thực hiện.

 X=A/B x 100

X - Hệ thống CMO

63 Tên phép

đánh giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành

phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

thực hiện.

Tiết kiệm thời gian trong công tác kiểm kê các quỹ tại chi nhánh NHNN

Đảm bảo hệ thống CMO cho phép thực hiện công tác kiểm kê các quỹ tại các chi nhánh NHNN, giúp tiết kiệm thời gian so với công tác kiểm kê khi chƣa có hệ thống CMO.

(kiểm kê là công tác nghiệp vụ phải thực hiện hàng ngày và kiểm kê liên vụ theo định kỳ)

- Khảo sát cán bộ trực tiếp thực hiện công tác kiểm kê tại các chi nhánh NHNN và so sánh với thời gian kiểm kê khi chƣa có hệ thống CMO.

A= Thời gian trung bình thực hiện công tác kiểm kê trên hệ thống CMO.

B= Thời gian trung bình thực hiện kiểm kê khi chƣa có hệ thống CMO.

 A/B ≤ 1/2  X=100

 1/2 < A/B < 1  X= 100 - A/B×100

 A/B ≥ 1  X=0

X

- Cán bộ thực hiện kiểm kê tại các chi nhánh NHNN

Giảm thiểu thời gian kiểm tra số dƣ tồn kho

Đảm bảo hệ thống CMO cho phép thực hiện tra cứu tồn kho thực tế tại các chi nhánh NHNN, giúp tiết kiệm thời

- Phỏng vấn các cán bộ trực tiếp thực hiện công tác nghiệp vụ tại Chi cục PHKQ và so sánh với thời gian kiểm tra tồn kho khi chƣa có

A= Thời gian trung bình thực hiện công tác kiểm tra tồn kho trên hệ thống CMO.

X

- Cán bộ nghiệp vụ tại Chi cục PHKQ

64 Tên phép

đánh giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành

phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

tại chi nhánh NHNN

gian so với công tác kiểm tra tồn kho khi chƣa có hệ thống CMO.

(kiểm tra số dư tồn kho là công tác nghiệp vụ phải thực hiện hàng ngày)

hệ thống CMO.

B= Thời gian trung bình thực hiện kiểm tra tồn kho khi chƣa có hệ thống CMO.

 A/B ≤ 1/2  X=100

 1/2 < A/B < 1  X= 100 - A/B×100

 A/B ≥ 1  X=0

Giảm thiểu thời gian thực hiện dự báo thu chi tiền mặt

Đảm bảo hệ thống hỗ trợ chức năng thực hiện dự báo thu chi tiền mặt tại các chi nhánh NHNN, giúp cán bộ nghiệp vụ thực hiện công tác dự báo thu chi tiền mặt tiết kiệm thời gian, công sức trong qua trình

- Cán bộ đánh giá kiểm thử trực tiếp trên hệ thống CMO chức năng dự báo thu chi tiền mặt tại chi nhánh, đo thời gian ƣớc lƣợng thực hiện dự báo thu chi tiền mặt của một quý cụ thể.

- Khảo sát các cán bộ trực tiếp làm

A= Thời gian trung bình thực hiện dự báo thu chi tiền mặt trên hệ thống CMO.

B= Thời gian trung bình thực hiện dự báo thu chi tiền mặt khi chƣa có hệ

X

- Hệ thống CMO - Cán bộ làm

công tác dự báo thu chi tiền mặt tại các chi nhánh

65 Tên phép

đánh giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành

phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

thực hiện dự báo thu chi tiền mặt so với công việc dự báo khi chƣa có hệ thống CMO.

công việc dự báo thu chi tiền mặt tại các chi nhánh NHNN thời gian trung bình thực hiện dự báo thu chi tiền mặt khi chƣa có hệ thống CMO.

- So sánh thời gian thực hiện dự báo thu chi trên hệ thống CMO với thời gian dự báo thu chi trung bình khi chƣa có hệ thống CMO.

thống CMO.

 A/B ≤ 1/2  X=100

 1/2 < A/B < 1  X= 100 - A/B×100

 A/B ≥ 1  X=0

NHNN

Thống kê báo cáo, sổ quỹ

Đảm bảo hệ thống hỗ trợ đầy đủ các mẫu biểu, báo cáo, sổ quỹ theo quy định.

- Cán bộ đánh giá kiểm tra tài liệu đặc tả hệ thống/ Biên bản nghiệm thu hệ thống hoặc kiểm tra trực tiếp trên hệ thống CMO, đếm số lƣợng các báo cáo, sổ quỹ hệ thống cho phép tra cứu và so sánh với số lƣợng các báo cáo, sổ quỹ bắt buộc

- A = Số lƣợng các báo cáo, sổ quỹ trên hệ thống CMO.

- B = Tổng số các báo cáo, sổ quỹ bắt buộc.

 X=A/B x 100

X - Hệ thống CMO

66 Tên phép

đánh giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành

phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

phải thực hiện khi chƣa có hệ thống CMO.

- Kiểm tra tài liệu Quy trình nghiệp vụ kho quỹ, đếm số lƣợng các báo cáo, sổ quỹ bắt buộc phải thực hiện.

4.4.1.3 An toàn, bảo mật

Bảng 4. 6: Phép đánh giá tính an toàn bảo mật

Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

Sử dụng các biện pháp kỹ thuật đảm bảo an toàn

Đảm bảo hệ thống có sử dụng các biện pháp kỹ thuật để bảo đảm an toàn thông tin và dữ liệu trên hệ

- Phỏng vấn cán bộ kỹ thuật hỗ trợ quản lý, vận hành hệ thống.

A = Số lƣợng các yêu cầu đƣợc đáp ứng. X

- Hệ thống CMO - Cán bộ

67 Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

thống theo đúng quy định trong thông tƣ 01/2011/TT-NHNN ngày 21/02/2011 của NHNN:

1. Các quy định về đảm bảo an toàn môi trường vật lý của hệ thống mạng, máy chủ cơ sở dữ liệu, máy chủ server chạy ứng dụng (theo điều 11, điều 12 thông tƣ 01/2011/TT-NHNN).

2. Đối với hệ thống thông tin nghiệp vụ:

a. Không để một cá nhân làm toàn bộ các khâu từ khởi tạo đến phê duyệt một giao dịch nghiệp vụ.

b. Mọi tác vụ trên hệ thống đƣợc lưu vết, sẵn sàng cho kiểm tra,

 X = A/7 x 100 quản lý vận hành hệ thống

68 Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

kiểm soát khi cần thiết.

(theo khoản 4, điều 13, thông tƣ 01/2011/TT-NHNN).

3. Các quy định về đảm bảo an toàn, bảo mật các ứng dụng:

Kiểm tra tính xác thực của dữ liệu đầu vào, dữ liệu đầu ra, có các biện pháp đảm bảo tính xác thực và toàn vẹn dữ liệu đƣợc xử lý trong các ứng dụng, (theo điều 27, thông tƣ 01/2011/TT- NHNN).

4. Các quy định về mã hóa dữ liệu đối với các dữ liệu nhạy cảm quan trọng phải đƣợc mã hóa trước khi truyền trên mạng và

69 Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

lưu trữ trong DB (theo khoản điều 28, thông tƣ 01/2011/TT- NHNN).

5. Có quy định về quản lý các điểm yếu về mặt kỹ thuật và xây dựng giải pháp khắc phục các điểm yếu kỹ thuật, hạn chế rủi ro liên quan đến hệ thống thông tin (theo khoản 3, điều 31, thông tƣ 01/2011/TT-NHNN).

6. Các quy định về kiểm soát truy cập thông tin và ứng dụng: quản lý và phân quyền truy cập thông tin ứng dụng phù hợp với chức năng nhiệm vụ của người sử dụng. Các hệ thống thông tin

70 Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

quan trọng phải đặt trong môi trường mạng máy tính riêng (theo khoản điều 253, thông tƣ 01/2011/TT-NHNN).

7. Dữ liệu DB của ứng dụng phải được sao lưu dự phòng và lưu trữ an toàn, tách biệt với dữ liệu chính theo quy định, đảm bảo phục hồi khi có sự cố, thảm họa xảy ra. (theo điều 16, thông tƣ 01/2011/TT-NHNN).

Các biện pháp hành chính để bảo đảm an toàn

Đảm bảo các biện pháp kỹ thuật để bảo đảm an toàn đƣợc cơ quan quản lý vận hành hệ thống ban hành trong quy chế khai thác vận hành hệ thống CMO.

- Phỏng vấn cán bộ quản lý vận hành hệ thống

- Cán bộ đánh giá kiểm tra xem các biện pháp kỹ thuật (7 biện pháp kỹ thuật quy định trong

A = Số biện pháp kỹ thuật đƣợc mô tả trong quy chế.

X = A/7 x 100

X

- Cán bộ quản lý vận hành hệ thống

71 Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

thông tƣ 01/2011/TT-NHNN nêu trên) để bảo đảm an toàn có đƣợc quy định trong quy chế vận hành hệ thống CMO hay không.

Giải pháp khắc phục sự cố

- Đảm bảo đơn vị quản lý vận hành hệ thống có xây dựng phương án dự phòng khắc phục sự cố bảo đảm hệ thống CMO hoạt động liên tục.

- Phỏng vấn cán bộ quản lý vận hành hệ thống xem đơn vị có ban hành giải pháp khắc phục sự cố cho hệ thống CMO.

Có giải pháp khắc phục sự cố: X = 100

Không có giải pháp:

X = 0

X

- Cán bộ quản lý vận hành hệ thống.

Giải pháp sao lưu và phục hồi hệ thống

- Đảm bảo đơn vị quản lý vận hành hệ thống có xây dựng giải pháp sao lưu và phục hồi hệ thống bảo đảm hệ thống CMO hoạt động liên tục.

- Phỏng vấn cán bộ quản lý vận hành hệ thống xem đơn vị có ban hành giải pháp sao lưu và phục hồi hệ thống.

Có giải pháp sao lưu và phục hồi hệ thống:

X = 100

Không có giải pháp:

X = 0

X

- Cán bộ quản lý vận hành hệ thống.

72 4.4.1.4 Thõa mãn người dùng

Bảng 4. 7: Phép đánh giá thõa mãn người dùng

Tên phép đánh

giá Mục đích của phép đánh giá Phương pháp áp dụng

Phép đo, công thức và tính toán các thành phần dữ liệu

Điểm đạt đƣợc (thang

100)

Đối tƣợng đánh giá

Mức độ hài lòng của người dùng đối với hiệu quả khi sử dụng hệ thống

- Đánh giá mức độ hài lòng của người dùng đối với những hiệu quả mà hệ thống mang lại.

- Khảo sát lấy ý kiến của người dùng về sự hài lòng đối với hiệu quả khi sử dụng hệ thống CMO.

- A = Số người dùng hài lòng đối với hệ thống CMO.

- B = Tổng số người dùng đƣợc khảo sát.

 X=A/B x 100

X

- Các cán bộ sử dụng hệ thống CMO tại Chi cục PHKQ và các chi nhánh NHNN phía Nam.

Mức độ hài lòng của người dùng đối với các chức năng của hệ thống

- Đánh giá mức độ hài lòng của người dùng đối với các chức năng của hệ thống.

- Khảo sát lấy ý kiến của người dùng về sự hài lòng đối với các chức năng của hệ thống CMO.

- A = Số người dùng hài lòng đối với các chức năng của hệ thống CMO.

- B = Tổng số người dùng đƣợc khảo sát.

 X=A/B x 100

X

- Các cán bộ sử dụng hệ thống CMO tại Chi cục PHKQ và các chi nhánh NHNN phía

Một phần của tài liệu Đánh giá hiệu quả ứng dụng hệ thống quản lý tiền tệ và phát hành kho quỹ tập trung tại ngân hàng nhà nước việt nam (cmo) (Trang 72 - 88)

Tải bản đầy đủ (PDF)

(160 trang)