CHƯƠNG 4: XÂY DỰNG BỘ TIÊU CHÍ VÀ PHƯƠNG PHÁP ĐÁNH GIÁ CHẤT LƢỢNG HỆ THỐNG CMO ĐỀ XUẤT
4.4 Bộ tiêu chí đề xuất đánh giá chất lƣợng hệ thống CMO
4.4.2 Các tiêu chí đánh giá chất lƣợng ngoài
4.4.2.1 Tính chức năng
Bảng 4. 8: Phép đánh giá tính chức năng Tên phép
đánh giá Mục đích của phép đánh giá Phương pháp áp dụng
Phép đo, công thức và tính toán các thành phần dữ liệu
Điểm đạt đƣợc (thang 100)
Đối tƣợng đánh giá
Đầy đủ chức năng
- Đảm bảo hệ thống CMO cung cấp đầy đủ các chức năng nghiệp vụ theo quy định trong Tài liệu hướng dẫn quy trình nghiệp vụ kho quỹ (đính
kèm công văn số
8742/NHNN-PHKQ của Cục phát hành và kho quỹ).
- Cán bộ đánh giá kiểm tra hồ sơ đặc tả hệ thống CMO đếm số chức năng hệ thống hỗ trợ.
- Kiểm tra việc đáp ứng các chức năng cần có của hệ thống CMO theo Tài liệu hướng dẫn quy trình nghiệp vụ kho quỹ (đính kèm công văn số 8742/NHNN-PHKQ của Cục phát hành và kho quỹ.
- A = số lƣợng các chức năng cần có mà hệ thống đáp ứng
- B = tổng số lƣợng các chức năng cần thực hiện theo quy định.
X=A/B x 100
X - Hệ thống CMO
Chức năng hoạt động ổn định
- Đảm bảo các chức năng của hệ thống CMO hoạt động ổn định, không gây ra lỗi.
- Cán bộ đánh giá trực tiếp kiểm thử hoạt động của hệ thống. Lập các tình huống kiểm thử với mục
- A = số lƣợng các chức năng xảy ra lỗi phát hiện đƣợc
X
- Hệ thống CMO
75 Tên phép
đánh giá Mục đích của phép đánh giá Phương pháp áp dụng
Phép đo, công thức và tính toán các thành phần dữ liệu
Điểm đạt đƣợc (thang 100)
Đối tƣợng đánh giá
đích phát hiện lỗi.
- Kết hợp với kiểm tra hệ thống Ghi nhận và xử lý sự cố tại Cục/Chi cục CNTH.
- B = tổng số lƣợng các chức năng của hệ thống
X=100 - A/B x 100
Khả năng tương tác
- Đảm bảo hệ thống có khả năng tương tác, tích hợp và trao đổi dữ liệu với các hệ thống nghiệp vụ liên quan khác theo quy định.
- Kiểm tra tài liệu đặc tả hệ thống/
Biên bản nghiệm thu hệ thống và kiểm tra trực tiếp hệ thống CMO chức năng hỗ trợ tương tác với hệ thống khác.
- Kiểm tra Tài liệu hướng dẫn quy trình nghiệp vụ kho quỹ (đính kèm công văn số 8742/NHNN- PHKQ của Cục phát hành và kho quỹ), đếm số lƣợng định dạng dữ liệu bắt buộc tích hợp, trao đổi với các hệ thống nghiệp vụ liên quan.
- A= Số lƣợng định dạng dữ liệu đƣợc chấp thuận trao đổi thành công với phần mềm và hệ thống khác trong quá trình kiểm tra trao đổi dữ liệu.
- B= Tổng số định dạng dữ liệu đƣợc trao đổi
X= A / B x 100
X
- Hệ thống CMO
76 4.4.2.2 Tính hiệu quả
Bảng 4. 9: Phép đánh giá tính hiệu quả Tên phép
đánh giá Mục đích của phép đánh giá Phương pháp áp dụng Phép đo, công thức và tính toán các thành phần dữ liệu
Điểm đạt đƣợc (thang
100)
Đối tƣợng đánh giá
Hiệu suất làm việc của máy chủ cơ sở dữ liệu
- Đảm bảo hiệu suất làm việc trung bình của CPU trên máy chủ cơ sở dữ liệu <
75%
- Sử dụng công cụ OEM Grid control của Oracle hoặc công cụ giám sát Tivoli monitoring tại Cục CNTH hoặc kiểm tra hiệu suất CPU trực tiếp trên máy chủ CSDL để đo hiệu suất làm việc trung bình của CPU trên máy chủ CSDL.
- A = hiệu suất trung bình của CPU
A ≤ 75% X = 100
75% < A ≤ 80%
X = 70
80% < A ≤ 90%
X = 50
A > 90% X = 0
X
- Hệ thống CMO
Hiệu suất làm việc của máy chủ chạy ứng dụng
Đảm bảo hiệu suất làm việc trung bình của CPU trên máy chủ chạy phần mềm CMO <
75%
- Sử dụng công cụ giám sát Tivoli monitoring tại Cục CNTH hoặc kiểm tra hiệu suất CPU trực tiếp trên máy chủ hoặc chức năng đo hiệu suất CPU trực tiếp trên ứng dụng để đo hiệu suất làm việc
- A = hiệu suất trung bình của CPU
A ≤ 75% X = 100
75% < A ≤ 80%
X = 70
80% < A ≤ 90%
X = 50
X
- Hệ thống CMO
77 Tên phép
đánh giá Mục đích của phép đánh giá Phương pháp áp dụng Phép đo, công thức và tính toán các thành phần dữ liệu
Điểm đạt đƣợc (thang
100)
Đối tƣợng đánh giá
trung bình của CPU trên máy chủ ứng dụng.
A > 90% X = 0
Thời gian hoạt động liên tục
- Đảm bảo hệ thống hoạt động liên tục từ khi đƣa vào sử dụng đến thời điểm đánh giá.
- Căn cứ vào thời điểm hệ thống đƣợc đƣa vào sử dụng đến thời điểm đánh giá.
Phỏng vấn cán bộ quản lý vận hành hệ thống.
- Nếu hệ thống hoạt động liên tục: X = 100
- Nếu hệ thống bị gián đoạn:
X = 0
X
- Hệ thống CMO
- Cán bộ quản lý vận hành 4.4.2.3 Tính Khả dụng
Bảng 4. 10: Phép đánh giá tính khả dụng
Tên phép đánh
giá Mục đích của phép đánh giá Phương pháp áp dụng
Phép đo, công thức và tính toán các thành phần dữ liệu
Điểm đạt đƣợc (thang
100)
Đối tƣợng đánh giá
Dễ sử dụng - Đánh giá mức độ dễ sử dụng các chức năng của hệ thống.
- Khảo sát lấy ý kiến của người dùng
X = số người nhận xét hệ
thống dễ sử dụng X
- Hệ thống CMO
78 Tên phép đánh
giá Mục đích của phép đánh giá Phương pháp áp dụng
Phép đo, công thức và tính toán các thành phần dữ liệu
Điểm đạt đƣợc (thang
100)
Đối tƣợng đánh giá
Giao diện thân thiện, phù hợp
- Đảm bảo giao diện hệ thống phù hợp, thân thiện với người sử dụng.
Khảo sát lấy ý kiến của người dùng
X = số người nhận xét giao diện hệ thống thân thiện, phù hợp
X
- Hệ thống CMO
Khả năng phục hồi lỗi
- Đảm bảo hệ thống cho phép dễ dàng sửa lỗi khi thực hiện các thao tác sai (nhƣ nhập sai chứng từ cần sửa lại) đối với người dùng
Khảo sát lấy ý kiến của người dùng
X = số người nhận xét hệ thống dễ dàng cho phép sửa lỗi khi thực hiện thao tác sai.
X
- Hệ thống CMO
Tóm tắt chương:
Dựa trên các khảo sát thực tiễn về hệ thống CMO, các tiêu chuẩn quốc tế về đánh giá chất lƣợng phần mềm đề tài đã xây dựng đƣợc bộ tiêu chí bao gồm các tiêu chí và nhiều phép đánh giá cho từng tiêu chí áp dụng để đánh giá chất lƣợng hệ thống CMO.