BÀI 5: CÁC KỸ THUẬT ĐÁNH GIÁ. ThS. Phan Thanh Toàn

BÀI CÁC KỸ THUẬT ĐÁNH GIÁ ThS Phan Thanh Tồn TÌNH HUỐNG DẪN NHẬP Nam nhân viên IT công ty phần mềm Quasoft, Nam thiết kế xong hệ thống giao diện người dùng cho sản phẩm phần mềm thương mại điện tử công ty A  Dựa vào tiêu chí để đánh giá hệ thống giao diện Nam thiết kế? MỤC TIÊU Trình bày phương pháp đánh giá thiết kế HCI số tiêu chí lựa chọn phương pháp đánh giá NỘI DUNG Khái niệm vai trò đánh giá thiết kế HCI Các kiểu đánh giá Đánh giá thiết kế Đánh giá cài đặt Lựa chọn phương pháp đánh giá KHÁI NIỆM VÀ VAI TRÒ CỦA ĐÁNH GIÁ TRONG THIẾT KẾ HCI • Đánh giá khơng phải giai đoạn trình thiết kế HCI • Đánh giá cần thực suốt trình thiết kế • Đánh giá thu thập liệu kiểm tra tính dùng thiết kế đảm bảo nhiệm vụ chính:  Khẳng định tính mở rộng chức hệ thống;  Khẳng định tính hiệu giao tiếp người dùng;  Xác định số vấn đề đặc biệt nảy sinh q trình sử dụng • Đánh giá bao gồm khía cạnh sau:  Đánh giá hệ thống chức năng;  Đánh giá hệ thống tính dễ dùng, dễ học,…  Phải định lượng 5.2 CÁC KIỂU ĐÁNH GIÁ • Phân theo điều kiện môi trường đánh giá:  Đánh giá phịng thí nghiệm;  Đánh giá thực địa • Phân theo thời gian, vòng đời thiết kế:  Đánh giá thiết kế;  Đánh giá cài đặt Đánh giá phịng thí nghiệm • Diễn phịng thí nghiệm • Thường dùng cho q trình thiết kế • Người tham gia: Người thiết kế, thành viên nhóm,… • Thuận lợi: điều kiện khách quan nhờ trang thiết bị đại phịng thí nghiệm • Nhược điểm: thiếu ngữ cảnh 5.2 CÁC KIỂU ĐÁNH GIÁ Đánh giá chỗ (Đánh giá thực địa): • Đánh giá tiến hành với nhiều người sử dụng • Đánh giá thực giai đoạn thiết kế cài đặt • Thuận lợi:  Diễn theo ngữ cảnh  Dễ dàng quan sát tương tác hệ thống, cá nhân • Nhược điểm:  Bị ảnh hưởng môi trường (Tiếng ồn,….)  Bị ảnh hưởng kỹ sử dụng người dùng ĐÁNH GIÁ THIẾT KẾ • Việc đánh giá diễn giai đoạn thiết kế  phát sớm lỗi • Các kỹ thuật đánh giá thiết kế:  Congnitive WalkThrough;  Đánh giá Heuristic;  Đánh giá dựa vào mô hình;  Đánh giá dựa vào xem xét lại • Phần lớn đánh giá khơng cần có mặt người dùng Mơ hình Congnitive WalkThrought • Do Polson đồng nghiệp đề xuất, phương pháp có tính dự đốn kiểu Review nhằm phát vấn đề từ sớm • WalkThrough yêu cầu xem xét cách chi tiết chuỗi hành động, hành động đoạn mã chương trình • Cách kiểm tra tiến hành kỹ thuật WalkThrough đưa câu hỏi liên quan đến việc khám phá ĐÁNH GIÁ THIẾT KẾ (tiếp theo) • Kỹ thuật cần thông tin sau:  Một mô tả nguyên mẫu hệ thống;  Một mô tả nhiệm vụ mà người dùng phải thực hiện;  Một danh sách chi tiết hành động cần thiết để hoàn thành nhiệm vụ theo nguyên mẫu;  Một dẫn người dùng tri thức, kinh nghiệm mà người đánh giá giả định • Với hành động người đánh giá cố gắng trả lời câu hỏi sau:  Người dùng có tạo tác động hành động khơng? Những khẳng định nhiệm vụ mà hành động hỗ trợ theo kinh nghiệm tri thức người dùng tương tác  Người dùng có khả để ý hành động có hay khơng?  Khi người dùng tìm thấy hành động giao tiếp liệu họ có biết cho mục đích mà họ cố tạo ra?  Sau hành động, người dùng hiểu phản hồi hệ thống? ĐÁNH GIÁ THIẾT KẾ (tiếp theo) Đánh giá Heuristic • Là ngun tắc, tập luật trợ giúp cho định thiết kế • Kỹ thuật áp dụng giai đoạn đầu thiết kế • Nhiều người đánh giá độc lập tiến hành hệ thống để đánh giá tính dùng • Có Heuristic:  Đối thoại đơn giản tự nhiên:  Đơn giản: sử dụng thơng tin;  Tự nhiên: lệnh gần với u cầu  Nói ngơn ngữ người dùng:  Sử dụng cách nói người dùng;  Không sử dụng thuật ngữ công nghệ 10 ĐÁNH GIÁ THIẾT KẾ (tiếp theo) • Các quy định:  Thấy trạng thái hệ thống Hệ thống phải cho người dùng thấy họ làm thông qua thông tin phản hồi thời gian hợp lý  Sự tự quản lý người dùng: người dùng gặp lỗi, phải có khẩn cấp  Dự báo lỗi  Chuẩn hóa quán  Đối sánh hệ thống với giới thực  Nhận biết nhớ lại: tạo cho hành động, đối tượng dễ dàng nhận biết người sử dụng không cần nhớ  Sử dụng hiệu mềm dẻo: sử dụng cho người có kinh nghiệm người khơng có kinh nghiệm  Thiết kế đơn giản có thẩm mỹ  Trợ giúp người dùng nhận biết, đối thoại, phục hồi từ trạng thái lỗi  Trợ giúp tài liệu 12 ĐÁNH GIÁ THIẾT KẾ (tiếp theo) Đánh giá dựa vào xem xét lại trình: Là kiểu đánh giá Heuristic, thường sử dụng cho ứng dụng nhỏ Đánh giá dựa mơ hình Đây kỹ thuật đánh giá địi hỏi:  Đặc tả chức hệ thống có liên quan  Một phân tích nhiệm vụ chứa danh sách nhiệm vụ gán chúng thành thành phần  Cấu trúc nhiệm vụ từ đơn giản đến phức tạp  Các thao tác người dùng đánh giá 13 13 ĐÁNH GIÁ THIẾT KẾ (tiếp theo) Ví dụ: Hành động Save File MS Word • Phương tiện: chuột menu • Giả thiết: nhiệm vụ bắt đầu thao tác người dùng đặt tay lên chuột Thời gian nhấn phím 0,35s, thời gian đáp ứng hệ thống 1,2s • Dãy thao tác:  Bắt đầu: Th (người dùng đặt tay lên chuột điều khiển chuột)  Chuyển trỏ đến menu: Tp, cộng với thời gian suy nghĩ TM  Tổng thời gian là: TP + TM  Chọn menu File, dịch chuyển mục Save Tổng thời gian thực là: TM + TK(File) + TP + TK(Save)  MS Word nhắc người dùng điền tên File: TR, người dùng gõ tên bấm Enter Tổng thời gian là: TR + TM + TK(File) + TK(Enter) Giả sử: TH = 0,4, TM = 1,35, TP=1,1, TK= 0,35, TR = 1,2 Tổng thời gian là: 13,05s 14 CÂU HỎI THẢO LUẬN Đánh giá Heuristic gì? 15 ĐÁNH GIÁ CÀI ĐẶT • Đây đánh giá có xuất người sử dụng hệ thống cài đặt, người sử dụng sử dụng mơ hay mẫu Có kỹ thuật chính:  Đánh giá thực nghiệm;  Kỹ thuật quan sát;  Kỹ thuật hỏi đáp Đánh giá thực nghiệm: • Là phương pháp quan trọng để đánh giá thiết kế, cung cấp chứng thực nghiệm để hỗ trợ yêu cầu giả thiết cụ thể • Cách thức tiến hành: người đánh giá lựa chọn giả thiết đánh giá thơng qua số thuộc tính chủ đề biến độc lập hay phụ thuộc nhằm đánh giá số khía cạnh đặc trưng thiết kế • Ba thông số quan trọng kỹ thuật là: chủ đề, biến giả thiết  Chủ đề:  Việc lựa chọn chủ để định tới thành công đánh giá Chủ đề chọn phải sánh với kỳ vọng lớp người dùng, gần tốt Lý tưởng kiểm tra với diện người dùng  Kích thước tập mẫu, mẫu chọn phải đủ lớn đặc trưng 16 ĐÁNH GIÁ CÀI ĐẶT (tiếp theo)  Biến: thực nghiệm quản lý đo đại lượng điều kiện kiểm soát nhằm kiểm tra giả thiết Ta thường sử dụng loại biến: Biến độc lập biến phụ thuộc:  Biến độc lập: đặc trưng thực nghiệm, nhằm tạo điều kiện so sánh khác như: kiểu giao tiếp, mức độ trợ giúp, số mức menu, icon,…Với kiểm tra phức tạp cần phải có nhiều biến độc lập  Biến phụ thuộc: biến đo đếm theo nhiều cách, thí dụ tốc độ lựa chọn menu thao tác với menu Thường đánh giá thực nghiệm biến phụ thuộc sử dụng để biểu diễn độ đo thời gian thực nhiệm vụ, số lỗi phạm phải, …  Giả thiết: số dự đốn kết thực nghiệm hình thành từ biến độc lập biến phụ thuộc Mục đích thực nghiệm dự đốn xác Thiết kế thực nghiệm: để tạo kết tin cậy có tính khái quát, đánh giá thực nghiệm phải thiết kế cẩn thận Để thiết kế đánh giá thực nghiệm ta tiến hành qua bước sau:  Phải xem xét yếu tố mà thực nghiệm phải coi chủ đề, biến giả thiết để định xác bạn thử chứng minh  Lựa chọn phương pháp sử dụng Ở đây, có nhóm phương pháp chính: 17 nhóm nội nhóm ĐÁNH GIÁ CÀI ĐẶT (tiếp theo) o Phương pháp nhóm: chủ đề gán cho điều kiện khác Phải có điều kiện: điều kiện thực nghiệm điều kiện kiểm tra Ưu điểm: Mọi tác động việc học thu từ kết thực người dùng điều kiện kiểm tra Mỗi người dùng thực điều kiện Nhược điểm: Đòi hỏi nhiều chủ đề  Sự khác nhóm phủ nhận kết o Phương pháp nhóm: người sử dụng thực điều kiện khác Ưu điểm: chi phí thấp cần người dùng hiệu có đào tạo Nhược điểm: kiểm tra khác tạo kết khác liệu  kết không hợp lý 18 ĐÁNH GIÁ CÀI ĐẶT (tiếp theo) Kỹ thuật quan sát • Người dùng hỏi việc thực tập nhiệm vụ định trước việc quan sát tiến hành với diện người dùng Hai kỹ thuật sử dụng quan sát trực tiếp quan sát gián tiếp  Quan sát trực tiếp: quan sát người dùng trạng thái thực  Ưu điểm: giảm trung gian  Nhược điểm: người dùng tập trung hiển diện người đánh giá  Quan sát gián tiếp: quay video sau phân tích kết thu • Kỹ thuật think aloud: kỹ thuật nhằm mô tả người dùng tin xảy ra, lại hành động họ cố làm gì? • Đánh giá tập thể: biến thể Think aloud, người dùng cố gắng xem thành viên trình đánh giá không đơn chủ thể bị thực nghiệm 19 ĐÁNH GIÁ CÀI ĐẶT (tiếp theo) Thể thức phân tích kết quả: Có nhiều cách ghi lại kết người dùng:  Bút giấy;  Ghi âm;  Ghi hình;  Nhật ký máy tính;  Cơng cụ phân tích thể thức tự động 20 ĐÁNH GIÁ CÀI ĐẶT (tiếp theo) Kỹ thuật hỏi đáp • Phỏng vấn kỹ thuật nhằm thu thập thông tin cách trực tiếp có cấu trúc kinh nghiệm người dùng hệ thống tương tác Kỹ thuật mềm dẻo mà câu hỏi đa dạng, phù hợp với ngữ cảnh • Câu hỏi thường theo hướng tiếp cận xuống, từ tổng quát đến chi tiết • Phỏng vấn thường có hiệu với việc điều tra loại thơng tin như: sở thích, ấn tượng thái độ người dùng • Để vấn có hiệu cần có kế hoạch trước, cần xác định số câu hỏi chính, gợi ý Người vấn cần lựa chọn cho phù hợp với người dùng để thu thập nhiều thông tin xác đáng 21 LỰA CHỌN PHƯƠNG PHÁP ĐÁNH GIÁ • Có nhiều kỹ thuật đánh giá kỹ thuật dùng nhiều giai đoạn vòng đời phát triển Mỗi phương pháp có ưu điểm nhược điểm riêng Vậy việc lựa chọn phương pháp cần thiết không dễ Khi xem xét lựa chọn phương pháp đánh giá cần quan tâm đến số vấn đề sau:  Các giai đoạn vòng đời mà đánh giá thực hiện;  Hình thức đánh giá;  Mức độ chủ quan hay khác quan kỹ thuật;  Kiểu số đo cung cấp;  Thông tin cung cấp;  Mức độ đan xen;  Tài nguyên yêu cầu • Thiết kế ngược với cài đặt  Đánh giá gia đoạn thiết kế liên quan đến chuyên gia mang tính phân tích  Đánh giá cài đặt xem người dùng chủ thể thực nghiệm 22 LỰA CHỌN PHƯƠNG PHÁP ĐÁNH GIÁ (tiếp theo) • Phịng thí nghiệm ngược với thực nghiệm  Đánh giá phịng thí nghiệm cho phép kiểm tra thực nghiệm quan sát khơng cần có mặt người dùng, song khơng tự nhiên  Đánh giá thực nghiệm tự nhiên hơn, nhiên tốn có kết mâu thuẫn • Khách quan ngược với chủ quan: nhiều kỹ thuật mang tính chủ quan Walkthrough hay Think alound dựa vào tri thức kinh nghiệm nhà đánh giá, người đánh giá phải nhận thức hiểu người dùng làm 23 LỰA CHỌN PHƯƠNG PHÁP ĐÁNH GIÁ (tiếp theo) • Định lượng ngược với định tính  Kiểu số đo cung cấp kỹ thuật đánh giá yếu tố quan trọng Hai loại số đo quan tâm số đo định tính định lượng Số đo định lượng số đo dễ phân tích dùng kỹ thuật thống kê, số đo định tính phi số khó phân tích  Định lượng hay định tính có liên quan đến tính chủ quan khách quan kỹ thuật Kỹ thuật chủ quan có khuynh hướng cung cấp số đo định tính, kỹ thuật khách quan cung cấp số đo định lượng • Thơng tin cung cấp: mức độ thơng tin yêu cầu cho đánh giá phức tạp • Đáp ứng tức thời: có kỹ thuật ghi lại hành vi người dùng thời điểm tương tác, có kỹ thuật lại liên quan đến tập kiện người dùng • Tính xâm phạm: hành động nhạy cảm người đánh giá hỗ trợ nhằm làm giảm hành vi nguy hiểm người dùng, nhiên loại bỏ tất Phần lớn kỹ thuật đánh giá có tính xâm phạm trừ nhật ký hệ thống tự động • Tài nguyên:  Tài nguyên phần thiếu kỹ thuật đánh giá  Tài nguyên có giới hạn 24 CÂU HỎI TƯƠNG TÁC Đánh giá cài đặt gì? Có kỹ thuật thường sử dụng đánh giá cài đặt 25 TĨM LƯỢC CUỐI BÀI • Trình bày phương pháp đánh giá thiết kế HCI số tiêu chí lựa chọn phương pháp đánh giá • Biết tầm quan trọng đánh giá Vì phải đánh giá tương tác người – máy • Các kỹ thuật đánh giá 26