Bài giảng Tương tác người máy: Chương 9 - Các kỹ thuật đánh giá có nội dung trình bày khái niệm và vai trò của đánh giá trong thiết kế tương tác người máy; Các kiểu đánh giá; Đánh giá thiết kế; Đánh giá cài đặt; Lựa chọn phương pháp đánh giá. Mời các bạn cùng tham khảo chi tiết bài giảng tại đây.
Prepared by MSc Luong manh Ba Chương Các kỹ thuật đánh giá Nội dung 9.1 Khái niệm vai trò đánh giá thiết kế tương tác người máy 9.2 Các kiểu đánh giá 9.3 Đánh giá thiết kế 9.4 Đánh giá cài đặt 9.5 Lựa chọn phương pháp đánh giá HUT, Falt of IT Dept of SE, August-2002 HCI – Three 30 Prepared by MSc Luong manh Ba 9.1 Khái niệm vai trò đánh giá thiết kế tương tác người máy • Đánh giá khơng phải giai đoạn qúa trình thiết kế mà nhiệm vụ trung tâm trình thiết kế Nó diễn suốt vịng đời HCI • Đánh giá thu thập liệu kiểm tra tính dùng thiết kế • Ba mục đích đánh giá: i) Khẳng định tính mở rộng chức hệ thống ii) Khẳng định tính hiệu giao tiếp HUT, Falt of IT Dept of SE, August-2002 HCI – Three 31 Prepared by MSc Luong manh Ba 9.1 Khái niệm vai trò đánh giá thiết kế tương tác người máy (tiếp) iii) Xác định số vấn đề đặc biệt nảy sinh trình sử dụng • Chức HT quan trọng: có đáp ứng với đặc tả yêu cầu ND? Thiết kế HT phải có khả đáp ứng nhiệm vụ đặt cách dễ dàng: - Hành động mà ND cần để thực nhiệm vụ - Đánh giá khả sử dụng HT với mà ND mong đợi HUT, Falt of IT Dept of SE, August-2002 HCI – Three 32 Prepared by MSc Luong manh Ba 9.1 Khái niệm vai trò đánh giá thiết kế tương tác người máy tiếp) • Tính hiệu giao tiếp ND: - Lượng hoá tiêu chí thiết kế với ND - Tính dễ học - Tính sử dụng lại - Trạng thái ND - Xác định lĩnh vực TK chất lên người dùng theo cách HUT, Falt of IT Dept of SE, August-2002 HCI – Three 33 Prepared by MSc Luong manh Ba 9.1 Khái niệm vai trò đánh giá thiết kế tương tác người máy (tiếp) • Một số vấn đề nảy sinh trình TK: - Sắc thái TK chưa sử dụng có tạo nên kết không mong đợi? -Về vấn đề: chức tính dùng HUT, Falt of IT Dept of SE, August-2002 HCI – Three 34 Prepared by MSc Luong manh Ba 9.2 Các kiểu đánh giá i) Đánh giá PTN ii) Đánh giá thực nghiệm iii) Đánh giá giai đoạn TK iv) Đánh giá giai đoạn cài đặt 9.2.1 Đánh giá PTN - Nơi tiến hành: PTN - Dùng giai đoạn TK - Người TK thực số khẳng định không cần/có diện ND HUT, Falt of IT Dept of SE, August-2002 HCI – Three 35 Prepared by MSc Luong manh Ba 9.2 Các kiểu đánh giá (tiếp) - Các trang bị cần thiết yêu cầu thiết bị nghe nhìn, thiết bị ghi, 8.2.2 Đánh giá TN - Dùng giai đoạn TK hay cài đặt - Việc đánh giá thực môi trường ND nhằm đánh giá HT hoạt động trạng thái ND HUT, Falt of IT Dept of SE, August-2002 HCI – Three 36 Prepared by MSc Luong manh Ba 9.2 Các kiểu đánh giá (tiếp) - Hạn chế: tiếng ồn, chuyển động => tập trung - Do môi trường tự nhiên nên khách quan - Đánh giá hoạt động thường ngày, tháng, => ưa chuộng HUT, Falt of IT Dept of SE, August-2002 HCI – Three 37 Prepared by MSc Luong manh Ba 9.3 Đánh giá giai đoạn thiết kế Mục đích - Dùng giai đoạn TK => tránh số sai sót đáng tiếc - Các sai sót phát giai đoạn cuối làm giảm chi phí - Một số phương pháp đánh giá dự đoán HUT, Falt of IT Dept of SE, August-2002 HCI – Three 38 Prepared by MSc Luong manh Ba 9.3 Đánh giá giai đoạn thiết kế (tiếp) Các kỹ thuật - Cognitive WalkThrough - Đánh giá kiểu Heuristic - Đánh giá dựa vào mơ hình - Đánh giá dựa vào xem xét lại HUT, Falt of IT Dept of SE, August-2002 HCI – Three 39 Prepared by MSc Luong manh Ba Đánh giá tập thể - Là biến thể think aloud, ND cố gắng xem thành viên q trình đánh giá khơng đơn chủ thể bị thực nghiệm - Khi bắt đầu tiến hành, người đánh giá hỏi ND câu hỏi như: sao, - Ưu điểm: + Qui trình bị ràng buộc dễ học người đánh giá + ND cố gắng phê phán HT + Người đánh giá rõ điểm nhầm lẫn thời điểm xẩy cực đại háo hiệu HUT, Falt of IT Dept of SE, August-2002 HCI – Three 78 Prepared by MSc Luong manh Ba Thể thức phân tích Có nhiều cách ghi lại hành động ND: i) Bút giấy ii) Ghi âm iii) Ghi hình iv) Nhật ký máy tính v) Sổ tay ND Thường sử dụng phối hợp phương pháp Sử dụng công cụ ghi tự động: Experimental Video Annotator, WorkPlace project, HUT, Falt of IT Dept of SE, August-2002 HCI – Three 79 Prepared by MSc Luong manh Ba 9.4.3 Kỹ thuật hỏi đáp - Kỹ thuật vấn: có cấu trúc, mềm dẻo => cần xác định số thông số số câu hỏi, gợi ý - Hỏi giám sát : dùng câu hỏi dạng đóng hay dạng mở Câu hỏi đóng dùng dạng Multichoice; câu hỏi mở phải có gợi ý - Các dạng trả lời dùng bảng, mẫu điền HUT, Falt of IT Dept of SE, August-2002 HCI – Three 80 Prepared by MSc Luong manh Ba 9.4.3 Kỹ thuật hỏi đáp (tiếp) - Thí dụ Bạn sử dụng lệnh hệ STVN? Yes No Don’t know Duplicate Paste HUT, Falt of IT Dept of SE, August-2002 HCI – Three 81 Prepared by MSc Luong manh Ba 9.5 Lựa chọn phương pháp đánh giá Tiêu chí - Phụ thuộc tham gia ND ngữ cảnh thực nhiệm vụ hay đánh giá Mỗi phương pháp có ưu điểm nhược điểm riêng - Có nhiều yếu tố cần phải xem xét lựa chọn kỹ thuật đánh giá HUT, Falt of IT Dept of SE, August-2002 HCI – Three 82 Prepared by MSc Luong manh Ba 9.5 8.5 Lựa Lựa chọn chọn phương phương pháp pháp đánh đánh giá giá yếu tố phân biệt Các yÕu tố phân biÖt kỹ thuật đánh giá - Giai đoạn vịng đời mà đánh giá thực - Hình thức đánh giá - Mức độ chủ quan hay khách quan kỹ thuật - Kiểu số đo cung cấp - Thông tin cung cấp - Mức độ đan xen HUT, Falt of IT Dept of SE, August-2002 HCI – Three 83 Prepared by MSc Luong manh Ba Các yếuchọn tố phân biệt pháp kỹđánh thuậtgiá 8.5 Lựa phương đánh giá (tiếp) - Tài nguyên yêu cầu i) Đáh giá ngược với cài đặt - Trong giai đoạn cài đặt yếu tố vật lý tồn thí dụ mock-up cho việc cài đặt đầy đủ có cụ thể kiểm tra - Đánh giá giai đoạn thiết kế có khuynh hướng liên quan đến chun gia mang tính phân tích, đánh giá cài đặt xem xét ND chủ thể thực HUT, Falt of IT Dept of SE, August-2002 HCI – Three 84 ghiệm Prepared by MSc Luong manh Ba Các yếuchọn tố phân biệt pháp kỹđánh thuậtgiá 8.5 Lựa phương đánh giá (tiếp) ii)Phòng TN ngược với thực nghiệm - Đánh giá PTN cho phép kiểm tra thực nghiệm quan sát mặt ND, khơng tự nhiên - Đánh giá Thùc NghiÖm khắc phục điểm yếu - Lý tưởng tiến hành kiểu giai đoạn TK iii)Khách quan ngược với chủ quan - Nhiều kỹ thuật mang tính chủ quan Walkthrough hay think aloud dựa vào tri thức kinh nghiệm nhà đánh giá- người phải nhận thức phải hiểu ND làm HUT, Falt of IT Dept of SE, August-2002 HCI – Three 85 Prepared by MSc Luong manh Ba Các yếuchọn tố phân biệt pháp kỹđánh thuậtgiá 8.5 Lựa phương đánh giá (tiếp) iv)Định lượng ngược với định tính - Kiểu số đo cung cấp kỹ thuật đánh giá yếu tố quan trọng - Hai loại số đo: định tính định lượng Số đo định lượng thường số dễ phân tích dùng kỹ thuật thống kê; số đo định tính phi số khó phân tích cung cấp chi tiết quan trọng mà xác định số - Định lượng hay định tính có liên quan đến tính chủ quan khách quan kỹ thuật - Kỹ thuật chủ quan có khuynh hướng cung cấp số đo định tính; kỹ thuật khách quan cung cấp số đo định lượng.Thông tin cung cấp HUT, Falt of IT Dept of SE, August-2002 HCI – Three 86 Prepared by MSc Luong manh Ba Các yếuchọn tố phân biệt pháp kỹđánh thuậtgiá 8.5 Lựa phương đánh giá (tiếp) - Có thể ánh xạ kiểu số đo, thí dụ đánh giá kiểu hỏi đáp định tính, song định lượng theo tỉ lệ v)Thông tin cung cấp - Mức độ thông tin yêu cầu cho đánh giá đa dạng vi) Đáp ứng tức thời - Một số kỹ thuật Think aloud ghi lại hành vi ND thời điểm tương tác Một số kỹ thuật khác Walkthrough lại liên quan đến tập kiện ND HUT, Falt of IT Dept of SE, August-2002 HCI – Three 87 Prepared by MSc Luong manh Ba Các yếuchọn tố phân biệt pháp kỹđánh thuậtgiá 8.5 Lựa phương đánh giá (tiếp) vii) Tính xâm phạm - Một số kỹ thuật đặc biệt kỹ thuật cung cấp số đo trực tiếp có ảnh hưởng đến cách thức ứng xử ND viii)Tài nguyên - Thiết bị, thời gian, tiền bạc, kinh nghiệm chuyên gia, ngữ cảnh - Một số định bị bắt buộc hạn chế tài nguyên thí dụ phải dùng camera để đánh giá song lại khơng có HUT, Falt of IT Dept of SE, August-2002 HCI – Three 88 Prepared by MSc Luong manh Ba Phân loại kỹ thuật đánh giá (kỹ thuật phân tích) Giai đoạn Hình thức Mục đích Số đo Thông tin Trực tiếp TínhGò bó Thời gian Thiết bị Hàn lâm Congitive Walkthrough Heuristic Evaluation Review Based Model Based Toµn bé PTN Không Định tính M/ độ thấp N/A Không TB Thấp Toàn PTN Không Định tính M/ độ cao N/A Kh«ng ThÊp ThÊp TB ThiÕt kÕ PTN Nh TN Nh TN Nh TN Nh TN Kh«ng TB-thÊp ThÊp ThÊp Thiết kế PTN Không Định tính M/ độ thấp Nh TN Kh«ng TB ThÊp Cao Cao HUT, Falt of IT Dept of SE, August-2002 HCI – Three 89 Prepared by MSc Luong manh Ba Phân loại kỹ thuật đánh giá (kỹ thuật TN hỏi đáp) Thùc Giai đoạn nghiệm Toàn Hình thức PTN Mục đích Có Số đo Định tính Thông tin Trực tiếp TínhGò bó Thời gian Thiết bị Hàn lâm HUT, Falt of IT M ®é thÊp/cao Cã Cã Cao TB TB Pháng vÊn Toàn PTN/TN Không Định tính/ Định lợng M/ độ cao Hỏi đáp Toàn PTN/TN Không Định tính/ Định lợng M/ độ cao Không Không Thấp Thấp Thấp Không Kh«ng TB-thÊp ThÊp ThÊp Dept of SE, August-2002 HCI – Three 90 Prepared by MSc Luong manh Ba Phân loại kỹ thuật đánh giá (kỹ thuật phân tích) Suy nghĩ chủ yếu Giai đoạn Cài đặt Hình thức PTN/TN Mục đích Không Số đo Định tính Thông tin M/ độ thấp cao Trực tiếp Có TínhGò bó Có Thời gian Cao Thiết bị Thấp TB Hàn lâm HUT, Falt of IT Thể thức phân tích Cài đặt PTN/TN Không Định tính M/ độ thấp cao Có Cã Cao Cao Cao Dept of SE, August-2002 Post-Task Walkthrough Cài đặt PTN/TN Không Định tính M/ độ thấp cao Không Không TB Thấp TB HCI Three 91 Prepared by MSc Luong manh Ba Kết luận • Đánh giá phần tích hợp q trình thiết kế phải tiến hành suốt vòng đời thiết kế tương tác • Việc đánh giá TK nhằm làm giảm chi phí lỗi • Việc lựa chọn phương pháp đánh giá phụ thuộc nhiều vào yêu cầu đánh giá HUT, Falt of IT Dept of SE, August-2002 HCI – Three 92 ... August-2002 HCI – Three 38 Prepared by MSc Luong manh Ba 9. 3 Đánh giá giai đoạn thiết kế (tiếp) Các kỹ thuật - Cognitive WalkThrough - Đánh giá kiểu Heuristic - Đánh giá dựa vào mơ hình - Đánh giá. .. kiểu đánh giá i) Đánh giá PTN ii) Đánh giá thực nghiệm iii) Đánh giá giai đoạn TK iv) Đánh giá giai đoạn cài đặt 9. 2.1 Đánh giá PTN - Nơi tiến hành: PTN - Dùng giai đoạn TK - Người TK thực số... Luong manh Ba 9. 4 Đánh giá cài đặt - Có diện ND hệ thống cài đặt - Có thể sử dụng mơ hay mẫu thử - kỹ thuật chính: i) Đánh giá thực nghiệm ii) Kỹ thuật quan sát iii) Kỹ thuật hỏi đáp HUT, Falt