CHƯƠNG 9 các kỹ THUẬT ĐÁNH GIÁ TRONG THIẾT kế TƯƠNG tác NGƯỜI máy TÍNH

Prepared by MSc Luong manh Ba Chng Cỏc k thut ỏnh giỏ thit k tng tỏc ngi mỏy Ni dung 9.1 Khỏi nim v vai trũ ca ỏnh giỏ thit k tng tỏc ngi mỏy 9.2 Cỏc kiu ỏnh giỏ 9.3 ỏnh giỏ thit k 9.4 ỏnh giỏ ci t 9.5 La chn phng phỏp ỏnh giỏ HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.1 Khỏi nim v vai trũ ca ỏnh giỏ thit k tng tỏc ngi mỏy ỏnh giỏ khụng phi l mt giai on qỳa trỡnh thit k m l nhim v trung tõm ca quỏ trỡnh thit k Nú din sut vũng i ca HCI ỏnh giỏ l thu thp d liu kim tra v tớnh dựng c ca thit k Ba mc ớch chớnh ca ỏnh giỏ: i) Khng nh tớnh m rng cỏc chc nng ca h thng ii) Khng nh tớnh hiu qu ca giao tip HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.1 Khỏi nim v vai trũ ca ỏnh giỏ thit k tng tỏc ngi mỏy (tip) iii) Xỏc nh mt s c bit ny sinh quỏ trỡnh s dng Chc nng ca HT l quan trng: cú ỏp ng vi c t yờu cu ND? Thit k HT phi cú kh nng ỏp ng cỏc nhim v t mt cỏch d dng: - Hnh ng m ND cn thc hin nhim v - ỏnh giỏ kh nng s dng ca HT vi cỏi m ND mong i HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.1 Khỏi nim v vai trũ ca ỏnh giỏ thit k tng tỏc ngi mỏy tip) Tớnh hiu qu ca giao tip ND: - Lng hoỏ c cỏc tiờu ca thit k vi ND - Tớnh d hc - Tớnh s dng li - Trng thỏi ca ND - Xỏc nh cỏc lnh vc ca TK cht lờn ngi dựng theo mt cỏch no ú HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.1 Khỏi nim v vai trũ ca ỏnh giỏ thit k tng tỏc ngi mỏy (tip) Mt s ny sinh quỏ trỡnh TK: - Sc thỏi ca TK cha c s dng cú to nờn kt qu khụng mong i? -V c : chc nng v tớnh dựng c HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.2 Cỏc kiu ỏnh giỏ i) ỏnh giỏ PTN ii) ỏnh giỏ thc nghim iii) ỏnh giỏ giai on TK iv) ỏnh giỏ giai on ci t 9.2.1 ỏnh giỏ PTN - Ni tin hnh: PTN - Dựng giai on TK - Ngi TK thc hin mt s khng nh khụng cn/cú s hin din ca ND HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.2 Cỏc kiu ỏnh giỏ (tip) - Cỏc trang b cn thit cú th c yờu cu nh thit b nghe nhỡn, thit b ghi, 8.2.2 ỏnh giỏ TN - Dựng giai on TK hay ci t - Vic ỏnh giỏ thc hin mụi trng ND nhm ỏnh giỏ HT hot ng v trng thỏi ND HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.2 Cỏc kiu ỏnh giỏ (tip) - Hn ch: ting n, chuyn ng => mt trung - Do mụi trng t nhiờn nờn khỏch quan - ỏnh giỏ c cỏc hot ng thng ngy, thỏng, => c a chung HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.3 ỏnh giỏ giai on thit k Mc ớch - Dựng giai on TK => trỏnh c mt s sai sút ỏng tic - Cỏc sai sút phỏt hin c giai on cui s lm gim chi phớ - Mt s phng phỏp ỏnh giỏ s c d oỏn HUT, Falt of IT Dept of SE, August-2002 HCI Three Prepared by MSc Luong manh Ba 9.3 ỏnh giỏ giai on thit k (tip) Cỏc k thut - Cognitive WalkThrough - ỏnh giỏ kiu Heuristic - ỏnh giỏ da vo mụ hỡnh - ỏnh giỏ da vo xem xột li HUT, Falt of IT Dept of SE, August-2002 HCI Three 10 Prepared by MSc Luong manh Ba ỏnh giỏ th - L mt bin th ca think aloud, ú ND c gng xem mỡnh nh mt thnh viờn quỏ trỡnh ỏnh giỏ ch khụng n thun l ch th b thc nghim - Khi bt u tin hnh, ngi ỏnh giỏ cú th hi ND cỏc cõu hi nh: ti sao, cỏi gỡ nu - u im: + Qui trỡnh l ớt b rng buc v d hc bi ngi ỏnh giỏ + ND c gng phờ phỏn HT + Ngi ỏnh giỏ cú th ch rừ im nhm ln thi im xy v cc i hỏo hiu qu HUT, Falt of IT Dept of SE, August-2002 HCI Three 49 Prepared by MSc Luong manh Ba Th thc phõn tớch Cú nhiu cỏch ghi li hnh ng ND: i) Bỳt v giy ii) Ghi õm iii) Ghi hỡnh iv) Nht ký mỏy tớnh v) S tay ND Thng s dng phi hp cỏc phng phỏp S dng cỏc cụng c ghi t ng: Experimental Video Annotator, WorkPlace project, HUT, Falt of IT Dept of SE, August-2002 HCI Three 50 Prepared by MSc Luong manh Ba 9.4.3 K thut hi ỏp - K thut phng vn: cú cu trỳc, mm => cn xỏc nh mt s thụng s nh s cõu hi, cỏc gi ý - Hi v giỏm sỏt : dựng cõu hi dng úng hay dng m Cõu hi úng cú th dựng nh dng Multichoice; cõu hi m phi cú gi ý - Cỏc dng tr li cú th dựng bng, mu in HUT, Falt of IT Dept of SE, August-2002 HCI Three 51 Prepared by MSc Luong manh Ba 9.4.3 K thut hi ỏp (tip) - Thớ d Bn cú th s dng cỏc lnh ca h STVN? Yes No Dont know Duplicate Paste HUT, Falt of IT Dept of SE, August-2002 HCI Three 52 Prepared by MSc Luong manh Ba 9.5 La chn phng phỏp ỏnh giỏ Tiờu - Ph thuc s tham gia ca ND ng cnh thc hin nhim v hay ỏnh giỏ Mi phng phỏp cú nhng u im v nhc im riờng - Cú nhiu yu t cn phi xem xột la chn cỏc k thut ỏnh giỏ HUT, Falt of IT Dept of SE, August-2002 HCI Three 53 Prepared by MSc Luong manh Ba 9.5 8.5 La La chn chn phng phng phỏp phỏp ỏnh ỏnh giỏ giỏ cỏc yu t phõn bit Cỏc yếu t phõn biệt cỏc k thut ỏnh giỏ - Giai on vũng i m ỏnh giỏ thc hin - Hỡnh thc ỏnh giỏ - Mc ch quan hay khỏch quan ca k thut - Kiu s o cung cp - Thụng tin cung cp - Mc an xen HUT, Falt of IT Dept of SE, August-2002 HCI Three 54 Prepared by MSc Luong manh Ba Cỏc yuchn t phõn bit phỏp cỏc kỏnh thutgiỏ 8.5 La phng ỏnh giỏ (tip) - Ti nguyờn yờu cu i) ỏh giỏ ngc vi ci t - Trong giai on ci t cỏc yu t vt lý ó tn ti thớ d nh cỏc bn mock-up cho vic ci t y v cú cỏi gỡ ú c th cú th kim tra c - ỏnh giỏ giai on thit k cú khuynh hng ch liờn quan n cỏc chuyờn gia v mang tớnh phõn tớch, ú ỏnh giỏ ci t xem xột ND nh l ch th v l thc ghim HUT, Falt of IT Dept of SE, August-2002 HCI Three 55 Prepared by MSc Luong manh Ba Cỏc yuchn t phõn bit phỏp cỏc kỏnh thutgiỏ 8.5 La phng ỏnh giỏ (tip) ii)Phũng TN ngc vi thc nghim - ỏnh giỏ PTN cho phộp kim tra thc nghim v quan sỏt khụng cú mt ND, khụng t nhiờn - ỏnh giỏ Thực Nghiệm khc phc im yu trờn - Lý tng l tin hnh c kiu giai on TK iii)Khỏch quan ngc vi ch quan - Nhiu k thut mang tớnh ch quan nh Walkthrough hay think aloud da vo tri thc v kinh nghim ca cỏc nh ỏnh giỏ- ngi phi nhn thc c v phi hiu cỏi ND s lm HUT, Falt of IT Dept of SE, August-2002 HCI Three 56 Prepared by MSc Luong manh Ba Cỏc yuchn t phõn bit phỏp cỏc kỏnh thutgiỏ 8.5 La phng ỏnh giỏ (tip) iv)nh lng ngc vi nh tớnh - Kiu s o cung cp bi cỏc k thut ỏnh giỏ l mt yu t quan trng - Hai loi s o: nh tớnh v nh lng S o nh lng thng l s v d phõn tớch dựng cỏc k thut nh thng kờ; s o nh tớnh l phi s v khú phõn tớch nhng cú th cung cp cỏc chi tit quan trng m khụng th xỏc nh bng s - nh lng hay nh tớnh cú liờn quan n tớnh ch quan hoc khỏch quan ca k thut - K thut ch quan cú khuynh hng cung cp s o nh tớnh; k thut khỏch quan cung cp cỏc s o nh lng.Thụng tin cung cp HUT, Falt of IT Dept of SE, August-2002 HCI Three 57 Prepared by MSc Luong manh Ba Cỏc yuchn t phõn bit phỏp cỏc kỏnh thutgiỏ 8.5 La phng ỏnh giỏ (tip) - Cú th ỏnh x gia kiu s o, thớ d nh ỏnh giỏ kiu hi ỏp l nh tớnh, song nh lng theo t l v)Thụng tin cung cp - Mc thụng tin yờu cu cho ỏnh giỏ l khỏ a dng vi) ỏp ng tc thi - Mt s k thut nh Think aloud ghi li hnh vi ca ND ti thi im tng tỏc Mt s k thut khỏc nh Walkthrough li liờn quan n s kin ca ND HUT, Falt of IT Dept of SE, August-2002 HCI Three 58 Prepared by MSc Luong manh Ba Cỏc yuchn t phõn bit phỏp cỏc kỏnh thutgiỏ 8.5 La phng ỏnh giỏ (tip) vii) Tớnh xõm phm - Mt s k thut c bit l cỏc k thut cung cp s o trc tip cú nh hng n cỏch thc ng x ca ND viii)Ti nguyờn - Thit b, thi gian, tin bc, kinh nghim chuyờn gia, ng cnh - Mt s quyt nh b bt buc hn ch v ti nguyờn thớ d nh phi dựng camera ỏnh giỏ song li khụng cú HUT, Falt of IT Dept of SE, August-2002 HCI Three 59 Prepared by MSc Luong manh Ba Phõn loi cỏc k thut ỏnh giỏ (k thut phõn tớch) Giai đoạn Hình thức Mục đích Số đo Thông tin Trực tiếp TínhGò bó Thời gian Thiết bị Hàn lâm Congitive Walkthrough Heuristic Evaluation Review Based Model Based Toàn PTN Không Định tính M/ độ thấp N/A Không TB Thấp Toàn PTN Không Định tính M/ độ cao N/A Không Thấp Thấp TB Thiết kế PTN Như TN Như TN Như TN Như TN Không TB-thấp Thấp Thấp Thiết kế PTN Không Định tính M/ độ thấp Như TN Không TB Thấp Cao Cao HUT, Falt of IT Dept of SE, August-2002 HCI Three 60 Prepared by MSc Luong manh Ba Phõn loi cỏc k thut ỏnh giỏ (k thut TN v hi ỏp) Giai đoạn Hình thức Mục đích Số đo Thông tin Trực tiếp TínhGò bó Thời gian Thiết bị Hàn lâm HUT, Falt of IT Thực nghiệm Toàn PTN Có Định tính M độ thấp/cao Có Có Cao TB TB Phỏng vấn Toàn PTN/TN Không Định tính/ Định lượng M/ độ cao Hỏi đáp Toàn PTN/TN Không Định tính/ Định lượng M/ độ cao Không Không Thấp Thấp Thấp Không Không TB-thấp Thấp Thấp Dept of SE, August-2002 HCI Three 61 Prepared by MSc Luong manh Ba Phõn loi cỏc k thut ỏnh giỏ (k thut phõn tớch) Giai đoạn Hình thức Mục đích Số đo Thông tin Trực tiếp TínhGò bó Thời gian Thiết bị Hàn lâm HUT, Falt of IT Suy nghĩ chủ yếu Cài đặt PTN/TN Không Định tính M/ độ thấp cao Có Có Cao Thấp TB Thể thức phân tích Cài đặt PTN/TN Không Định tính M/ độ thấp cao Có Có Cao Cao Cao Dept of SE, August-2002 Post-Task Walkthrough Cài đặt PTN/TN Không Định tính M/ độ thấp cao Không Không TB Thấp TB HCI Three 62 Prepared by MSc Luong manh Ba Kt lun ỏnh giỏ l phn tớch hp ca quỏ trỡnh thit k v phi tin hnh sut vũng i thit k tng tỏc Vic ỏnh giỏ TK nhm lm gim chi phớ v li Vic la chn mt phng phỏp ỏnh giỏ ph thuc nhiu vo yờu cu ỏnh giỏ HUT, Falt of IT Dept of SE, August-2002 HCI Three 63 [...]... Ba 9. 4 Đánh giá cài đặt - Có sự hiện diện của ND và hệ thống đã được cài đặt - Có thể sử dụng mô phỏng hay mẫu thử - 3 kỹ thuật chính: i) Đánh giá thực nghiệm ii) Kỹ thuật quan sát iii) Kỹ thuật hỏi đáp HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 35 Prepared by MSc Luong manh Ba 9. 4.1 Đánh giá thực nghiệm - Khó thực hiện trong phòng thí nghiệm - Là một trong các phương pháp quan trọng để đánh. .. giá kiểu Heuristic do Molich & Nelson đưa ra 199 0: dùng trong các UD nhỏ, thời gian đánh giá chừng 2h Tuy nhiên có thể nhiều hơn nếu UD lớn - Đánh giá kiểu Discount usability: chi phí thấp, thời gian và tài nguyên không nhiều HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 31 Prepared by MSc Luong manh Ba 9. 3.4 Kỹ thuật dựa vào mô hình Là kỹ thuật đánh giá đòi hỏi: - Đặc tả chức năng của HT phần... ND là ai và các tri thức, kinh nghiệm mà người đánh giá có thể giả định HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 12 Prepared by MSc Luong manh Ba 9. 3.1 Cognitive WalkThrough 4 câu hỏi => Với thông tin trên, người đánh giá thực hiện chuỗi các hành động và đưa ra các ý kiến về tính dùng được Với mỗi hành động, người đánh giá cố gắng trả lời 4 câu hỏi: i) ND cố tạo ra bất cứ tác động gì trên...Prepared by MSc Luong manh Ba 9. 3.1 Cognitive WalkThrough - Là phương pháp có tính dự đoán kiểu Review nhằm phát hiện vấn đề từ rất sớm - Xây dựng các định nghĩa từ các nhiệm vụ đặc tả HT hoặc từ màn hình "mock-up": từ màn hình này qua màn hình khác - Người đánh giá duyệt qua một chuỗi hành động để kiểm tra tính dùng được Mục đích chính của kỹ thuật này là thiết lập tính dễ học và dễ dùng của hệ thống... End, ) Cứ theo cách như vậy tiến hành cho các hành động HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 25 Prepared by MSc Luong manh Ba 9. 3.2 Kỹ thuật Heuristic - Là các nguyên tắc chung hay các guidline có thể trợ giúp một quyết định trong TK - Do Jacob Nielsen và Rolf Molich đề xuất - Dùng trong giai đoạn đầu của TK nhằm cố định tính dùng được - ý tưởng chính là nhiều đánh giá độc lập được... nghiệm - Là một trong các phương pháp quan trọng để đánh giá TK hay khía cạnh nào đó của TK - Cách thức tiến hành: Đề xuất giả thiết đánh giá thông qua một số biến độc lập/phụ thuộc và nhằm đánh giá một số khía cạnh đặc trưng của TK=> Đ/k đánh giá được thay đổi thông qua giá trị một số biến -Ba thông số: chủ đề (subjects), biến (variables) và giả thiết (hypothesis) HUT, Falt of IT  Dept of SE, August-2002... gán chúng thành các thành phần - Cấu trúc nhiệm vụ từ đơn giản đến phức tạp - Các thao tác ND có thể đánh giá bằng phương pháp giải tích - Mô hình vật lý Keytrock hay được áp dụng HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 32 Prepared by MSc Luong manh Ba 9. 3.4 Kỹ thuật dựa vào mô hình (tiếp) Thí dụ: " Save File trong MS Word" - Phương tiện: Dùng chuột và menu pull down - Giả thiết: Nhiệm vụ... hành động và các lựa chọn dÔ dàng nhận biết bởi ND chứ không cần nhớ 7)Sử dụng hiệu quả và mềm dẻo Dùng được cho cả ND có/không có kinh nghiệm 8 )Thiết kế đơn giản và có thẩm mỹ 9) Trợ giúp ND nhận biết, đối thoại và phục hồi từ trạng thái lỗi 10) Trợ giúp và tài liệu HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 30 Prepared by MSc Luong manh Ba 9. 3.3 Kỹ thuật dựa vào Review - Đánh giá kiểu Heuristic... MSc Luong manh Ba 9. 3.1 Cognitive WalkThrough Thí dụ Mục tiêu: Thiết kế điều khiển từ xa cho Video nhằm cho phép ND lập trình chọn lựa thời gian ghi Thiết kế ban đầu: hình xxx - Hình một: tập các phím trong trạng thái sử dụng bình thường - Hình hai: phím ghi thời gian được nhấn Video cho phép ND lập trình 3 chế độ ghi theo chuỗi khác nhau Số hiệu chuỗi tiếp theo có thể đựơc tự động thiết lập Chúng ta... Chúng ta muốn biết liệu thiết kế của mình có hỗ trợ nhiệm vụ ND không? Chúng ta bắt đầu bằng việc xác định nhiệm vụ tiêu biểu HUT, Falt of IT  Dept of SE, August-2002 HCI – Three 18 Prepared by MSc Luong manh Ba Thiết kế điều khiển từ xa Time: 21:45 Chanel:3 H ì n h 1 1 2 3 7 8 9 0 HUT, Falt of IT > H ì n h 2 1 2 3 4 5 6 > 4 5 6 7 8 9 0 ... Luong manh Ba 9. 1 Khái niệm vai trò đánh giá thiết kế tương tác người máy • Đánh giá giai đoạn qúa trình thiết kế mà nhiệm vụ trung tâm trình thiết kế Nó diễn suốt vòng đời HCI • Đánh giá thu thập... trò đánh giá thiết kế tương tác người máy tiếp) • Tính hiệu giao tiếp ND: - Lượng hoá tiêu chí thiết kế với ND - Tính dễ học - Tính sử dụng lại - Trạng thái ND - Xác định lĩnh vực TK chất lên người. .. Ba 9. 2 Các kiểu đánh giá (tiếp) - Các trang bị cần thiết yêu cầu thiết bị nghe nhìn, thiết bị ghi, 8.2.2 Đánh giá TN - Dùng giai đoạn TK hay cài đặt - Việc đánh giá thực môi trường ND nhằm đánh