1. Trang chủ
  2. » Giáo Dục - Đào Tạo

Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt

144 2 0

Đang tải... (xem toàn văn)

Tài liệu hạn chế xem trước, để xem đầy đủ mời bạn chọn Tải xuống

THÔNG TIN TÀI LIỆU

Thông tin cơ bản

Tiêu đề Nghiên Cứu Mô Hình Nhân Vật Ảo Biểu Cảm Trên Khuôn Mặt Ba Chiều Nói Tiếng Việt
Tác giả Ngô Thị Duyên
Người hướng dẫn PGS.TS. Bùi Thế Duy, GS.TS. Masato Akagi
Trường học Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội
Chuyên ngành Khoa học máy tính
Thể loại luận án tiến sĩ
Năm xuất bản 2015
Thành phố Hà Nội
Định dạng
Số trang 144
Dung lượng 5,3 MB

Nội dung

NGƠ THỊ DUN NGHIÊN CỨU MƠ HÌNH NHÂN VẬT ẢO BIỂU CẢM TRÊN KHN MẶT BA CHIỀU NĨI TIẾNG VI T LUẬN ÁN TIẾ SĨ KHOA H C MÁY TÍNH HÀ N I – 2015 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com NGƠ THỊ DUN NGHIÊN CỨU MƠ HÌNH NHÂN VẬT ẢO BIỂU CẢM TRÊN KHUÔN MẶT BA CHIỀU NĨI TIẾNG VI T Chun ngành: Khoa học máy tính Mã số: 62.48.01.01 LUẬN ÁN TIẾ SĨ KHOA H C MÁY TÍNH ỚNG DẪN KHOA H C PGS.TS Bùi Thế Duy GS.TS Masato Akagi HÀ N I – 2015 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com LỜI CẢM ƠN Luận án thực Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội, hướng dẫn PGS.TS Bùi Thế Duy GS.TS Masato Akagi Tôi xin gửi lời cảm ơn chân thành sâu sắc tới PGS TS Bùi Thế Duy – Bộ Khoa học Công nghệ GS TS Masato Akagi – Viện Khoa học Công nghệ tiên tiến Nhật Bản (JAIST), người thầy tâm huyết tận tình hướng dẫn, động viên khích lệ, dành nhiều thời gian q báu để định hướng cho tơi q trình tham gia khóa học hồn thiện luận án Tơi xin gửi lời cảm ơn chân thành tới lãnh đạo trường Đại học Công nghệ, lãnh đạo Khoa Công nghệ thông tin, cảm ơn đồng nghiệp tạo điều kiện thuận lợi cho tơi q trình làm luận án Tôi xin gửi lời cảm ơn chân thành tới bạn đồng nghiệp phịng thí nghiệm Tương tác Người máy, Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội, người bên động viên, góp ý, chỉnh sửa q trình viết luận án Cuối cùng, xin gửi lời cảm ơn sâu sắc tới gia đình bạn bè, người ln ủng hộ hỗ trợ mặt để tơi n tâm học tập, nghiên cứu, hồn thành luận án i LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com LỜI CAM ĐOAN Tôi xin cam đoan: Bản luận án tốt nghiệp cơng trình nghiên cứu thực cá nhân Các kết viết chung với tác giả khác đồng ý đồng tác giả trước đưa vào luận án Các kết nêu luận án trung thực chưa công bố hình thức trước trình, bảo vệ cơng nhận “Hội Đồng đánh giá luận án tốt nghiệp Tiến sĩ Công nghệ Thông Tin” Một lần nữa, xin khẳng định trung thực lời cam kết Tác giả: ii LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com MỤC LỤC LỜI CẢM ƠN i LỜI CAM ĐOAN ii MỤC LỤC iii DANH MỤC CÁC KÝ HIỆU VÀ CHỮ VIẾT TẮT vi DANH MỤC CÁC BẢNG vii DANH MỤC CÁC HÌNH VẼ viii TĨM TẮT LUẬN ÁN 1 Giới thiệu 1.1 Đặt vấn đề 1.2 Bài toán cách giải 1.3 Cấu trúc luận án Cảm xúc thể cảm xúc cho nhân vật ảo 2.1 Nghiên cứu tâm lý học cảm xúc 10 2.2 Mối quan hệ cảm xúc kênh biểu cảm 14 2.2.1 Cảm xúc cử động khuôn mặt 15 2.2.2 Cảm xúc giọng nói 21 2.3 Cung cấp cảm xúc cho nhân vật ảo 24 2.4 Kết chương 25 iii LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Mơ hình thể cảm xúc khuôn mặt 27 3.1 Giới thiệu 27 3.2 Những nghiên cứu liên quan 29 3.3 Mơ hình tạo biểu cảm khn mặt thể trạng thái cảm xúc liên tục 35 3.3.1 Mơ hình đề xuất thứ 35 3.3.2 Mơ hình đề xuất thứ hai 38 3.4 Thực nghiệm đánh giá 50 3.5 Kết chương 61 Mơ hình thể cảm xúc giọng nói tiếng Việt 63 4.1 Giới thiệu 63 4.2 Những nghiên cứu liên quan 64 4.3 4.4 4.2.1 Các phương pháp tổng hợp tiếng nói có cảm xúc 64 4.2.2 Đặc trưng âm liên quan đến tiếng nói có cảm xúc 66 Trích đặc trưng âm liên quan tới tiếng nói tiếng Việt có cảm xúc 69 4.3.1 Cơ sở liệu 69 4.3.2 Giai đoạn trích đặc trưng âm 71 Tổng hợp tiếng nói tiếng Việt có cảm xúc 76 4.4.1 Xây dựng luật biến đổi tiếng nói tiếng Việt khơng cảm xúc thành tiếng nói có cảm xúc 76 4.4.2 Tiến trình tổng hợp tiếng nói có cảm xúc 78 4.5 Thực nghiệm đánh giá 80 4.6 Kết chương 86 Xây dựng khn mặt ba chiều nói tiếng Việt cho nhân vật ảo 87 5.1 Giới thiệu 87 5.2 Những nghiên cứu liên quan 88 5.3 Kiến trúc hệ thống 92 iv LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com 5.3.1 Mô đun Tạo biểu cảm giọng điệu 94 5.3.2 Mô đun Tạo biểu cảm khuôn mặt 94 5.3.3 Mô đun Tổng hợp 95 5.4 Thực nghiệm đánh giá 97 5.5 Kết chương 101 KẾT LUẬN 103 DANH MỤC CÁC CƠNG TRÌNH KHOA HỌC CỦA TÁC GIẢ LIÊN QUAN ĐẾN LUẬN ÁN 104 TÀI LIỆU THAM KHẢO 106 PHỤ LỤC 121 PHỤ LỤC 127 PHỤ LỤC 129 v LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com DANH MỤC CÁC KÝ HIỆU VÀ CHỮ VIẾT TẮT VIẾT TẮT: EFE (Emotional Facial Expression): Biểu cảm khuôn mặt thể cảm xúc ES (Emotional State): Trạng thái cảm xúc ESV (Emotional State Vector): Véc tơ trạng thái cảm xúc FMCV (Facial Muscle Contraction Level): Véc tơ mức co mặt FACS (Facial Action Coding System): Hệ mã hóa cử động khn mặt AU (Action Unit): Đơn vị cử động 3D (Three Dimensions) Ba chiều THUẬT NGỮ: Nhân vật ảo: Nhân vật hoạt hình ứng dụng giải trí, giáo dục, thương mại Embodied agent: Nhân vật ảo thể hình dáng người động vật Biểu cảm khuôn mặt: Một trạng thái khn mặt thể cảm xúc vi LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com DANH MỤC CÁC BẢNG 3.1 Mô tả sáu cảm xúc 42 3.2 Mô tả đặc trưng khuôn mặt điển hình cho AU 44 3.3 Tóm tắt kết đánh giá tính thuyết phục nhân vật ảo việc tạo biểu cảm khuôn mặt 58 4.1 Kết nhận dạng sở liệu tiếng nói có cảm xúc 70 4.2 Biến đổi trung bình tham số âm bốn trạng thái cảm xúc so với trạng thái không cảm xúc 74 4.3 Biến đổi trung bình tham số âm bốn trạng thái cảm xúc so với trạng thái không cảm xúc mức âm tiết 75 4.4 Tóm tắt kết đánh giá tính thuyết phục nhân vật ảo việc tạo biểu cảm giọng điệu 84 5.1 Hệ mã hóa cử động khn mặt (FACS) 121 vii LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com DANH MỤC CÁC HÌNH VẼ 1.1 Hai vợ chồng nhà “chằn tinh” Shrek 1.2 Mơ hình cung cấp cảm xúc cho nhân vật ảo 2.1 Quan điểm Ekman quan hệ cảm xúc biểu cảm 17 3.1 (a): Hàm thành viên cho cường độ cảm xúc (b): Hàm thành viên cho mức co [18] 34 3.2 Ví dụ minh họa chế mơ hình đề xuất thứ chuyển cường độ cảm xúc thành mức co 36 3.3 Mơ hình thứ chuyển trạng thái cảm xúc liên tục thành biểu cảm khuôn mặt 37 3.4 Hoạt động mô đun Lựa chọn chế độ biểu cảm mơ hình đề xuất thứ 38 3.5 Sơ đồ khối hệ thống phân tích cử động khuôn mặt thể cảm xúc 40 3.6 (a):Phát khuôn mặt (b): Các điểm đặc trưng khuôn mặt 41 3.7 Đánh số thứ tự điểm đặc trưng khuôn mặt 43 3.8 (a): Mẫu theo thời gian biểu cảm khuôn mặt thể cảm xúc vui cảm xúc buồn (b): Mẫu theo thời gian biểu cảm khuôn mặt thể cảm xúc sợ, giận, ngạc nhiên, khinh bỉ 45 3.9 Mẫu thực nghiệm mẫu so khớp theo thời gian AU25 người với cảm xúc ngạc nhiên 47 3.10 Mơ hình thứ hai chuyển trạng thái cảm xúc liên tục thành biểu cảm khuôn mặt 48 3.11 Hoạt động mô đun Lựa chọn chế độ biểu cảm mơ hình đề xuất thứ hai 49 viii LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com [129] K R Scherer Vocal communication of emotion: a review of research paradigms Speech Communication, 40:227–256, 2003 [130] K R Scherer, R Banse, H G Wallbott, and T Goldbeck Vocal cues in emotion encoding and decoding Motivation and Emotion, 15:123–148, 1991 [131] M Schroder Expressive speech synthesis: past, present and possible futures Affective Information Processing, 2:111–126, 2009 [132] P R Shaver, S Wu, and J C Schwartz Cross-cultural similarities and differences in emotion and its representation: A prototype approach Review of Personality & Social Psychology, 13, 1992 [133] S A Shields and R M Stern Emotion: The perception of bodily change In P Pliner, K R Blankstein, and I M Spigel, editors, Perception of emotion in self and others, pages 85–106 Plenum, New York, NY, 1979 [134] K Sjăolander and J Beskow Wavesurfer - an open source speech tool In Proceedings of the 6th International Conference of Spoken Language Processing (ICSLP), 2000 [135] C A Smith Dimensions of appraisal and physiological response in emotion Journal of Personality and Social Psychology, 56:339–353, 1989 [136] J C Speisman, R S Lazarus, A Mordkoff, and L Davison Experimental reduction of stress based on ego-defensive theory Journal of Abnormal and Social Psychology, 68:367–380, 1964 [137] A Stern, A Frank, , and B Resner Virtual petz: A hybrid approach to creating autonomous, lifelike dogz and catz In K P Sycara and M Wooldridge, editors, Proceedings of the 2nd International Conference on Autonomous Agents (Agents’98), pages 334–335, New York, 1998 ACM Press [138] EAR Tanguy Emotions: the Art of Communication Applied to Virtual Actors PhD thesis, Universit of Bath, 2006 118 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com [139] J Tao, Y Kang, and A Li Prosody conversion from neutral speech to emotional speech IEEE Trans on Audio, Speech and Language Processing, 14:1–19, 2007 [140] M Theune, S Faas, D Heylen, and A Nijholt The virtual storyteller: Story creation by intelligent agents In Proceedings TIDSE 03: Technologies for Interactive Digital Storytelling and Entertainment, pages 204–215 Fraunhofer IRB Verlag, 2003 [141] M Theune, K Meijs, D Heylen, and R Ordelman Ieee transactions on audio, speech, and language processing SAffective Information Processing, 14(4):1099–1108, 2006 [142] F Thomas and O Johnston The Illusion of Life Abbeville Press, New York, 1981 [143] Y Tian, T Kanade, and J Cohn Recognizing action units for facial expression analysis IEEE Trans Pattern Analysis and Machine Intelligence., 23(2):97–115, 2001 [144] S S Tomkins Affect, Imagery, Consciousness (Volume 1): The Positive Affects Springer, New York, 1962 [145] S S Tomkins Affect, Imagery, Consciousness (Volume 1): The Negative Affects Springer, New York, 1963 [146] Do Dat Tran, Eric Castelli, Jean-Fran¸cois Serignat, and Viet Bac Le Analysis and modeling of syllable duration for vietnamese speech synthesis O-COCOSDA, 2007 [147] J D Velásquez Modeling emotions and other motivations in synthetic agents In Proceedings of the 14th National Conference on Artificial Intelligence and 9th Innovative Applications of Artificial Intelligence Conference (AAAI-97/IAAI-97), pages 10–15, Menlo Park, 1997 AAAI Press [148] P Viola and M Jones Robust real-time object detection, Tech rep.,Cambridge Research Laboratory Technical report series., (2), 2001 119 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com [149] J Vroomen, R Collier, and S J L Mozziconacci Duration and intonation in emotional speech In Proc EUROSPEECH, pages 577–580, 1993 [150] Q Vu and et al Vos: The corpus-based vietnamese text-to-speech system Journal on Information, Technologies, and Communications, 2010 [151] T.T Vu, C.M Luong, and S Nakamura An hmm-based vietnamese speech synthesis system In Proceedings of the 12th International Oriental COCOSDA Conference., pages 116–121, 2009 [152] F Wallhoff The facial expressions and emotions database homepage (feedtum) www.mmk.ei.tum.de/ waf/fgnet/feedtum.html, 2005 [153] M Wooldridge Intelligent agents In G Weiss, editor, Multiagent Systems A Modern Approach to Distributed Artificial Intelligence Cambridge, Mass, MIT Press, 1999 [154] J Yamagishi, T Kobayashi, M Tachibana, K Ogata, and Y Nakano Model adaptation approach to speech synthesis with diverse voices and styles In Proc ICASSP, pages 1233–1236, 2007 [155] J Yamagishi, K Onishi, T Masuko, and T Kobayashi Modeling of various speaking styles and emotions for hmm-based speech synthesis In Proc EUROSPEECH, pages 2461–2464, 2003 [156] S Zhang, Z Wu, H.M Meng, and L Cai Facial expression synthesis based on emotion dimensions for affective talking avatar In Modeling Machine Emotions for Realizing Intelligence, SIST, pages 109–132 Springer-Verlag Berlin Heidelberg., 2010 120 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com PHỤ LỤC Hệ mã hóa cử động khn mặt Hệ thống mã hóa cử động khn mặt (Facial Action Coding System - FACS) đề xuất Paul Ekman Wallace Friesen [37] Hệ thống mô tả tất cử động quan sát khuôn mặt FACS danh sách gồm 64 đơn vị cử động (tên tiếng Anh Action Unit, viết tắt AU), AU mô tả kết hợp khuôn mặt Bảng 5.1 mô tả danh sách AU FACS Bảng 5.1: Hệ mã hóa cử động khuôn mặt (FACS) AU Mô tả chuyển động Các chuyển động Hình ảnh minh họa Frontalis, pars Nhướn mày Nhướn mày Frontalis, pars lateralis Hạ lông mày Corrugator supercilii, Depressor supercilii Nhướn mi Nâng má Căng mí mắt medialis Levator palpebrae superioris Orbicularis oculi, pars orbitalis Orbicularis oculi, pars palpebralis 121 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Bảng 5.1 Tiếp tục từ trang trước AU Mô tả chuyển động Các chuyển động Hình ảnh minh họa Levator labii Nhăn mũi superioris alaquae nasi Levator labii 10 Nâng mơi 11 Làm sâu mũi 12 Kéo khóe môi Zygomaticus major 13 Phồng má Zygomaticus minor 14 Má lúm đồng tiền Buccinator 15 Nén khóe mơi 16 Bặm môi superioris Levator anguli oris (a.k.a Caninus) Depressor anguli oris (a.k.a Triangularis) Depressor labii inferioris 122 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Bảng 5.1 Tiếp tục từ trang trước AU Mô tả chuyển động 17 Nâng cằm Các chuyển động Hình ảnh minh họa Mentalis Incisivii labii 18 Nhàu môi superioris and Incisivii labii inferioris 20 Kéo căng mơi Risorius w/ platysma 22 Mơi hình phễu Orbicularis oris 23 Bặm chặt môi Orbicularis oris 24 Ép môi Orbicularis oris 25 Tách môi Depressor labii inferioris or relaxation of Mentalis, or Orbicularis oris 26 Hạ hàm Masseter, relaxed Temporalis and internal Pterygoid 123 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Bảng 5.1 Tiếp tục từ trang trước AU Mô tả chuyển động Các chuyển động 27 Căng miệng Pterygoids, Digastric 28 Mút mơi Orbicularis oris 41 Rủ mí mắt 42 Ti hí mắt 43 Nhắm mắt Hình ảnh minh họa Relaxation of Levator palpebrae superioris Orbicularis oculi Relaxation of Levator palpebrae superioris; Orbicularis oculi, pars palpebralis 44 45 Liếc mắt Chớp mắt Orbicularis oculi, pars palpebralis Relaxation of Levator palpebrae superioris; Orbicularis oculi, pars palpebralis Relaxation of Levator 46 Nháy mắt palpebrae superioris; Orbicularis oculi, pars palpebralis 124 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Bảng 5.1 Tiếp tục từ trang trước AU Mô tả chuyển động 51 Quay đầu sang trái 52 Quay đầu sang phải 53 Ngửa đầu lên 54 Cúi đầu xuống 55 Đầu ngả sang trái 56 Đầu ngả sang phải 57 Các chuyển động Hình ảnh minh họa Ngả đầu phía trước 125 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Bảng 5.1 Tiếp tục từ trang trước AU Mô tả chuyển động 58 Ngả đầu phía sau 61 Liếc mắt sang trái 62 Liếc mắt sang phải 63 Ngước mắt lên 64 Mắt nhìn xuống Các chuyển động Hình ảnh minh họa 126 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com PHỤ LỤC Cơ sở liệu tiếng Việt có cảm xúc Cơ sở liệu sử dụng Chương bao gồm phát âm 19 câu sau: Có thư Làm có chuyện mà tơi tức điên lên Nghe đâu điểm hẹn Huế phải Tơi mua ô tô Bỏ thư không dùng Mê tín, cổ hủ đến Tôi nhận cổ vũ người Chắc thư đến nơi Tôi theo dõi liên tục 10 Đến chỗ 11 Xin chân thành cảm ơn 12 Xin thành thật xin lỗi 13 Tơi khơng nói cảm ơn đâu 14 Tơi cảm thấy chóng mặt 15 Tơi sai 16 Có cần chỗ ngồi để xem pháo hoa khơng? 17 Tơi chẳng nói cịn gì, khơng làm 127 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com 18 Hãy nói cho tơi biết lý đến khơng 19 Sẽ tập trung lại chỗ nghỉ chân 128 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com PHỤ LỤC Kiểm định giả thuyết thống kê Bài toán kiểm định giả thuyết thống kê toán lớn quan trọng thống kê toán học Trong phụ lục này, đề cập đến số định nghĩa vấn đề liên quan đến toán kiểm định giả thuyết thống kê Một số định nghĩa Giả thuyết Một mệnh đề (một câu khẳng định) vấn đề chưa biết gọi giả thuyết Ta thường dùng H0 để giả thuyết Giả thuyết mệnh đề khơng Đối thuyết Một mệnh đề trái với giả thuyết gọi đối thuyết Ta thường dùng H1 để đối thuyết Kiểm định giả thuyết thống kê Một phép kiểm định (hay trắc nghiệm) giả thuyết thống kê qui tắc, theo đó, dựa vào mẫu cụ thể thực hiện, định chấp nhận hay bác bỏ giả thuyết xét Kiểm định giả thuyết thống kê phép chứng minh tính khơng giả thuyết Kiểm định giả thuyết thống kê thực chất xây dựng qui tắc hành động dựa vào mẫu có đưa định lựa chọn giả thuyết H0 đối thuyết H1 129 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Sai lầm Nếu bác bỏ giả thuyết H0 khi, thực ra, phải chấp nhận mắc phải sai lầm gọi Sai lầm loại I Nếu chấp nhận H0 khi, thực ra, phải bị bác bỏ mắc phải sai lầm gọi Sai lầm loại II Xác suất mắc phải sai lầm loại I, thường ký hiệu α, gọi Mức ý nghĩa kiểm định Như vậy, xác suất để chấp nhận H0 (1 − α) Nếu ký hiệu β xác suất mắc phải sai lầm loại II, xác suất để bác bỏ H0 sai (1 − β), gọi Năng lực phép kiểm định Như vậy, báo cáo kết so sánh "sự khác biệt có ý nghĩa mặt thống kê mức ý nghĩa 5%" có nghĩa "giả thuyết khơng" H0 bị bác bỏ với nguy sai lầm 5% Các bước phép kiểm định giả thuyết thống kê Đặt giả thuyết không H0 đối thuyết H1 Xác định mức ý nghĩa α phép kiểm định Với cặp giả thuyết mức ý nghĩa α xác định, thiết lập Qui luật định dùng để định chấp nhận hay bác bỏ giả thuyết H0 Qui luật bao gồm việc chọn thống kê thích hợp để dùng cho phép kiểm định đưa giá trị tới hạn để so sánh Khác với phép kiểm định giả thuyết với mức ý nghĩa α cho trước, nhà nghiên cứu thường xác định mức ý nghĩa nhỏ nhất, "giả thuyết khơng" H0 bị bác bỏ Từ đó, người ta có định nghĩa: Trong phép kiểm định, mức ý nghĩa nhỏ nhất, "giả thuyết khơng" H0 bị bác bỏ gọi giá trị xác suất hay p - giá trị (p - value) phép kiểm định 130 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com Phương pháp so sánh cặp đôi Trong phụ lục này, để cập tới phép kiểm định sử dụng luận án Phương pháp so sánh cặp đơi Phần trình bày cách thực phép kiểm định giả thuyết cho khác trung bình cặp đơi (paired means) Thủ tục kiểm định sử dụng có tên matched-pairs t-test, gồm bước sau: Xác định giả thuyết Các giả thuyết liên quan tới biến d, biến dựa khác giá trị cặp đôi từ hai tập liệu d = x1 − x2 với x1 giá trị biến x tập liệu thứ nhất, x2 giá trị biến x tập liệu thứ hai có quan hệ cặp đơi với x1 Bảng ba tập giả thuyết không đối thuyết; tập tạo nên phát biểu mối quan hệ khác thực giá trị tổng thể µd giá trị giả thuyết D Xây dựng kế hoạch phân tích Bước mô tả cách sử dụng liệu mẫu để chấp nhận từ chối giả thuyết không Trong bước cần xác định thành phần sau: • Mức ý nghĩa (Thông thường, nhà nghiên cứu chọn mức ý nghĩa 0.01, 0.05, khơng 0.10.) • Phương pháp kiểm định (Sử dụng matched-pairs t-test để xác định xem khác trung bình mẫu cho liệu cặp đơi có thực khác khác giả thuyết trung bình tổng thể.) Phân tích liệu mẫu Sử dụng liệu mẫu để tìm độ lệch chuẩn, lỗi chuẩn, độ tự (degrees of freedom), kiểm định thống kê, giá trị P gắn với kiểm định thống kê 131 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com • Độ lệch chuẩn: Tính độ lệch chuẩn (sd ) khác tính từ n cặp đơi sd = sqrt[(Σ(di − d)2 /(n − 1)] di khác cho cặp i, d khác trung bình mẫu, n số cặp đơi • Lỗi chuẩn: Tính lỗi chuẩn (SE) phấn phối lấy mẫu d SE = sd ∗ sqrt(1/n) ∗ (1 − n/N ) ∗ [N/(N − 1)] sd độ lệch chuẩn khác mẫu, N kích thước tổng thể, n kích thước mẫu Khi kích thước tổng thể lớn nhiều (lớn 10 lần) so với kích thước mẫu lỗi chuẩn tính xấp xỉ sau: SE = sd /sqrt(n) • Độ tự DF = n − • Kiểm định thống kê: Kiểm định thống kê điểm t (t-score) định nghĩa bởi: t = [(x1 − x2 ) − D]/SE = (d − D)/SE x1 trung bình mẫu 1, x2 trung bình mẫu 2, d khác trung bình giá trị cặp đôi tập mẫu, D khác giả thuyết trung bình tổng thể, SE lỗi chuẩn • Giá trị P : Từ điểm t tính Độ tự DF có xác suất P tương ứng Giải thích kết So sánh giá trị P với mức ý nghĩa từ chối giả thuyết không giá trị P nhỏ mức ý nghĩa 132 LUAN VAN CHAT LUONG download : add luanvanchat@agmail.com ... tiếng nói tiếng Việt trạng thái khơng cảm xúc thành tiếng nói có cảm xúc, cung cấp cho nhân vật ảo nói tiếng Việt khả thể cảm xúc kênh tiếng nói Thứ ba, luận án xây dựng khn mặt ba chiều nói tiếng. .. đổi tiếng nói tiếng Việt khơng cảm xúc thành tiếng nói có cảm xúc sử dụng tạo biểu cảm giọng nói cho nhân vật ảo nói tiếng Việt • Thứ ba, luận án xây dựng khn mặt ba chiều có khả thể cảm xúc khuôn. .. thể cảm xúc kênh tiếng nói cho nhân vật ảo, luận án đề xuất mơ hình biến đổi tiếng nói tiếng Việt trạng thái khơng cảm xúc thành tiếng nói có cảm xúc Từ việc phân tích sở liệu tiếng nói tiếng Việt

Ngày đăng: 05/12/2022, 08:48

HÌNH ẢNH LIÊN QUAN

tạo ra các nhân vật hoạt hình đã và đang nhận được sự quan tâm lớn. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
t ạo ra các nhân vật hoạt hình đã và đang nhận được sự quan tâm lớn (Trang 14)
Hình 2.1: Quan điểm của Ekman về quan hệ giữa cảm xúc và biểu cảm (minh họa bởi Fridlund [49]). - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 2.1 Quan điểm của Ekman về quan hệ giữa cảm xúc và biểu cảm (minh họa bởi Fridlund [49]) (Trang 29)
Hình 3.1: (a): Hàm thành viên cho cường độ cảm xúc. (b): Hàm thành viên cho mức co cơ [18]. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.1 (a): Hàm thành viên cho cường độ cảm xúc. (b): Hàm thành viên cho mức co cơ [18] (Trang 46)
Hình 3.4: Hoạt động của mơ đun Lựa chọn chế độ biểu cảm trong mơ hình đề xuất thứ nhất. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.4 Hoạt động của mơ đun Lựa chọn chế độ biểu cảm trong mơ hình đề xuất thứ nhất (Trang 50)
Hình 3.5: Sơ đồ khối của hệ thống phân tích cử động khn mặt thể hiện cảm xúc. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.5 Sơ đồ khối của hệ thống phân tích cử động khn mặt thể hiện cảm xúc (Trang 52)
Bảng 3.1: Mô tả sáu cảm xúc cơ bả n( [37, 30]). - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 3.1 Mô tả sáu cảm xúc cơ bả n( [37, 30]) (Trang 54)
Hình 3.7: Đánh số thứ tự các điểm đặc trưng trên khuôn mặt. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.7 Đánh số thứ tự các điểm đặc trưng trên khuôn mặt (Trang 55)
Hình 3.8: (a): Mẫu theo thời gian của biểu cảm khuôn mặt thể hiện cảm xúc vui và cảm xúc buồn. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.8 (a): Mẫu theo thời gian của biểu cảm khuôn mặt thể hiện cảm xúc vui và cảm xúc buồn (Trang 57)
Hình 3.11: Hoạt động của mơ đun Lựa chọn chế độ biểu cảm trong mơ hình đề xuất thứ hai. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.11 Hoạt động của mơ đun Lựa chọn chế độ biểu cảm trong mơ hình đề xuất thứ hai (Trang 61)
Hình 3.14: Biểu cảm khn mặt thể hiện cảm xúc vui trên khuôn mặt ba chiều sau khi áp dụng mơ hình đề xuất thứ nhất (lật lượt theo frame). - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.14 Biểu cảm khn mặt thể hiện cảm xúc vui trên khuôn mặt ba chiều sau khi áp dụng mơ hình đề xuất thứ nhất (lật lượt theo frame) (Trang 65)
Hình 3.16: Biểu cảm khn mặt thể hiện cảm xúc vui trên khuôn mặt ba chiều (lật lượt theo frame) sau khi áp dụng mơ hình đề xuất thứ hai. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.16 Biểu cảm khn mặt thể hiện cảm xúc vui trên khuôn mặt ba chiều (lật lượt theo frame) sau khi áp dụng mơ hình đề xuất thứ hai (Trang 67)
Hình 3.17: Hình ảnh minh họa video clip dùng để đánh giá các mơ hình tạo biểu cảm khuôn mặt. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.17 Hình ảnh minh họa video clip dùng để đánh giá các mơ hình tạo biểu cảm khuôn mặt (Trang 68)
Bảng 3.3: Tóm tắt kết quả đánh giá tính thuyết phục của các nhân vật ảo trong việc tạo biểu cảm khuôn mặt. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 3.3 Tóm tắt kết quả đánh giá tính thuyết phục của các nhân vật ảo trong việc tạo biểu cảm khuôn mặt (Trang 70)
Hình 3.20: Kết quả đánh giá tính thuyết phục trong việc tạo biểu cảm khuôn mặt của nhân vật ảo B. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 3.20 Kết quả đánh giá tính thuyết phục trong việc tạo biểu cảm khuôn mặt của nhân vật ảo B (Trang 71)
Bảng 4.1: Kết quả nhận dạng cơ sở dữ liệu tiếng nói có cảm xúc. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 4.1 Kết quả nhận dạng cơ sở dữ liệu tiếng nói có cảm xúc (Trang 82)
Bảng 4.2: Biến đổi trung bình của các tham số âm của bốn trạng thái cảm xúc so với trạng thái không cảm xúc. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 4.2 Biến đổi trung bình của các tham số âm của bốn trạng thái cảm xúc so với trạng thái không cảm xúc (Trang 86)
Hình 4.3: Tiến trình biến đổi đặc trưng âm. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 4.3 Tiến trình biến đổi đặc trưng âm (Trang 91)
Hình 4.4: Kết quả nhận dạng tiếng nói tổng hợp có cảm xúc. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 4.4 Kết quả nhận dạng tiếng nói tổng hợp có cảm xúc (Trang 93)
Hình 4.5: Hình ảnh minh họa video clip dùng để đánh giá mô hình tạo biểu cảm giọng điệu. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 4.5 Hình ảnh minh họa video clip dùng để đánh giá mô hình tạo biểu cảm giọng điệu (Trang 94)
Hình 4.6: Mẫu ghi kết quả đánh giá tính thuyết phục trong việc thể hiện cảm xúc trong giọng nói của các nhân vật ảo . - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 4.6 Mẫu ghi kết quả đánh giá tính thuyết phục trong việc thể hiện cảm xúc trong giọng nói của các nhân vật ảo (Trang 95)
Bảng 4.4: Tóm tắt kết quả đánh giá tính thuyết phục của các nhân vật ảo trong việc tạo biểu cảm giọng điệu. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 4.4 Tóm tắt kết quả đánh giá tính thuyết phục của các nhân vật ảo trong việc tạo biểu cảm giọng điệu (Trang 96)
Hình 5.2: Ưu thế của hai phân đoạn tiếng nói theo thời gian (hình trên) và hàm tham số điều khiển sau khi áp dụng hiệu ứng đồng phát âm đề xuất bởi Cohen và Massaro [23] (hình dưới) - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 5.2 Ưu thế của hai phân đoạn tiếng nói theo thời gian (hình trên) và hàm tham số điều khiển sau khi áp dụng hiệu ứng đồng phát âm đề xuất bởi Cohen và Massaro [23] (hình dưới) (Trang 102)
Hình 5.8: Giao diện chương trình ghi lại kết quả cảm nhận của người dùng. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 5.8 Giao diện chương trình ghi lại kết quả cảm nhận của người dùng (Trang 111)
Hình 5.11: Kết quả cảm nhận của người dùng về cảm xúc do nhân vật ả oB thể hiện. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 5.11 Kết quả cảm nhận của người dùng về cảm xúc do nhân vật ả oB thể hiện (Trang 113)
Hình 5.10: Kết quả cảm nhận của người dùng về cảm xúc do nhân vật ả oA thể hiện. - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Hình 5.10 Kết quả cảm nhận của người dùng về cảm xúc do nhân vật ả oA thể hiện (Trang 113)
Bảng 5.1: Hệ mã hóa các cử động khuôn mặt (FACS). - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 5.1 Hệ mã hóa các cử động khuôn mặt (FACS) (Trang 133)
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển (Trang 134)
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển (Trang 135)
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển (Trang 136)
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển - Luận án tiến sĩ nghiên cứu mô hình nhân vật ảo biểu cảm trên khuôn mặt ba chiều nói tiếng việt
Bảng 5.1 Tiếp tục từ trang trước AUMô tả chuyển động Các cơ chuyển (Trang 138)

TÀI LIỆU CÙNG NGƯỜI DÙNG

TÀI LIỆU LIÊN QUAN