BÀI GIẢNG XỬ LÝ TIẾNG NÓI

BÀI GIẢNG XỬ LÝ TIẾNG NÓI

1 TR NGăĐ IăH CăHÀNGăH IăVI TăNAM KHOAăCỌNGăNGH ăTHỌNGăTIN B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - BÀIăGI NG X ăLụăTI NGăNịI TÊN H C PH N Mà H C PH N TRÌNH Đ ĐÀO T O DÙNG CHO SV NGÀNH : X ăLụăTI NGăNịI : 17412 : Đ IăH CăCHệNHăQUY : CỌNGăNGH ăTHỌNGăTIN H IăPHọNGă- 2011 M CăL C CH NGăI:ăCÁCăKI NăTH CăC ăB N 1.1 T ng quan xử lý ti ng nói 1.1.1 Nhận d ng ti ng nói tự đ ng 1.1.2 Chuyển đ i văn b n thƠnh ti ng nói 1.1.3 Hệ thống hiểu ngôn ngữ nói 1.2 C u trúc ngơn ngữ nói 1.2.1 Hệ thống ti ng nói ng i 1.2.2 Ngữ ơm h c vƠ ơm v h c 10 1.2.3 Âm ti t vƠ từ ngữ 11 CH NGăII:ăX ăLụăTệNăHI UăS ăTRONGăX ăLụăTI NGăNịI 13 2.1 Xử lý tín hiệu số 13 2.1.1 Phép bi n đ i Fourier 14 2.1.2 Phép bi n đ i Fourier r i r c 14 2.1.3 Các b l c số vƠ cửa s 15 2.2 Biểu diễn tín hiệu ti ng nói 15 2.2.1 Phơn tích Fourier th i gian ngắn 15 2.2.2 Mơ hình ơm h c c a việc t o ti ng nói 15 2.3 Mƣ hóa ti ng nói 19 2.3.1 Các tính ch t c a b mƣ hóa ti ng nói 19 2.3.2 Các b mƣ hóa d ng sóng ti ng nói vơ h ớng 20 CH NGăIII:ăNHỂNăD NGăTI NGăNịI 22 3.1 Các hệ thống nhận d ng ti ng nói 22 3.1.1 Nhận d ng từ riêng lẻ 22 3.1.2 Nhận d ng từ liên tục 24 3.2 Các mơ hình Markov ẩn 27 3.2.1 Chu i Markov 27 3.2.2 Mô hình Markov 28 CH NGăIV:ăCÁCăH ăTH NGăCHUY NăVĔNăB NăTHÀNHăGI NGăNịI 30 4.1 Phơn tích ngữ ơm vƠ văn b n 30 4.1.1 Từ vựng 30 4.1.2 Xác đ nh c u trúc tƠi liệu 30 4.1.3 Chuẩn hóa văn b n 31 4.1.4 Phân tích ngơn ngữ 32 4.1.5 Chuyển đ i ký tự sang ơm 32 4.2 T ng hợp ti ng nói 33 4.2.1 Các tính ch t c a t ng hợp ti ng nói 33 4.2.2 T ng hợp ti ng nói Formant 34 4.2.3 T ng hợp ti ng nói ghép nối 34 4.2.4 Đánh giá hệ thống t ng hợp ti ng nói 36 Tênăh căph n: Xử lý ti ng nói B ămônăph ătráchăgi ngăd y: Hệ thống Thông tin Mƣăh căph n: 17412 T ng số ti t 75 Lý thuy t 45 Thực hƠnh/Xemina 30 Lo iăh căph n: Khoaăph ătrách: CNTT Tổngăs ăTC: Tự h c BƠi tập lớn không Đ án môn h c không Đi uăki nătiênăquy t: Không yêu c u M cătiêuăc aăh căph n: Cung c p ki n th c c b n lĩnh vực xử lý ti ng nói, hiểu hệ thống chuyển văn b n thƠnh ti ng nói, hệ thống nhận d ng ti ng nói N iădungăch ăy u: Các v n đề liên quan đ n ti ng nói vƠ ngữ ơm h c; Các hệ thống chuyển văn b n thƠnh ti ng nói; C s xử lý tín hiệu số xử lý ti ng nói; Nhận d ng ti ng nói N iădungăchiăti t: PHỂNăPH IăS ăTI T TểNăCH NGăM C TS LT TH BT KT CH NGăI:ăCÁCăKI NăTH CăC ăB N 15 1.1ăTổngăquanăv ăx ălýăti ngănói 1.1.1 Nhận d ng ti ng nói tự đ ng 1.1.2 Chuyển đ i văn b n thƠnh ti ng nói 1.1.3 Hệ thống hiểu ngơn ngữ nói 1.2ăC uătrúcăngơnăngữănói 1.2.1 Hệ thống ti ng nói ng i 1.2.2 Ngữ ơm h c vƠ ơm v h c 1.2.3 Âm ti t vƠ từ ngữ CH NGă II:ă X ă LụăTệNă HI UăS ă TRONGă X ă Lụă 15 TI NGăNịI 2.1ăX ălýătínăhi uăs 2.1.1 Phép bi n đ i Fourier 2.1.2 Phép bi n đ i Fourier r i r c 2.1.3 Các b l c số vƠ cửa s 2.2 Bi uădi nătínăhi uăti ngănói 2.2.1 Mơ hình ơm h c c a việc t o ti ng nói 2.3ăMƣăhóaăti ngănói 2.3.1 Các tính ch t c a b mƣ hóa ti ng nói 2.3.2 Các b mƣ hóa d ng sóng ti ng nói vơ h ớng CH NGăIII:ăNHỂNăD NGăTI NGăNịI 21 12 3.1ăCácăh ăth ngănh năd ngăti ngănói 3.1.1 Nhận d ng từ riêng lẻ 3.1.2 Nhận d ng từ liên tục 3.2ăCácămơăhìnhăMarkovă n 3.2.1 Chu i Markov 3.2.2 Mơ hình Markov CH NGăIV:ăCÁCăH ăTH NGăCHUY NăVĔNăB Nă 24 15 THÀNHăGI NGăNịI 4.1ăPhơnătíchăngữăơmăvƠăvĕnăb n 4.1.1 Từ vựng 4.1.2 Xác đ nh c u trúc tƠi liệu 4.1.3 Chuẩn hóa văn b n 4.1.4 Phơn tích ngơn ngữ 4.1.5 Chuyển đ i ký tự sang ơm 4.2ăTổngăh păti ngănói 4.2.1 Các tính ch t c a t ng hợp ti ng nói 4.2.2 T ng hợp ti ng nói Formant 4.2.3 T ng hợp ti ng nói ghép nối 4.2.4 Đánh giá hệ thống t ng hợp ti ng nói Nhi măv ăc aăsinhăviên: Tham dự bu i h c lý thuy t vƠ thực hƠnh, lƠm bƠi tập đ ợc giao, lƠm bƠi thi h c ph n vƠ bƠi thi k t thúc h c ph n theo quy đ nh TƠiăli uăh căt p: Xuedong Huang, Alex Acero, Hsiao Wuen Hon, Spoken Language Processing- A Guide to Theory, Algorithm and System Development, Prentice Hall, 2001 Lawrence R.Rabiner, Ronald W.Schafer, Digital Processing of Speech Signals, PrenticeHall, Inc Englewood Cliffs, NewJersey, 1978 Hìnhăth căvƠătiêuăchu năđánhăgiáăsinhăviên: - Hình th c thi: thi vi t - Tiêu chuẩn đánh giá sinh viên: c vƠo tham gia h c tập c a sinh viên bu i h c lý thuy t vƠ thực hƠnh, k t qu lƠm bƠi tập đ ợc giao, k t qu c a bƠi thi h c ph n vƠ bƠi thi k t thúc h c ph n Thangăđi m:ăThang điểm chữ A, B, C, D, F Đi măđánhăgiáăh căph n:ăăZ = 0,3X + 0,7Y BƠi gi ng nƠy lƠ tƠi liệu chínhăth căvƠăth ngănh t c a B môn Hệ thống Thông tin, Khoa Công nghệ Thông tin vƠ đ ợc dùng để gi ng d y cho sinh viên NgƠyăphêăduy t:ăăăăăăăă/ăăăăăăăăăă/ Tr ởngăB ămôn CH NG I : CÁC KI N TH C C B N 1.1ăTổngăquanăv ăx ălýăti ngănói Kể từ xu t hiện, máy tính ngày ch ng tỏ m t cơng cụ vơ hữu ích trợ giúp ng i xử lý thông tin Cùng với phát triển c a xã h i, khối l ợng thơng tin mà máy tính c n xử lý tăng r t nhanh th i gian dành cho công việc nƠy l i gi m Vì vậy, việc tăng tốc đ xử lý thơng tin, có tốc đ trao đ i thơng tin ng i máy tính, tr thành m t yêu c u c p thi t Hiện t i, giao ti p ng thi t b nh bàn phím, chu t, hình, với tốc đ t ng pháp trao đ i thông tin giúp ng ph i-máy đ ợc thực ng đối chậm nên c n có i lƠm việc hiệu qu h n với máy tính M t h ớng nghiên c u sử dụng ti ng nói trao đ i thơng tin ng i-máy Những nghiên c u liên quan trực ti p tới k t qu c a chuyên ngành xử lý ti ng nói, có t ng hợp ti ng nói 1.1.1 Nh năd ngăti ngănóiătựăđ ng Nhận d ng ti ng nói lƠ m t q trình nhận d ng mẫu, với mục đích lƠ phơn lớp (classify) thông tin đ u vƠo lƠ tín hiệu ti ng nói thƠnh m t dƣy tu n tự mẫu đƣ đ ợc h c tr ớc vƠ l u trữ b nhớ Các mẫu lƠ đ n v nhận d ng, chúng lƠ từ, ơm v N u mẫu nƠy lƠ b t bi n vƠ khơng thay đ i cơng việc nhận d ng ti ng nói tr nên đ n gi n cách so sánh liệu ti ng nói c n nhận d ng với mẫu đƣ đ ợc h c vƠ l u trữ b nhớ Khó khăn c b n c a nhận d ng ti ng nói lƠ ti ng nói ln bi n thiên theo th i gian vƠ có khác biệt lớn ti ng nói c a ng i nói khác nhau, tốc đ nói, ngữ c nh vƠ môi tr ng ơm h c khác Xác đ nh thông tin bi n thiên nƠo c a ti ng nói lƠ có ích vƠ thơng tin nƠo lƠ khơng có ích nhận d ng ti ng nói lƠ r t quan tr ng Đơy lƠ m t nhiệm vụ r t khó khăn mƠ c với kỹ thuật xác su t thống kê m nh khó khăn việc t ng qt hố từ mẫu ti ng nói bi n thiên quan tr ng c n thi t nhận d ng ti ng nói Các nghiên c u nhận d ng ti ng nói dựa ba nguyên tắc c b n: - Tín hiệu ti ng nói đ ợc biểu diễn xác b i giá tr ph m t khung th i gian ngắn (short-term amplitude spectrum) Nh ta trích đặc điểm ti ng nói từ kho ng th i gian ngắn vƠ dùng đặc điểm nƠy lƠm liệu để nhận d ng ti ng nói - N i dung c a ti ng nói đ ợc biểu diễn d ới d ng chữ vi t, lƠ m t dƣy ký hiệu ngữ ơm Do ý nghĩa c a m t phát ơm đ ợc b o toƠn phiên ơm phát ơm thƠnh dƣy ký hiệu ngữ ơm - Nhận d ng ti ng nói lƠ m t q trình nhận th c Thơng tin ngữ nghĩa (semantics) vƠ suy đốn (pragmatics) có giá tr q trình nhận d ng ti ng nói, nh t lƠ thông tin ơm h c không rõ ràng 1.1.2 Chuy năđổiăvĕnăb năthƠnhăti ngănói Các hệ thống chuyển đ i văn b n thƠnh gi ng nói đ ợc xem nh lƠ hệ thống mƣ hóa ti ng nói cho phép lựa ch n kiểu cách nói, tốc đ , c ng đ vƠ hiệu ng Hệ thống chuyển văn b n thƠnh ti ng nói (Text-to-Speech) lƠ m t hệ thống sinh ti ng nói g n giống với ng i từ văn b n đ ợc đ a vƠo (còn đ ợc g i lƠ hệ thống t ng hợp ti ng nói) Sự chuyển đ i từ d ới d ng vi t sang ti ng nói lƠ m t cơng việc khó khăn hệ thống TTS c n liệu từ vựng r t lớn vƠ nhiều ngữ điệu c a âm CácăthƠnhăph năc ăb năc aăm tăh ăth ngăchuy năđổiăvĕnăb năthƠnhăti ngănói - B phơn tích văn b n: chuẩn hóa văn b n sang d ng thích hợp cho hệ thống TTS - B phơn tích ngữ ơm chuyển đ i văn b n đƣ đ ợc xử lý thƠnh dƣy ơm t ng ng sau đ ợc phơn tích ngữ điệu để xác đ nh tr ng ơm, ngắt nh p, th i gian, - Cuối cùng, b t ng hợp ti ng nói nhận tham số đ u vƠo từ dƣy ơm v đƣ xử lý đ y đ - ThƠnh ph n phơn tích văn b n: + Xác đ nh c u trúc tƠi liệu, chuyển đ i ký hiệu, phơn tích c u trúc ngôn ngữ + Chuyển đ i ký hiệu sang d ng chuẩn + Chuyển đ i số sang d ng chữ t ng ng + Phơn tích kho ng trống, d u ch m cơu để xác đ nh c u trúc ngôn ngữ - ThƠnh ph n phơn tích ngữ ơm: + Chuyển đ i từ đƣ chuẩn hóa sang ơm v t ng ng (với thông tin nh tr ng ơm, th i gian phát ơm) 1.1.3ăH ăth ngăhi uăngơnăngữănói T ng hợp ti ng nói lĩnh vực đ ợc nghiên c u r ng rãi th giới cho k t qu tốt Có ba ph ng pháp c b n dùng để t ng hợp ti ng nói mơ b máy phát âm, t ng hợp formant t ng hợp cách ghép nối Ph ng pháp mô b máy phát âm cho ch t l ợng tốt nh ng địi hỏi nhiều tính tốn việc mơ xác b máy phát âm r t ph c t p Ph ng pháp t ng hợp formant khơng địi hỏi chi phí cao tính tốn nh ng cho k t qu ch a tốt Ph ng pháp t ng hợp ghép nối cho ch t l ợng tốt, chí phí tính tốn khơng cao nh ng số l ợng từ vựng ph i r t lớn n ớc phát triển, nghiên c u xử lý ti ng nói, cho k t qu kh quan, làm tiền đề cho việc giao ti p ng i-máy ti ng nói Việt Nam, nghiên c u lĩnh vực đ ợc phát triển năm g n nh ng có m t số k t qu kh quan 1.2ăC uătrúcăngơnăngữănói 1.2.1ăH ăth ngăti ngănóiăconăng i a) B máy phát ơm B máy phát âm bao g m thành ph n riêng r nh ph i, khí qu n, qu n, vƠ đ     ng dẫn miệng, mũi Trong đó: Thanh qu n ch a hai dây dao đ ng t o c ng h ng c n thi t để t o âm Tuy n âm ống không bắt đ u từ môi, k t thúc b i dây thanh qu n Khoang mũi ống không bắt đ u từ môi, k t thúc b i vịm miệng, có đ dài cố đ nh kho ng 12cm ng i lớn Vòm miệng lƠ n p c chuyển đ ng Hốc mũi Vòm miệng Vòm miệng mềm Đ u l ỡi Thân l ỡi L ỡi gà C miệng Y t h u 10 Nắp đóng c a qu n 11 Dây gi 12 Dây 13 Thanh qu n 14 Thực qu n b)ăC ăch ăphátăơm Trong trình t o ơm khơng ph i lƠ ơm mũi, vịm miệng m , khoang mũi đóng l i, dịng khí s qua khoang mũi Khi phát ơm mũi, vịm miệng h th p vƠ dịng khí s qua khoang mũi Tuy n ơm s đ ợc kích thích b i ngu n l ợng t i mơn Ti ng nói đ ợc t o 10 tín hiệu ngu n từ mơn phát ra, đẩy khơng khí có ph i lên t o thƠnh dịng khí, va ch m vƠo hai dơy n ơm Hai dơy dao đ ng s t o c ng h ng, dao đ ng ơm s đ ợc lan truyền theo n ơm (tính từ n ơm đ n khoang miệng) vƠ sau qua khoang mũi vƠ mơi, s t o ti ng nói 1.2.2ăNgữăơmăh căvƠăơmăv ăh c NgƠnh nghiên c u ơm cho m t ngôn ngữ đ ợc g i lƠ ơm v h c Ngữ ơm h c lƠ m t ngƠnh khoa h c nghiên c u đặc điểm ơm c a ti ng nói ng ph quát ơm Ví dụ: Nh vƠo b máy c u ơm, ng i Ngữ ơm h c nghiên c u i phát chu i ơm khác Ngữ ơm h c chia lo i ơm nƠy thƠnh ph m trù ngữ ơm khác nhau: nguyên ơm, phụ ơm, tắc, xátầ Cịn ơm v h c khơng nghiên c u r ng nh Âm v h c nghiên c u xem m t ngơn ngữ có đ n v ơm lƠ có ch c khu biệt nghĩa Hoặc, ngôn ngữ, nét ngữ ơm nƠo tr thƠnh nhữngnét khu biệt vƠ có ý nghĩa Chính vậy, ngữ ơm h c có số đ n v lƠ vô h n, quen g i lƠ ơm tố (sounds) Còn ơm v h c, có số đ n v hữu h n, đ m đ ợc Đ n v c a ơm v h c lƠ ơm v (phonemes) Về mặt ngữ ơm h c, nguyên ơm nƠy có n i dung ngữ ơm lƠ nh th giới Ví dụ nh [m] phơn biệt với [p] vƠ [b] [m] vƠ [b] t t c ngơn ngữ đặc tính [mũi/khơng mũi] [p] phơn biệt với đặc tính [+ vơ thanh]: +vô thanh/ +hữu Những đối lập kiểu nh b tc ngơn ngữ nƠo giống Vì vậy, lƠ thu c tính ngữ ơm h c thu n tuý Tuy nhiên, d ới mắt ơm v h c, tƠi nguyên ngữ ơm c a ơm v ph i đ ợc lựa ch n d ới mắt c a ng i b n ngữ (native), đ ợc tận dụng vƠ ch n lựa, đ ợc khai thác cho có lợi vƠ hợp với hệ thống (cái t ng c a ngơn ngữ) c a nh t Nói tóm l i, nét ngữ ơm đƣ bi n thƠnh nét ơm v h c; từ chung, ph quát tr thƠnh riêng, đặc thù C m t ti n trình l ch sử phát triển c a m t hệ thống ngữ ơm, từ lúc xa x a cho đ n ngƠy nay, suy cho cùng, lƠ ch n lựa khai thác tƠi nguyên nhơn lo i y cho t c ng i mình, cho c ng đ ng nói cụ thể Quá trình ch n lựa chật vật, vƠ nói lƠ “đ y máu vƠ n ớc mắt” Chính vậy, nhƠ ơm v h c đ i không quay l ng l i với l ch sử c a m t ngơn ngữ mƠ tìm hệ thống c liệu chắn cho việc ch ng minh ch c c a hệ ơm m t ngôn ngữ Ph ng pháp luận nƠy khác hoƠn toƠn với ơm v h c c u trúc luận x a Vì vậy, nói, ơm v h c đ i lƠ hình nh thu 38 Trình bƠy trình chuyển đ i ký tự sang ơm thanh? Trình bƠy tính ch t c a t ng hợp ti ng nói? Trình bƠy t ng hợp ti ng nói Formant? Trình bƠy t ng hợp ti ng nói ph ng pháp ghép nối? 38 39 M TăS ăĐ ăTHIăM U 39 40 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Ký duyệt đề: Thời gian: 60 phút Cơuă1:ă(3ăđi m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phân biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biểu diễn tín hiệu ti ng nói d ới d ng sóng theo th i gian? - Mƣ hóa ti ng nói d ng sóng vơ h ớng: xung n tính? Câu 3: (4 m) - Mơ hình chung c a hệ thống nhận d ng ti ng nói? - Mơ hình markov? ng dụng c a Markov nhận d ng ti ng nói? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 40 41 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Ký duyệt đề: Thời gian: 60 phút Câu 1: (3 m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biều diễn tín hiệu ti ng nói miền khơng gian chiều: Spectrogram.? - Mã hóa ti ng nói d ng sóng vơ h ớng: xung n tính? Câu 3: (4 m) - Trình bƠy hệ thống chuyển đ i văn b n thƠnh gi ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 41 42 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Thời gian: 60 phút Cơuă1:ă(3ăđi m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biểu diễn tín hiệu ti ng nói miền t n số? - Trình bƠy Formant vƠ Antiformant? Câu 3: (4 m) - Mơ hình chung c a hệ thống nhận d ng ti ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 42 Ký duyệt đề: 43 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Thời gian: 60 phút Cơuă1:ă(3ăđi m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biểu diễn tín hiệu ti ng nói miền t n số? - Mƣ hóa ti ng nói d ng sóng vơ h ớng: xung n tính? Câu 3: (4 m) - Các ph ng pháp nhận d ng ti ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 43 Ký duyệt đề: 44 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Ký duyệt đề: Thời gian: 60 phút Câu 1: (3 m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biều diễn tín hiệu ti ng nói miền khơng gian chiều: Spectrogram.? - Phân tích đặc tính ngữ ơm, ơm h c c a ti ng nói? Câu 3: (4 m) - Trình bƠy hệ thống chuyển đ i văn b n thƠnh gi ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 44 45 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Ký duyệt đề: Thời gian: 60 phút Cơuă1:ă(3ăđi m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biều diễn tín hiệu ti ng nói miền khơng gian chiều: Spectrogram.? - Trình bƠy Formant vƠ Antiformant? Câu 3: (4 m) - Trình bƠy hệ thống chuyển đ i văn b n thƠnh gi ng nói? - Trình bƠy c u trúc c a mơ hình Markov? Các v n đề mơ hình Markov? ***H T*** -Lưu ý: - Không sửa, xóa đề thi, nộp lại đề sau thi 45 46 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Ký duyệt đề: Thời gian: 60 phút Cơuă1:ă(3ăđi m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? Câu 2: (3 m) - Trình bƠy ph ng pháp biều diễn tín hiệu ti ng nói miền khơng gian chiều: Spectrogram.? - Phơn tích đặc tính ngữ ơm, ơm h c c a ti ng nói? Câu 3: (4 m) - Trình bƠy hệ thống chuyển đ i văn b n thƠnh gi ng nói? - Mơ hình markov? ng dụng c a Markov nhận d ng ti ng nói? ***H T*** -Lưu ý: - Không sửa, xóa đề thi, nộp lại đề sau thi 46 47 Tr ngăĐ iăH căHƠngăH iăVi tăNam Khoa Côngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - Đ ăTHIăK TăTHỎCăH CăPH N Đề thi số: Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: 2009- 2010 Thời gian: 60 phút Cơuă1:ă(3ăđi m) - Trình bƠy khái niệm chung vƠ ng dụng c a xử lý ti ng nói? - Phơn biệt hệ thống: nhận d ng ti ng nói vƠ t ng hợp ti ng nói? - Các tính ch t thay đ i đ ợc tín hiệu ti ng nói? Câu 2: (3 m) - Phơn tích đặc tính ngữ ơm, ơm h c c a ti ng nói? - Mƣ hóa ti ng nói d ng sóng vơ h ớng: xung n tính? Câu 3: (4 m) - Các ph ng pháp nhận d ng ti ng nói? - Trình bƠy c u trúc c a mơ hình Markov? Các v n đề mơ hình Markov? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 47 Ký duyệt đề: 48 ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** Tr THI K TăTHỎC H CăPH N Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: x Thời gian: 60 phút Đề thi số: Ký duyệt đề: x x Cơuă1:ă(2ăđi m) Âm ti t lƠ gì? Trình bƠy đặc điểm vƠ c u trúc c a ơm ti t ti ng Việt Câu 2: (2 m) Trình bƠy ki n trúc chung c a hệ thống chuyển văn b n thƠnh ti ng nói vƠ ch c c a thƠnh ph n Câu 3: (3 m) a) Tìm bi n đ i Fourier X(ejω) c a dƣy x(n) = nαnu(n-2) với |α|1 b) Tìm bi n đ i Fourier r i r c N điểm X(k) c a dƣy x(n) = ej(2π/N)k0 với 0≤ n ≤ N-1 Câu 4: (3 m) a) Ph c a tín hiệu ti ng nói lƠ gì? Các lo i t n số đ ợc sử dụng v đ th ph ? b) nh ph c a tín hiệu ti ng nói lƠ gì? Trình bƠy b ớc thực phơn tích ph tín hiệu ti ng nói? ***H T*** -Lưu ý: - Khơng sửa, xóa đề thi, nộp lại đề sau thi 50 51 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NG THÔNG TIN -*** - THI K TăTHỎC H CăPH N Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: x Thời gian: 60 phút Đề thi số: Ký duyệt đề: x x Cơuă1:ă(2ăđi m) Trình bƠy v n đề t o ngữ điệu t ng hợp ti ng nói Câu 2: (2 m) Trình bƠy v n đề gặp ph i t ng hợp ti ng nói cách ghép nối đ n v ơm Câu 3: (3 m) a) Tìm bi n đ i Fourier X(ejω) c a dƣy x(n): b) Tìm bi n đ i Fourier r i r c N điểm X(k) c a dƣy x(n): Câu 4: (3 m) a) Ph c a tín hiệu ti ng nói lƠ gì? Các lo i t n số đ ợc sử dụng v đ th ph ? b) nh ph c a tín hiệu ti ng nói lƠ gì? Trình bƠy b ớc thực phơn tích ph tín hiệu ti ng nói? ***H T*** -Lưu ý: - Không sửa, xóa đề thi, nộp lại đề sau thi 51 52 Tr ngăĐ iăH căHƠngăH iăVi tăNam KhoaăCôngăngh ăThôngătin B ăMỌNăH ăTH NGăTHỌNGăTIN -*** - THI K TăTHỎC H CăPH N Tên học phần: XỬ LÝ TIẾNG NÓI Năm học: x Thời gian: 60 phút Đề thi số: Ký duyệt đề: x x Cơuă1:ă(2ăđi m) Trình bƠy hiểu bi t c a b n đặc điểm ơm h c c a lo i nguyên ơm, phụ ơm L y ví dụ Câu 2: (2 m) Trình bƠy nhận d ng ti ng nói ph ng pháp dựa vƠo nhận d ng mẫu Câu 3: (3 m) a) Tìm bi n đ i Fourier X(ejω) c a dƣy x(n) = (n+1)αnu(n) với |α|