ý thuyết thông tin hay

Ngày tải lên: 16/11/2012, 16:39

... Lý thuyết thông tin. Mô hình lý thuyết thông tin theo quan điểm Shannon Lý thuyết thông tin được xét ở đây theo quan điểm của Shannon. Đối tượng nghiên cứu là một hệ thống liên lạc truyền tin ... phần lượng tin không chắc chắn thông qua lượng tin đã biết của Y (hay thông tin về Y đã được biết). Trong trường hợp này, một phần lượng tin không chắc chắn của thông qua lượng tin đã biết ... trình: Lý thuyết thông tin. CHƯƠNG 2: ĐỘ ĐO LƯỢNG TIN Mục tiêu: trình bày các khái niệm về độ đo lượng tin chưa biết và đã biết về một biến ngẫu nhiên X. Tính toán các lượng tin này thông...

Ngày tải lên: 23/08/2012, 16:23

...  -    hi n l i hay kh năng t ng quan và cu i cùng là không thông thông su t. M t chu i        dài các s 0 (hay m ) có th t o nên l i khi c n trích ra thông tin đ nh th i.   ... đi m c a thông tin sộ ố ượ ể ủ ố (1). H th ng thông tin s th ng ph c t p h n m t h th ng t ng t t ng   " $         đ ng. (2). Chi phí l p đ t l n h n so v i thông tin t ng ... a h th ng thông tin sƯ ượ ể ủ ệ ố ố 1.4.1. Nh ng u đi m c a thông tin sữ ư ể ủ ố (1). Tăng đ c kh năng truy n d n d li u    '  (2). Tăng kh năng tích h p, đ ph c t p và s tin c y c...

Ngày tải lên: 13/09/2012, 10:21

... (tt) () () xx 1 x 1 y 11 ∑∑ == === N n N n n N N E N () ( ) () ⎟ ⎟ ⎠ ⎞ ⎜ ⎜ ⎝ ⎛ ⎥ ⎦ ⎤ ⎢ ⎣ ⎡ −=−= ∑ = 2 1 2 2 y xx 1 yy N n n N N N EE δ () ⎟ ⎟ ⎠ ⎞ ⎜ ⎜ ⎝ ⎛ ⎟ ⎟ ⎠ ⎞ ⎜ ⎜ ⎝ ⎛ ⎥ ⎦ ⎤ ⎢ ⎣ ⎡ −= ∑ = 2 1 xx 1 N N E N n n () () ⎟ ⎟ ⎠ ⎞ ⎜ ⎜ ⎝ ⎛ ⎥ ⎦ ⎤ ⎢ ⎣ ⎡ −= ∑ = 2 1 2 xx 1 N n n E N () () ( ) N N N E N N n n 2 x 2 x 2 1 2 2 1 xx 1 δ δ ==−= ∑ = Trang 17 Thông tin  Thông tin là một khái niệm trừu tượng, phi vật chất và rất khó được định nghĩa chính xác. Hai định nghĩa về thông tin.  Thông tin là sự cảm hiểu của con ... 1948) Trang 12 Những ứng dụng của LT thông tin  Cuộc cách mạng thông tin đang xảy ra, sự phát triển mạnh mẽ của các phương tiện mới về truyền thông, lưu trữ thông tin làm thay đổi ngày càng sâu sắc xã ... thông qua sự tiếp xúc với nó.  Thông tin là một hệ thống những tin báo và mệnh lệnh giúp loại trừ sự không chắc chắn (uncertainty) trong trạng thái của nơi nhận tin. Nói ngắn gọn, thông tin...

Ngày tải lên: 13/09/2012, 10:52

... suất điều kiện p(yi | xi). Tính các lượng tin tương hỗ I(x i ,y j ), các lượng tin có điều kiện I(x i ,y j ), lượng tin tương hỗ trung bình I(X,Y), lượng tin có điều kiện trung bình I(X|Y). 9. ... phỏng việc truyền tin của một hệ thống truyền tin chống nhiễu bao gồm các việc sau: • Cho phép chọn hay nhập vào ma trận sinh. • Thực hiện việc mã hoá thông báo thành từ mã. • Thực hiện việc random ... ma trận sinh. Viết chương trình mã hoá thông báo thành từ mã. Viết chương trình phát hiện sai và sửa sai 1 bit cho một mã tuyến tính có d > 2 và rút ra thông báo tương ứng với từ mã nhận được. 12....

Ngày tải lên: 17/09/2012, 11:50

... Technical Journal - nơi đưa ra lý thuyết thông tin. Shannon đã giải thích hai khía cạnh này thông qua định lý mã hóa nguồn và định lý mã hóa kênh truyền của ông.(Định lý mã hóa nguồn của Shannon ... sổ, mục đích của những người thiết kế là chuyển đổi thông tin thành tín hiệu sổ, chuyển đi thông qua một môi trường truyền tin, nhận thông tin tại trạm cuối và tái hiện lại tín hiệu sổ một cách ... cầu để biểu diễn cho một nguồn tin duy nhất có thể xấp xỉ lượng tin. Xét nguồn tạo bởi các ký tự tiếng anh. Lượng tin (hoặc entropy) là 4.07 bits/kí tự. Theo định lý mã hóa nguồn của Shannon,...

Ngày tải lên: 18/09/2012, 09:12

... phần lượng tin không chắc chắn thông qua lượng tin đã biết của Y (hay thông tin về Y đã được biết). Trong trường hợp này, một phần lượng tin không chắc chắn của thông qua lượng tin đã biết ... thông tin. Một vấn đề quan trọng cần lưu ý là phải đồng bộ giữa tốc độ nạp thông tin (phát tín hiệu) với tốc độ truyền tin. Nếu tốc độ nạp thông tin bằng hoặc lớn hơn so với tốc độ truyền tin ... trình: Lý thuyết thông tin. CHƯƠNG 2: ĐỘ ĐO LƯỢNG TIN Mục tiêu: trình bày các khái niệm về độ đo lượng tin chưa biết và đã biết về một biến ngẫu nhiên X. Tính toán các lượng tin này thông...

Ngày tải lên: 09/10/2012, 14:53

... Y và một phần thông tin về X. Phần thông tin đó chính là lượng tin đã biết về X nhưng vẫn chưa biết hết về X. Bài toán ở đây là tính lượng tin đã biết về X khi Y xảy ra. Ký hiệu: I(X/Y) ... Tìm thông tin về tình trạng học tập của sinh viên khi biết tinh thần ái hữu của họ. Biên soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 29 Giáo trình: Lý thuyết thông ... định lý 1,2 và 3 cùng với các kết quả đã tính được để so sánh và minh họa. Biên soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 27 Giáo trình: Lý thuyết thông tin. BAI...

Ngày tải lên: 09/10/2012, 14:53

... Ks. Dương Văn Hiếu. 33 Giáo trình: Lý thuyết thông tin. BÀI 3.3: TÍNH TỐI ƯU CỦA ĐỘ DÀI MÃ Mục tiêu Sau khi hoàn tất bài học này bạn có thể: - Hiểu định lý Shannon (1948), - Biết được các ... L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 40 Giáo trình: Lý thuyết thông tin. Chú ý: ngoài bảng mã tức thời chọn được ở trên, ta còn có thể sinh được nhiều bảng ... Văn Hiếu. 38 Giáo trình: Lý thuyết thông tin. BÀI 3.2: QUAN HỆ GIỮA MÃ TÁCH ĐƯỢC VÀ ĐỘ DÀI MÃ Mục tiêu Sau khi hoàn tất bài học này bạn có thể hiểu: - Định lý Kraft (1949), - Định nghĩa...

Ngày tải lên: 09/10/2012, 14:53

... Văn Hiếu. 44 Giáo trình: Lý thuyết thông tin. Xét từng ký tự ở đầu nhận chỉ phụ thuộc vào ký tự ở đầu truyền tương ứng với nó, nếu kênh truyền có nhiễu thì một ký tự ở đầu truyền có thể được ... & Ks. Dương Văn Hiếu. 45 Giáo trình: Lý thuyết thông tin. Định nghĩa dung lượng kênh truyền Dựa vào ma trận truyền tin A, ta có thể dễ dàng tính lượng tin trên kênh truyền. I(X/Y)= H(X)-H(Y/X) ... các ký tự độc lập nhau (hay truyền từng ký tự một), còn khái niệm không nhớ ở đây là chỉ xét mối quan hệ giữa ký tự truyền và ký tự nhận được tương ứng, không xét đến mối quan hệ giữa ký tự...

Ngày tải lên: 09/10/2012, 14:53

... 52 Giáo trình: Lý thuyết thông tin. Các khái niệm cơ bản của kỹ thuật truyền tin Xét sơ đồ truyền tin như sau: R Kênh Bộ tạo mã Bộ giải mã ký tự mã nhiễu P (e) ký tự giải mã Nhận ... Văn Hiếu. 60 Giáo trình: Lý thuyết thông tin. 1 – H(β,1-β) Định lý về dung lượng kênh truyền Giả sử ma trạn A có dạng vuông và có ma trận nghịch đảo là A -1 Ký hiệu A=||p ij || với i=1,2, ... 59 Giáo trình: Lý thuyết thông tin. Xây dựng công thức tính dung lượng kênh truyền đối xứng Do H(Y/X) không phụ thuộc vào phân phối của X => Max của I(X/Y) được quy về mã của H(Y). Hay ))/()(()/(...

Ngày tải lên: 09/10/2012, 14:54

... của từ mã hay số bit của từ mã chẵn lẻ. + m: số bit kiểm tra. + k = n-m: số bit thông tin ⇒ s=2 k (vì với k bit thông tin thì ta chỉ có thể biểu diên tối đa 2 k trạng thái thông tin k bit). ... k bit). + Đoạn kiểm tra: gồm m bit dùng để kiểm tra mã sai. + Đoạn thông tin: gồm k bit thông tin. Mỗi đoạn mã thông tin có duy nhất một đoạn mã kiểm tra và được xác định bởi hệ phương trình ... trận A) Số bit thông tin k = n – m = 3 => Số từ mã s=2 k =8 từ mã. Biên soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 66 Giáo trình: Lý thuyết thông tin. BÀI 5.4:...

Ngày tải lên: 09/10/2012, 14:54

... trình: Lý thuyết thông tin. BÀI 5.7: THANH GHI LÙI TỪNG BƯỚC Mục tiêu Sau khi hoàn tất bài học này bạn có thể biết: - Đặt vấn đề về thanh ghi lùi từng bước, - Cách biểu diễn vật lý của ... soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 79 Giáo trình: Lý thuyết thông tin. Ví dụ minh họa lược đồ sửa lỗi 3 bit Lược đồ sửa lỗi: Bước 1: Lập bảng sửa lỗi: ... soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 76 Giáo trình: Lý thuyết thông tin. Lược đồ sửa lỗi theo các hiệp hợp Bước 1: Lập bảng các hiệp hợp ứng với các bộ lỗi...

Ngày tải lên: 09/10/2012, 15:04

... Phan Tấn Tài & Ks. Dương Văn Hiếu. 85 Giáo trình: Lý thuyết thông tin. - Biết cách xác định ma trận kiểm tra chẵn lẻ cho mã xoay vòng (hay còn gọi là mã vòng), - Hiểu định nghĩa mã xoay ... soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 89 Giáo trình: Lý thuyết thông tin. Thủ tục sinh thanh ghi lùi từng bước Để sinh thanh ghi lùi từng bước với số bit là ... soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 87 Giáo trình: Lý thuyết thông tin. BÀI 5.9: ĐA THỨC ĐẶC TRƯNG CỦA THANH GHI Mục tiêu Sau khi hoàn tất bài học này bạn...

Ngày tải lên: 09/10/2012, 15:04

... diễn giải các ý nghĩa của sơ đồ. Biên soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 93 Giáo trình: Lý thuyết thông tin. TÀI LIỆU THAM KHẢO 12. G.J.ChaiTin, Algorithmic ... chẩn đoán đúng.(Lượng thông tin biết về Bệnh thông qua Triệu chứng) và tỷ lệ chẩn đoán đúng là bao nhiêu phần trăm. Câu 3: Bây giờ người ta sử dụng 2 bit để mã thông tin về Triệu chứng (có ... Xét một kênh truyền tin đặc biệt dạng : Truyền X Æ Nhận Y. Biên soạn: TS. L ê Quy ết Thắng, ThS. Phan Tấn Tài & Ks. Dương Văn Hiếu. 91 Giáo trình: Lý thuyết thông tin. Truyền một giá...

Ngày tải lên: 09/10/2012, 15:04

Ngày tải lên: 10/10/2012, 15:28

Ngày tải lên: 10/10/2012, 15:28

Ngày tải lên: 10/10/2012, 15:28

Ngày tải lên: 02/11/2012, 13:21