Trang 7 Bài 1 Giớithiệu 1.1 Thôngtin là gì? 1.2 Vai trò của thôngtin 1.3 Lýthuyếtthôngtin nghiên cứu những gì? 1.4 Những ứng dụng của lýthuyếtthôngtin 1.5 Lýthuyếtthôngtin – Lịch sử hình thành và quan điểm khoa học hiện đại Trang 8 Thôngtin là gì? Một vài ví dụ Hai người nói chuyện với nhau. Cái mà trao đổi giữa họ gọi là thông tin. Một người đang xem tivi/nghe đài/đọc báo, người đó đang nhận thôngtin từ đài phát/báo. Quá trình giảng dạy trong lớp. Các máy tính nối mạng và trao đổi dữ liệu với nhau. Máy tính nạp chương trình, dữ liệu từ đĩa cứng vào RAM để thực thi. Trang 9 Thôngtin là gì? (tt) Nhận xét Thôngtin là cái được truyền từ đối tượng này đến đối tượng khác để báo một “điều”gì đó. Thôngtin chỉ có ý nghĩa khi “điều” đó bên nhận chưa biết. Thôngtin xuất hiện dưới nhiều dạng âm thanh, hình ảnh, . Những dạng này chỉ là “vỏ bọc”vật chất chứa thông tin. “Vỏ bọc” là phần “xác”, thôngtin là phần “hồn”. Ngữ nghĩa của thôngtin chỉ có thể hiểu được khi bên nhận hiểu được cách biểu diễn ngữ nghĩa của bên phát. Một trong những phương tiện để diễn đạt thôngtin là ngôn ngữ. Có hai trạng thái của thông tin: truyền và lưu trữ. Môi trường truyền/lưu trữ được gọi chung là môi trường chứa tin hay kênh tin. Trang 10 Vai trò của thôngtin Các đối tượng sống luôn luôn có nhu cầu hiểu về thế giới xung quanh, để thích nghi và tồn tại. Đây là một quá trình quan sát, tiếp nhận, trao đổi và xử lýthôngtin từ môi trường xung quanh. Thôngtin trở thành một nhu cầu cơ bản, một điều kiện cần cho sự tồn tại và phát triển. Khi KHKT, XH ngày càng phát triển, thôngtin càng thể hiện được vai trò quan trọng của nó đối với chúng ta. Ví dụ, hành động xuất phát từ suy nghĩ, nếu suy nghĩ đúng, thì hành động mới đúng. Suy nghĩ lại chịu ảnh hưởng từ các nguồn thôngtin được tiếp nhận. Vì vậy thôngtin có thể chi phối đến suy nghĩ và kết quả là hành động của con người. Trang 11 LTTT nghiên cứu những vấn đề gì? Ở góc độ khoa học kỹ thuật, LTTT nghiên cứu nhằm tạo ra một “cơ sở hạ tầng” tốt cho việc truyền thôngtin chính xác, nhanh chóng và an toàn; lưu trữ thôngtin một cách hiệu quả. Ở các góc độ nghiên cứu khác LTTT nghiên cứu các vấn đề về cách tổ chức, biểu diễn và truyền đạt thông tin, và tổng quát là các vấn đề về xử lýthông tin. Ba lĩnh vực nghiên cứu cơ bản của mônhọc Mã hoá chống nhiễu Mã hoá tối ưu (hay nén dữ liệu) Mật mã hoá Trang 12 Những ứng dụng của LT thôngtin Cuộc cách mạng thôngtin đang xảy ra, sự phát triển mạnh mẽ của các phương tiện mới về truyền thông, lưu trữ thôngtin làm thay đổi ngày càng sâu sắc xã hội chúng ta. LTTT đóng một vai trò quyết định trong sự phát triển này bằng cách cung cấp cơ sở lýthuyết và một cái nhìn triết học sâu sắc đối với những bài toán mới và thách thức mà chúng ta chạm trán – hôm nay và mai sau. Những ứng dụng phổ biến của LTTT là truyền thông và xử lýthôngtin bao gồm: truyền thông, nén, bảo mật, lưu trữ, . Các ý tưởng của LTTT đã được áp dụng trong nhiều lĩnh vực như vật lý, ngôn ngữ học, sinh vật học, khoa học máy tính, tâm lý học, hóa học Trang 13 Những ứng dụng của LT thôngtin (tt) Mối quan hệ giữa LTTT và thống kê đã được tìm thấy, các phương pháp mới về phân tích thống kê dựa trên LTTT đã được đề nghị. Ứng dụng vào quản lý kinh tế. Ví dụ, lýthuyết đầu tư tối ưu xuất hiện đồng thời với lýthuyết mã hóa nguồn tối ưu. Ứng dụng vào ngôn ngữ học. Ứng dụng đến tâm lý thực nghiệm và đặc biệt là lĩnh vực dạy và học. Trang 14 Lịch sử hình thành Cuộc cách mạng lớn nhất về cách nhìn thế giới khoa học là chuyển hướng từ thuyết quyết định Laplacian đến bức tranh xác suất của tự nhiên. Thế giới chúng ta đang sống trong đóchủ yếu là xác suất. Kiến thức của chúng ta cũng là một dạng xác suất. LTTT nổi lên sau khi cơ họcthống kê và lượng tử đã phát triển, và nó chia xẻ với vật lýthống kê các khái niệm cơ bản về entropy. Theo lịch sử, các khái niệm cơ bản của LTTT như entropy, thôngtin tương hỗ được hình thành từ việc nghiên cứu các hệ thống mật mã hơn là từ việc nghiên cứu các kênh truyền thông. Về mặt toán học, LTTT là một nhánh của lýthuyết xác suất và các quá trình ngẫu nhiên (stochastical process). Trang 15 Lịch sử hình thành (tt) Quan trọng và có ý nghĩa nhất là quan hệ liên kết giữa LTTT và vật lýthống kê. Trong một thời gian dài trước khi LTTT được hình thành, L. Boltzman và sau đólà L.Szilard đã đánh đồng ý nghĩa của thôngtin với khái niệm nhiệt động học của entropy. Một mặt khác, D. Gabor chỉ ra rằng “lý thuyết truyền thông phải được xem như một nhánh của vật lý”. C. E. Shannon là cha đẻ của LTTT. . 7 Bài 1 Giới thiệu 1.1 Thông tin là gì? 1.2 Vai trò của thông tin 1.3 Lý thuyết thông tin nghiên cứu những gì? 1.4 Những ứng dụng của lý thuyết thông tin. lĩnh vực như vật lý, ngôn ngữ học, sinh vật học, khoa học máy tính, tâm lý học, hóa học Trang 13 Những ứng dụng của LT thông tin (tt) Mối quan hệ giữa