Cĩ thể nĩi mạng nơron dẫn tiến là một kiểu mạng đơn giản trong việc sắp đặt mạng. Trong mạng này thơng tin chỉ truyền trên một hướng duy nhất: từ lớp đầu vào xuyên qua lớp ẩn (nếu cĩ) và kết thúc tại lớp đầu ra. Mạng dẫn tiến khơng cĩ chu trình hoặc vịng ở bên trong.
a) Các mạng dẫn tiến (feedforward) đơn mức
Trong một mạng nơron phân mức, các nơron được tổ chức dưới dạng các mức. Với dạng đơn giản nhất của mạng phân mức, mạng cĩ một mức đầu vào gồm các nút nguồn chiếu trực tiếp tới mức đầu ra gồm các nơron.
Số hĩa bởi Trung tâm Học liệu - ĐHTN http://www.lrc-tnu.edu.vn/
30 Mức đầu vào Mức đầu ra
Hình 1.9 Mạng tiến với một mức nơron
Như vậy, mạng thực sự là khơng cĩ chu trình. Mạng nơron trong hình 1.9 minh họa trường hợp ba nút đối với cả mức đầu ra và đầu vào. Một mạng như vậy được gọi là một mạng đơn mức. Mạng được gọi là “đơn mức” tức là chỉ cĩ một mức, chính là mức đầu ra gồm các nút tính tốn (các nơron). Chúng ta khơng tính mức đầu vào của các nút nguồn vì khơng cĩ tính tốn nào được thực hiện ở đây.
b) Các mạng dẫn tiến đa mức
Lớp thứ hai của một mạng nơron dẫn tiến được phân biệt bởi sự cĩ mặt của một hay nhiều mức ẩn. Các nút tính tốn của mức ẩn được gọi là các nơron ẩn hay các đơn vị ẩn (thuật ngữ “ẩn” ở đây mang ý nghĩa là khơng tiếp xúc với mơi trường). Chức năng của các nơron ẩn là can thiệp vào giữa đầu vào và đầu ra của mạng một cách hữu hiệu. Bằng việc thêm một vài mức ẩn, mạng cĩ khả năng rút ra được các thống kê bậc cao của tín hiệu đầu vào . Khả năng các nơron ẩn rút ra được các thống kê bậc cao đặc biệt cĩ giá trị khi mức đầu vào cĩ kích thước lớn.
Các nút nguồn trong mức đầu vào của mạng cung cấp các phần tử của vector đầu vào, chúng tạo nên các tín hiệu đầu vào cho các nơron (các nút tính tốn) trong mức thứ hai (mức ẩn thứ nhất). Các tín hiệu đầu ra của mức thứ hai được sử dụng như các đầu vào cho mức thứ ba, và như cứ vậy cho phần
Số hĩa bởi Trung tâm Học liệu - ĐHTN http://www.lrc-tnu.edu.vn/
31 cịn lại của mạng. Về cơ bản, các nơron trong mỗi mức của mạng cĩ các đầu vào của chúng là các tín hiệu đầu ra của chỉ mức đứng liền trước nĩ (điều này cĩ thể khác trong thực tế cài đặt). Tập hợp các tín hiệu đầu ra của các nơron trong mức đầu ra của mạng tạo nên đáp ứng tồn cục của mạng đối với các vector đầu vào được cung cấp bởi các nút nguồn của mức đầu vào.
Mạng nơron trong hình 1.10 được gọi là kết nối đầy đủ. Tại đĩ, tất cả các nút trong mỗi mức của mạng được nối với tất cả các nút trong mức tiếp sau. Nếu một số kết nối khơng tồn tại trong mạng, chúng ta nĩi rằng mạng là kết nối khơng đầy đủ.
Mức đầu vào Mức ẩn Mức đầu ra gồm các nút gồm các gồm các
nguồn nơron ẩn nơron đầu ra Hình 1.10 Mạng tiến kết nối đầy đủ với một mức ẩn và một mức đầu ra