2.1 Module DBController
STT File Ý nghĩa
1 ConnectionPool.java Hoạt động dựa trên lớp ResourcePool.java, phụ trách việc đóng, mở, duy trì kết nối giữa ứng dụng và CSDL.
2 DatabaseObject.java Lớp ảo tương tác với CSDL để thực hiện các thao tác như lấy thông tin, thêm, xoá, sửa,…
3 DriverUtilities.java Cung cấp thông tin cần thiết về các driver khác nhau để kết nối CSDL.
4 ResourcePool.java Duy trì, phân phát và giải phóng tài nguyên hệ thống.
2.2 Module ProcessDoc
STT File Ý nghĩa
1 DicTree.java Quản lý về cây từ điển
n , signal , trọng lượng
3 DocObject.java Đối tượng điều khiển việc lấy thông tin và đánh dấu các URL đã được lập chỉ mục trong CSDL.
4 DocTree.java Xây dựng cây từ điển các mục từ cho tài liệu văn bản
5 HtmlInformation.java Thông tin về file html :url , trích dẫn , tiêu đề , ngày cập nhật
6 HtmlStreamFilter.java Bộ lọc các tag đặc biệt của file html
7 Info.java Interface của cây từ điển từ và cây từ điển tài liệu
8 InverseFile.java Tập tin nghịch đảo
9 Manager.java Trình quản lý chung cho chương trình như các tham số , các file input , trạng thái , từ điển chỉ mục ...
10 Node.java Các thao tác trên node của cay từ điển 11 NodeInfo.java Khởi tạo ban đầu về thông tin vế 1 node (n
, nDoc , signal , startPage, endPage) 12 Paicedemo.java Hỗ trợ cho việc xử lý hậu tố
13 ProcessDicTree.java Xử lý thao tác theo cấu trúc cây từ điển 14 ProcessFileDownloaded.java Xứ lý các file download về (lập chỉ mục) 15 ProcessWord.java Các thao tác xử lý trên từ như tính trọng
16 SpecialChar.java Xử lý các ký tự đặc biệt (dùng bảng băm) quá trình này bao gộp xử lý sơ khới cho phone Unicode UCS2
17 Stemmer.java Lọc bỏ hậu tố của từ tíêng Anh
18 Sentence.java
19 Utils.java Nhận dạng bảng mã ...
2.3 Module Query
STT File Ý nghĩa
1 JoinStream.java Hợp các tập tài liêu tuỳ theo toán tử được chọn. 2 Query.java Sử dụng từ điển phân tích một câu truy vấn thành
các từ có nghĩa, xử lý những từ này tuỳ theo chúng thuộc loại từ nào (tiếng Việt, tiếng Anh, stop word)
3 StreamInverseFile.java Tập các tài liệu lấy được dựa vào file nghịch.
2.4 Module SE
STT File Ý nghĩa
1 SearchGUI.java Tương tác với người dùng thông qua giao diện web với những xử lý như : kiểm tra các ràng buộc nhập liệu đối với một câu truy vấn, hiển thị kết quả tìm được,…
2 Search.java Đối tượng trung gian giữa module Query và lớp
2.5 Module Webcopy
STT File Ý nghĩa
1 FlexVector.java Giống như đối tượng Vector của Java nhưng có một số thay đổi nhằm giúp cho việc điều khiển các phần tử tốt hơn.
2 ProjectObj Đối tượng trung gian điều khiển những xử lý giữa cấu trúc ProjectInfo và các module, package, đối tượng, cấu trúc khác.
3 Queue.java Dựa trên đối tượng FlexVector để truy xuất các phần tử đầu hàng đợi.
4 StartUrlObject ĐốI tượng trung gian điều khiển những xử lý giữa cấu trúc StartUrlInfo và các module, package, đối tượng hoặc cấu trúc khác.
5 Spider.java Nhận 1 URL cần xử lý từ đối tượng WebRobot.java.
Các xử lý bao gồm : yêu cầu thông tin từ WebServer, cung cấp các liên kết mới cho WebRobot, phân tích tài liệu để tạo CSDL chỉ mục.
6 SysProjects.java Đối tượng điều khiển danh sách project của ứng dụng
7 Timer.java Đối tượng điều khiển việc lưu thông tin của project hiện hành một cách định kỳ.
8 WebRobot.java Điều khiển hoạt động của các Spider.
9 UrlObject.java Đối tượng trung gian điều khiển những xử lý giữa cấu trúc UrlInfo và các module, package, đối tượng hoặc
cấu trúc khác.
10 Utils.java Cung cấp một số tiện ích cho module Webcopy
2.6 Module WebcopyGUI
STT File Ý nghĩa
1 MainClass.java Xử lý các chức năng có trong MainFrame.java
2 MainFrame.java Giao diện người quản trị.
3 PropertyProjectDlg.java Thông qua PropertyProjectDlg, quản trị cung cấp một số thông tin cần thiết về một project như : tên project là gì, chu kỳ tự động lưu project, bao nhiêu spider hoạt động đồng thời, bao nhiêu kết nối CSDL được dành sẵn cho project,….
4 StartingUrlDlg.java Thông qua StartingUrlDlg, quản trị cung cấp một số thông tin cần thiết về một URL ban đầu như : địa chỉ, account, password của trang web sẽ truy xuất, lần theo URL này đến mấy cấp,… 5 TreeInfo.java Cây project mà mỗi nút là một URL ban đầu. 6 TableInfo.java Danh sách những liên mới có được từ việc phân
PHẦN 3 : KẾT QUẢ, ĐÁNH GIÁ VÀ HƯỚNG PHÁT TRIỂN