Nghiên cứu một số vấn đề về khai thác và tìm kiếm dữ liệu trên cổng thông tin điện tử

Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử Lời cảm ơn Trong thời gian thực đồ án “Nghiên cứu số vấn đề khái thác tìm kiếm liệu cổng thơng tin điện tử “ Em nhận đƣợc hƣớng dẫn ,chỉ bảo giúp đỡ tận tình thầy ,cơ khoa công nghệ thông tin trƣờng Đại Học Dân Lập Hải Phòng Vậy cho phép em đƣợc bày tỏ lòng biết ơn sâu sắc tới giúp đỡ đó.Đặc biệt em xin chân thành cảm ơn Thầy giáo -Thạc sĩ: Võ Văn Tùng -Ngƣời trực tiếp hƣớng dẫn tạo điều kiện thuận lợi giúp đỡ em hoàn thành đồ án Qua em xin cảm ơn gia đình ,bạn bè giúp đỡ động viên em hồn thành đồ án Vì thời gian có hạn, trình độ thân cịn nhiều hạn chế Cho nên đề tài không tránh khỏi thiếu sót, em mong đƣợc góp ý quý báu tất thầy cô giáo nhƣ bạn để đề tài em đƣợc hoàn thiện Em xin chân thành cảm ơn ! Hải Phòng, tháng năm 2009 Sinh viên Nghiên cứu số vấn đề khai thác tìm kiếm liệu cng thụng tin in t Phần mở đầu Trong năm gần đây, ứng dụng Internet phát triển nhanh, ảnh hƣởng làm thay đổi nhiều đến đời sống kinh tế, văn hoá, xã hội tất nƣớc giới Trong phát triển mạnh mẽ Internet, Website giữ vai trò đặc biệt quan trọng Tuy nhiên, với thời gian hình thức bộc lộ số nhƣợc điểm cần phải khắc phục Cùng với trợ giúp công nghệ Soft Agent - chƣơng trình thay mặt ngƣời dùng thực cơng việc tìm kiếm xử lý thông tin Internet - khái niệm Website truyền thống đƣợc chuyển thành “Website thông minh” với trợ giúp dịch vụ Search Engine, cơng cụ cho phép tìm kiếm lọc thơng tin sở từ khoá đƣợc xác lập ngƣời dùng dịch vụ phân loại thông tin – Category Từ đó, thuật ngữ “Website thơng minh” hay “Cổng thơng tin điện tử” Portal đƣợc hình thành Hiện nay, số quốc gia, số tổ chức giới quan tâm ý đến phát triển công nghệ Portal, công nghệ trở thành xu chung trình phát triển Internet Ở nƣớc ta, số địa phƣơng quan tâm phát triển công nghệ Portal nhƣ thành phố Hà Nội, thành phố Hồ Chí Minh, tỉnh Hà Tây số địa phƣơng khác… Các địa phƣơng xây dựng đƣợc cổng thông tin điện tử cho riêng mình, trở thành cơng cụ phục vụ đắc lực việc quản lý, điều hành hoạt động kinh tế, xã hội Cũng nhƣ số ngành kinh tế - xã hội khác, ngành Giáo dục Đào tạo với đặc điểm quản lý địa bàn diện tích rộng lớn, việc tổng hợp phân tích số liệu có liên quan đến hoạt động ngành địa phƣơng thời điểm khác cần thiết để Bộ Giáo dục Đào tạo đƣa biện pháp điều chỉnh đắn kịp thời Chính vậy, việc xây dựng nghiên cứu thiết kế tổ chức liệu cổng thông tin điện tử ngành Giáo dục Đào tạo để phục vụ cho công tác quản lý, đạo chuyên môn việc làm cần thiết, góp phần vào việc đổi mới, nâng cao chất lƣợng Giáo dục Đào tạo Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử Xuất phát từ nhu cầu trên, em hƣớng nghiên cứu vào vấn đề liên quan đến lĩnh vực tổ chức liệu giải pháp kỹ thuật hỗ trợ khai thác tìm kiếm liệu cổng thông tin điện tử Về kết cấu luận văn, phần mở đầu, kết luận tài liệu tham khảo, luận văn đƣợc trình bày chƣơng: Chương 1: Tổng quan cổng thông tin điện tử Portal Nội dung chƣơng trình bày tổng quan Portal Chương 2:Nghiên cứu số vấn đề tổ chức liệu, chế chuyển đổi liệu cổng thơng tin phục vụ cho việc tìm kiếm khai thác liệu Tìm hiểu tổ chức CSDL hệ thống thông tin phân tán; nghiên cứu số phƣơng pháp tìm kiếm khai thác liệu cổng thông tin điện tử iết lập chế chuyển đổi thông tin tự động sever; Một số giải thuật tìm kiếm thơng tin hệ thống thơng tin phân tán Chương 3: Áp dụng nghiên cứu chương trình giải tốn khai thác tìm kiếm thơng tin cổng thông tin ngành Giáo dục Đào tạo Trong chƣơng này, sở nghiên cứu phân tích yêu cầu thực tế từ đơn vị, đƣa chuẩn hoá liệu, thiết kế xây dựng cổng thông tin giáo dục hƣớng giải tốn khai thác, tìm kiếm thơng tin Cổng thông tin giáo dục Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử Chƣơng TỔNG QUAN VỀ CỔNG THÔNG TIN ĐIỆN TỬ 1.1.Khái niêm portal 1.1.1.Định nghĩa portal a.Lịch sử cổng thông tin điện tử Website đóng góp lớn vào việc phổ cập thông tin, nhƣ :giới thiệu tin tức, sở liệu, số chƣơng trình ứng dụng mạng, làm thay đổi giới từ xuất vào đầu năm 90 kỷ trƣớc Ngày giao dịch thông qua web trở nên phổ biến Công nghệ Portal (Cổng điện tử ) phát triển sau thời kỳ khoảng 7-8 năm nhƣ tất yếu xuất phát từ nhu cầu thực tế Portal bƣớc tiến hóa web truyền thống Nó đời để giải vấn đề mà website truyền thống gặp phải Portal (cổng giao tiếp điện tử) bƣớc tiến hóa website truyền thống Là “siêu website”, gọi đầy đủ Portal Website, gọi tắt portal, ngƣời dùng sử dụng trang web thơng qua trình duyệt (tức web browser), nhƣng đằng sau thay đổi thuật ngữ quan niệm triết lý phục vụ thay cho cách hiểu “tuyên truyền“ thông qua website nhƣ trƣớc Là điểm đích quy tụ hầu hết thơng tin dịch vụ cho ngƣời sử dụng cần, điểm đích đến thực Thông tin dịch vụ đƣợc phân loại nhằm thuận tiện cho tìm kiếm hạn chế vùi lấp thơng tin Bảo tồn đầu tƣ lâu dài Có tảng cơng nghệ đảm bảo, cơng nghệ Internet phát triển cao so với thời kỳ xuất Word Wide Web vào đầu năm 90 kỷ trƣớc Những công nghệ tạo nên thời đại portal hỗ trợ tính mở kế thừa mạnh, cho việc mở rộng quy mô phục vụ phần mềm ứng dụng đƣợc “lắp rắp” vào Portal có mà khơng phải hủy bỏ sửa chữa lớn nhƣ website trƣớc Mơi trƣờng chủ động dùng cho việc tích hợp ứng dụng Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử Xu hƣớng “tiến hóa” chung website theo hƣớng tiến đến portal đƣợc trình bày hình vẽ: Platform cộng tác điều hành Tích hợp nội dung dịch vụ Nạp, thu thập ứng dụng q Người dùng qui trình Thu thập nội dung q Tích hợp q Nhiều loại User q Thêm ứng dụng q Web truyền thống dịch vụ q Tập trung vào nội dung q Cá nhân hóa q Rất nhiều Vendor đời 1998 - 1999 q Cộng tác xuyên suốt áp dụng địa bàn q Sử dụng tối đa áp dụng quan q Nỗ lực E-Gov, E-Biz q Tập trung vào công nghệ (platform) workflow q Quan tâm đến vài hãng Portal q Portal frond-end với qui trình tác nghiệp q Chuẩn tương tác (Standard and Interoperability) q Bắt đầu tổng hợp kết q Các platform vendor thống trị q Dùng Webservice nâng cấp 2000 - 2001 2002 - 2003 2003 + Phát triển Portal b.Cổng thông tin điện tử -Portal gì? Portal hay Cổng thơng tin điện tử đƣợc hiểu nhƣ trang web xuất phát mà từ ngƣời sử dụng dễ dàng truy xuất trang web dịch vụ thơng tin khác mạng máy tính Ban đầu khái niệm đƣợc dùng để mô tả trang web khổng lồ nhƣ Yahoo, Lycos, Altavista, AOL… ngày có hàng trăm triệu ngƣời sử dụng chúng nhƣ điểm bắt đầu cho hành trình “lƣớt web” họ Lợi ích lớn mà portal đem lại tính tiện lợi, dễ sử dụng Thay phải nhớ vô số địa khác cho mục đích sử dụng khác nhau, với web portal nhƣ Yahoo, ngƣời dùng cần nhớ yahoo.com, nhà cung cấp dịch vụ tích hợp thứ mà khách hàng cần… - Bạn bắt đầu hành trình “lƣớt web” nhƣ nào? - Yahoo - Tại lại Yahoo? - Đó trang Web cho phép ta dễ dàng truy nhập tới thứ ta cần: tìm kiếm thơng tin, đọc tin tức, tán gẫu với bạn bè, gửi thiệp, gửi thƣ điện tử, xem giá chứng khoán, Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử chí mua sắm thứ - Đúng thế, có nhiều trang web nhƣ mạng, ngƣời ta thƣờng gọi chúng portal Với đặc tính nhƣ „chỉ kết nối‟ hay „tất một‟ web portal trở thành đầu mối thông tin cho vấn đề, thứ la bàn định hƣớng cho ngƣời dùng hành trình khám phá kho báu internet rộng lớn Ngày khái niệm portal không áp dụng cho „gã khổng lồ truyền thông‟ kể trên, nguyên lý đầu mối cho tất đƣợc áp dụng vào việc nâng cấp, cải tạo website kiểu cũ, góp phần hình thành nên khơng gian portal (portal space) mạng internet Các nhà cung cấp dịch vụ internet (ISP) xây dựng nên portal để hỗ trợ khách hàng việc sử dụng internet Các dịch vụ mà họ thƣờng tích hợp vào portal cơng cụ tìm kiếm, danh mục trang web đƣợc xếp theo tiêu chí đó, trang tin tức điện tử, dịch vụ nhắn tin, phòng chat, hòm thƣ điện tử hay trang web cá nhân miễn phí … Các portal cố gắng để tạo giới internet thu nhỏ cho khách hàng, chúng thƣờng đƣợc khuyến cáo nhƣ điểm bắt đầu lý tƣởng cho ngƣời tìm hiểu internet Khác với mục đích xây dựng portal bao trùm lĩnh vực mà công ty truyền thông theo đuổi, cộng đồng chuyên môn mạng Internet muốn xây dựng portal phục vụ cho lĩnh vực mà quan tâm Vẫn với nguyên lý „một đầu mối cho tất cả‟, portal thƣờng sâu vào nghiên cứu nhiều khía cạnh khác vấn đề Ngƣời ta gọi chúng portal chuyên môn hay vortal (vertical portal) Sức hấp dẫn portal không tập trung thông tin đầu mối, chúng cịn có tính quan trọng khác khả tƣơng tác thơng tin nhiều chiều Nói cách khác đi, ngƣời dùng khơng khai thác thơng tin từ portal mà họ cịn đƣa yêu cầu để đƣợc phục vụ Các portal đƣợc xây dựng cho phủ, cho quyền tỉnh, thành phố ví dụ Ngồi vai trị nhƣ „tổng hành dinh trực tuyến’ nơi đóng quân đầy đủ sở ban ngành, portal cho phép Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử ngƣời dân làm việc nhƣ đăng ký kinh doanh qua mạng, đăng ký kết hôn qua mạng… chí bỏ phiếu bầu cử qua mạng Mọi đối tƣợng sử dụng tìm kiếm khai thác kho thông tin đa dạng cách dễ dàng qua giao diện thống mà không cần biết thông tin đâu, quản lý Chẳng hạn, ngƣời dân tìm thấy sử dụng dịch vụ hành mà họ cần, khơng phải quan tâm đến cấp quyền nào, quan liên quan đến thủ tục Song song với phát triển portal nhƣ Yahoo, AOL… Các tập đồn cơng nghệ thơng tin lớn sử dụng cách tƣơng tự để cải tiến hệ thống thơng tin Họ tạo mơ hình kiểu mẫu cho việc xây dựng portal doanh nghiệp (EIPEnterprise Information Portal) Các portal nhƣ trƣớc hết để phục vụ cho công việc doanh nghiệp, mà cụ thể hỗ trợ tiến trình truyền thơng tƣơng tác cá nhân, phận doanh nghiệp (B2E – Business to Employee) Một số mơ hình EIP mạng thông tin nội (Business Intranet Portal) cho phép nhân viên dễ dàng khai thác nguồn tài nguyên thông tin doanh nghiệp đồng thời cho phép truy xuất portal công cộng, portal chuyên ngành hẹp khác Portal cộng tác, tạo môi trƣờng làm việc ảo cho phép nhân viên làm việc với từ đâu Portal chuyên gia, kết nối nhân viên dựa yếu tố lực ngƣời… Các ứng dụng đa dạng portal môi trƣờng nội doanh nghiệp công cụ thiếu doanh nghiệp thời đại bùng nổ thông tin, đặc biệt doanh nghiệp có nhiều phận, chi nhánh phân bố không gian địa lý rộng Cũng môi trƣờng ứng dụng doanh nghiệp, cơng nghệ portal cịn cung cấp cơng cụ giao tiếp hữu hiệu với giới bên Khái niệm cổng thông tin doanh nghiệp mở rộng (Extended enterprise portal extranet) nhằm nói tới trang web cho phép doanh nghiệp thực giao dịch với khách hàng (B2C) hay với nhà cung cấp, đối tác (B2B) Các doanh nghiệp nhỏ khó tự xây dựng cho portal đầy đủ tiêu chuẩn, nhiên muốn họ tiến hành giao dịch qua mạng thông qua chợ điện tử (e-Marketplace portal) Chợ điện tử portal xúc tiến thƣơng mại, Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử doanh nghiệp tham gia chợ điện tử nhƣ thể tham gia kỳ triển lãm Ở đó, doanh nghiệp tiếp cận nguồn thông tin thị trƣờng, gặp gỡ khách hàng tiềm năng, đối tác… Vai trò portal phủ nhận hoạt động mạng internet, Tuy nhiên cần phải khẳng định việc xây dựng portal thực thụ việc không đơn giản.Ở em vào nghiên cứu portal tìm hiểu số vấn đề khai thác tìm kiếm thông tin thông qua cổng thông tin điện tử Qua áp dụng vào việc khai thác tìm kiếm thông tin cổng thông tin giáo dục đào tạo , c.Định nghĩa: Cổng thông tin điện tử - Portal: khái niệm thƣờng đƣợc nhắc đến nhiều năm gần thị trƣờng tin học Bởi phạm vi áp dụng Portal rộng, bao gồm hệ thống bên (internal), bên (external), đằng sau tƣờng lửa nằm rải rác khắp nơi internet, ta khó có đƣợc định nghĩa hồn chỉnh xác Portal Một cách chung nhất,ta tạm định nghĩa portal nhƣ sau: Portal giao diện dựa web đƣợc tích hợp cá nhân hóa tới thông tin, ứng dụng dịch vụ hợp tác Portal nhƣ cổng tới trang web, cho phép khối lƣợng lớn thông tin sẵn có Internet ứng dụng đƣợc tích hợp, đƣợc tuỳ biến, đƣợc cá nhân hóa theo mục đích ngƣời sử dụng Portal điểm đích truy cập Internet mà qua ngƣời dùng khai thác dịch vụ cần thiết “không cần thiết phải đâu nữa” Protal giao diện web đơn,nó cung cấp truy cập cá nhân tới thơng tin ,các ứng dụng ,xử lí thƣơng mại nhiều Với công nghệ Portal, tổ chức giảm cƣờng độ, nhƣng lại tăng giá trị lao động đặc biệt làm tăng giá trị sản phẩm Các tổ chức tích hợp thông tin phạm vi môi trƣờng làm việc, ứng dụng dịch vụ sử dụng giao diện đơn lẻ Portal giao diện dựa Web, tích hợp thơng tin dịch vụ có Nó cho phép khai báo, cá biệt hóa thơng tin dịch vụ, cho phép quản Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử trị nội dung hỗ trợ chuẩn nội dung giao diện hiển thị Nó cung cấp cho ngƣời dùng điểm truy cập cá nhân, bảo mật tƣơng tác với nhiều loại thông tin, liệu dịch rộng rãi đa dạng lúc nơi nhờ sử dụng thiết bị truy cập Web Hình ảnh portal 1.1.2.So sánh portal với website thông thƣờng a.Bảng so sánh portal với website thông thƣờng Portal Website thông thường + Portal hỗ trợ khả đăng nhập Một website thông thƣờng lần tới tất tài nguyên đƣợc liên đƣợc khả đăng nhập lần kết với Portal Nghĩa là, ngƣời dùng cần lần đăng nhập vào sử dụng tất ứng dụng đƣợc tích hợp Portal mà ngƣời dùng có quyền + Portal hỗ trợ khả cá nhân hóa Thƣờng khơng hỗ trợ, có mức Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử theo ngƣời sử dụng 10 độ nhỏ, đặc điểm Đây khả quan bật trọng Portal, giúp phân biệt với website thơng thƣờng Portal cá nhân hóa nội dung hiển thị, thơng thƣờng lựa chọn cách tự động dựa quy tắc tác nghiệp, chẳng hạn nhƣ vai trò ngƣời sử dụng tổ chức Ví dụ ngƣời mua hàng đăng nhập vào hệ thống, Portal danh sách sản phẩm Hoặc cần quan tâm đến lĩnh vực khảo cổ Portal cung cấp thơng tin bảng danh sách đồ cổ + Khả tùy biến Đây khả tiêu biểu Một vài Website có nhƣng dừng lại Portal mức độ dựng sẵn, ngƣời dùng có Ví dụ giao diện Portal có mục thể lựa chọn vài giao diện có, thơng tin thời tiết, bỏ mà khơng tự thay đổi mục phần thông tin cách tùy ý khơng quan tâm đến Hoặc thay đổi cách hiển thị Portal Ví dụ nhƣ thay hiển thị font chữ màu xác định thay chữ màu đỏ, hay tự thay đổi giao diện Portal mặc định chức A đƣợc đặt sau chức B, Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử Bảng 3.20 Thông tin lượt truy cập học sinh (luotID) Số TT Tên trường Mô tả MAHS Mã học sinh HOCSINH_ID Chỉ số học sinh Bảng 3.21.Thông tin giáo viên (HOSOGV) Số Tên trường TT Mô tả MA_GV Mã giáo viên GV_ID Chỉ số giáo viên HO_TEN Họ tên giáo viên NGAY_SINH Ngày sinh NOI_SINH Nơi sinh DIA_CHI Địa nhà riêng MA_TRUONG_CT Mã trƣờng giảng dạy MA_TRUONG_DT Mã trƣờng nơi đào tạo Ma_TOC Mã dân tộc 10 GIOI_TINH Giới tính 11 NAM_CT Năm bắt đầu vào biên chế thức 12 DH_TD Danh hiệu thi đua 13 HS_LUONG Hệ số lƣợng 14 MA_MON Giảng dạy môn (mã môn) 15 CHUC_VU Chức vụ đảm trách 16 VUNG_MIEN Vùng miền 17 KT_KL Khen thƣởng, kỷ luật trình giảng dạy 18 TD_CM Trình độ chuyên môn 19 Ghi_CHU Ghi 3.3.Xây dựng chƣơng trình 3.3.1.Các modul đƣợc xây dựng 58 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử 59 Chƣơng trình phục vụ tìm kiếm xử lý thơng tin giáo dục hệ thống thông tin giáo dục đƣợc chia làm module sau : 1) Module cài đặt Sở Giáo dục Đào tạo : Module đƣợc cài đặt vào trang web Sở Giáo dục Đào tạo bao gồm chức sau : + Cập nhật danh sách trƣờng + Cập nhật danh sách học sinh từ trƣờng + Cập nhật danh sách giáo viên từ trƣờng + Cập nhật thông tin liên quan quản lý từ trƣờng 2) Module cài đặt Bộ Giáo dục Đào tạo, đƣợc thiết kế giao diện web bao gồm chức sau : + Trang chủ: Đƣa thông tin hoạt động ngành Giáo dục Đào tạo + Tìm kiếm: Tìm kiếm thông tin học sinh, giáo viên + Thông tin quản lý : - Cập nhật tự động số liệu thống kê từ Sở Giáo dục Đào tạo - Thông tin chi tiết giáo viên Sở Giáo dục Đào tạo - Thông tin chi tiết học sinh, trƣờng, lớp Sở Giáo dục Đào tạo - Lập báo cáo: lập báo cáo ngành Giáo dục Đào tạo + Thảo luận : - Thảo luận chuyên môn giáo viên môn (định kỳ) - Thảo luận quản lý lãnh đạo (họp trực tuyến) + Lịch làm việc : Bộ Sở Giáo dục Đào tạo + Thƣ viện điện tử: giảng, sách giáo khoa, thời khoá biểu, tranh ảnh đồ dùng dạy học sách tham khảo, E-learning + Văn đạo : Các văn hƣớng dẫn đạo ngành Giáo dục Bộ Giáo dục Đào tạo + Hỗ trợ trực tuyến : Các hỗ trợ công nghệ, giải đáp thắc mắc tổ chức hoạt động ngành + Liên hệ Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử 3.3.2 Giao diện cổng thông tin Giáo dục a) Giao diện trang chủ cổng thông tin giáo dục Giao diện trang chủ Cổng thông tin giáo dục b) Giao diện trang tìm kiếm học sinh theo tên 60 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử Giao diện trang tìm kiếm học sinh c) Giao diện trang kết tìm kiếm học sinh theo tên Giao diện trang tìm kiếm học sinh 61 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử d) Giao diện trang thông tin chi tiết học sinh Giao diện trang thông tin chi tiết học sinh e) Giao diện trang tìm kiếm nâng cao: 62 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử 63 Giao diện trang tìm kiếm học sinh nâng cao f) Giao diện trang thông tin giáo viên Sở Giáo dục Đào tạo phạm vi nƣớc Giao diện trang khai thác thông tin giáo viên Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử 64 g) Giao diện trang thông tin chi tiết giáo viên Sở Giáo dục Đào tạo thành phố Hà Nội Giao diện trang thông tin tổng hợp giáo viên sở Giáo dục Đào tạo thành phố Hà Nội Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử h) Giao diện trang thông tin trƣờng, lớp Sở GD&ĐT Giao diện trang thông tin chi tiết học sinh, trường, lớp j) Giao diện lựa chọn thông tin để lập báo cáo Giao diện trang lựa chọn thông tin để lập báo cáo 65 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử k) Giao diện báo cáo thông tin đƣợc chọn Giao diện trang thông tin báo cáo 66 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử 67 KẾT LUẬN Với phát triển mạnh mẽ CNTT, điều kiện tiếp cận với thông tin thông qua mạng Internet trở nên dễ dàng với ngƣời sử dụng Việc xây dựng hệ thống thông tin cho ngành phục vụ nhu cầu quản lý điều hành hoạt động khai thác liệu trở nên cấp thiết thực hết Kỹ thuật tiến tiến để xây dựng hệ thống thơng tin Portal - Cổng thông tin điện tử Luận văn sâu vào nghiên cứu số vấn đề khai thác tìm kiếm liệu thông qua công thông tin điện tử Kết chủ yếu luận văn bao gồm : Tổng quan công nghệ Portal, bƣớc phát triển Website Công nghệ cho phép ngƣời sử dụng khai thác liệu dịch vụ cần thiết "không cần phải đâu nữa" Nghiên cứu số giải thuật tìm kiếm liệu thực cổng thông tin điện tử Các kỹ thuật liên quan đến tận dụng lực tính toán hệ thống CSDL phân tán Nghiên cứu thiết kế tổ chức liệu cổng thông tin điện tử ngành giáo dục Việc tổ chức liệu đƣợc trọng cho cấp sở cấp Sở Giáo dục Đào tạo Các ứng dụng xây dựng đáp ứng đƣợc yêu cầu lớn việc tìm kiếm, thống kê thông tin, hỗ trợ việc lập báo cáo hoạt động ngành Giáo dục Đào tạo Là sở để tăng cƣờng công tác đạo hoạt động Giáo dục từ Bộ Giáo dục Đào tạo Sở Giáo dục Đào tạo đƣợc nhanh chóng, kịp thời; góp phần bƣớc nâng cao chất lƣợng Giáo dục Đào tạo Việt Nam; thúc đẩy tốc độ hội nhập nƣớc ta với kinh tế giới đẩy nhanh nghiệp cơng nghiệp hố, đại hố đất nƣớc Góp phần vào cơng xây dựng Chính phủ điện tử nƣớc nhà Để cổng thông tin giáo dục thực nơi cung cấp thông tin ngành Giáo dục Đào tạo, góp phần vào việc cải cách thủ tục hành chính; cơng cụ để đổi mới, tăng cƣờng công tác quản lý Giáo dục Đào tạo, đề tài cần đƣợc tiếp tục phát triển theo hƣớng nhƣ sau : Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử 68 Tiếp tục hồn thiện module đƣợc xây dựng Tiếp tục phát triển thêm dịch vụ cổng thông tin, làm phong phú nội dung thông tin cổng thông tin giáo dục Đề nghị với Bộ Giáo dục Đào tạo cho phép triển khai xây dựng Cổng thông tin giáo dục Tiến hành kết nối Cổng thông tin giáo dục Bộ Giáo dục Đào tạo với Sở Giáo dục Đào tạo nƣớc Kết nối Cổng thông tin giáo dục đến máy chủ trƣờng đại học, cao đẳng phạm vi nƣớc Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử 69 TÀI LIỆU THAM KHẢO TiÕng viÖt Ban điều hành đề án 112 (2004), Giáo trình thiết kế quản trị web, tổng quan Portal Bộ Giáo dục Đào tạo (2004), Sổ tay h-ớng dẫn nghiệp vụ thống kê Giáo dục Đào tạo Lê Hữu Đạt, Nguyễn Ph-ơng Lan (2001), ASP 3.0 ASP.NET, NXB Lao ®éng – X· héi HTTP://www.manguon.com/Ebooks/Details/EBO 034226135812, Ngôn ngữ ASP Jeffrey D Ullman (1998), Nguyên lý hệ CSDL sở tri thức, NXB Thống kê Nguyễn ph-ơng Lan (2003), XML tảng ứng dụng, NXB Lao động Xà hội Tr-ơng Công Lục, Mai Hoàng Quý (2000), Thiết kế xuất trang web với HTML, NXB Thống kê Nhóm tác giả ĐHBK Hà Nội (2002), Th-ơng mại điện tử víi VB, SQL 2000, MTS ASP Database, NXB TrỴ Đỗ Trung Tuấn (2004), Cơ sở liệu, NXB Giáo dục 10 Nguyễn Bá T-ờng (2001), Cơ sở liệu lý thuyÕt vµ thùc hµnh, NXB Khoa häc kü thuËt Hµ Néi TiÕng Anh 11 Al Mc Kinnon and Mc Kinnon (2003), XML 12 Arvind Arasu, Junghoo Cho, Hector Garcia-Molina, Andreas Paepcke, Sriram Raghavan (2000) Searching the web Technical Report, Computer Science Department, Stanford University 13 HTTP://www.Redbooks.ibm.com (2003), Architecting Portal Solution 14 HTTP://www.Microsoft.com/uk/windowsserversystem/portals/whatis/default.mspx, What is a Portal 15 HTTP://www.vninformatics.com/portal/news/database, SQL Server 16 HTTP://www.nottingham.ac.uk/portals2002, Conference the Portal 17 HTTP://www.fair-portal.hull.ac.uk/, The Portal project 18 HTTP://www.xml.com, XML 19 HTTP://www.Doublincore.com 20 HTTP://www.Redbooks.ibm.com (2004), XML for DB2 Information Integration Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử 70 Mục lục trang L ỜI CẢM ƠN………………………………………………………………………….1 PHẦN MỞ ĐẦU……………………………………………………………………… Chƣơng 1:TỔNG QUAN VỀ CỔNG THÔNG TIN ĐIỆN TỬ PORTAL……………4 1.1.Khái niệm portal 1.1.1 Định nghĩa portal 1.1.2.So sánh portal với website thông thƣờng .4 1.2.Các đặc trƣng portal 1.2.1.Chức tìm kiếm 16 1.2.2.Dịch vụ thƣ mục 16 1.2.3.Ứng dụng trực tuyến 17 1.2.4.Cá nhân hoá dịch vụ .17 1.2.5.Cộng đồng ảo .17 1.2.6.Một điểm tích hợp thơng tin 18 1.2.7.Kênh thông tin… 18 1.3.Phân loại portal .19 1.3.1.Consumer portal 19 1.3.2.Vertical portal 19 1.3.3.Horizontal portal 20 1.3.4.Enterprise porta 20 1.3.5.B2B portal 20 1.3.6.G2B portal 20 1.4.Các kỹ thuật hệ thống portal 20 1.4.1.Portlet 20 1.4.2.Phân loại portlet dich vụ portlet 21 1.5.Khung làm việc hệ thống Portal .22 1.6.Các bƣớc xây dựng portal .23 1.6.1.Lập kế hoạch .23 1.6.2.Thiết kế tổng thể 24 1.6.3.Phát triển Portal 24 Chƣơng 2:TỔ CHỨC DỮ LIỆU, CƠ CHẾ CHUYỂN ĐỔI DỮ LIỆU TRONG CỔNG THÔNG TIN PHỤC VỤ CHO VIỆC KHAI THÁC VÀ TÌM KIẾM DỮ LIỆU…………… 26 2.1.Tổ chức liệu hệ thống thông tin 26 2.1.1.Một số mơ hình tổ chức CSDL hệ thống Client/server .26 2.1.2.Mơ hình tổ chức liệu portal……………………………29 2.2.Cơ chế chuyển đổi thông tin Server portal…………….30 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thơng tin điện tử 71 2.3.Các mơ hình khai thác tìm kiếm thơng tin hệ thống thơng tin………………………………………………………………………….33 2.3.1.Mơ hình xử lý Master/Slave……………………………………35 2.3.2.Mơ hình xử lý Client/Server……………………………………35 2.3.3.Mơ hình xử lý Server/Server……………………………………37 2.4.Một số thuật tốn tìm kiếm liệu hệ thống thông tin phân tán 37 2.4.1.Cấu trúc may tìm kiếm…………………………… 38 2.4.2.Phƣơng pháp biểu diễn liệu máy tìm kiếm……………39 2.4.3.Hoạt động máy tìm kiếm Google………………………… 39 2.5.Mơ hình tìm kiếm thơng tin CSDL phân tán…………………….40 Chƣơng 3:ÁP DỤNG NGHIÊN CỨU CHƢƠNG TRÌNH GIẢI QUYẾT BÀI TỐN KHAI THÁC VÀ TÌM KIẾM THÔNG TIN TRONG CỔNG THÔNG TIN NGÀNH GIÁO DỤC VÀ ĐÀO TẠO…………………………………………………………….41 3.1.u cầu khai thác ,tìm kiếm thơng tin từ cấp ngành giáo dục đào tạo ……………………………………………………………… .41 3.1.1.Yêu cầu khai thác thông tin từ sở………………………… 42 3.1.2.u cầu tìm kiếm ,khai thác thơng tin quản lý từ quan chủ quản…………………………………………………………………………46 3.1.3.Mô hình hố u cầu ……………………………………… 47 3.2.Tối ƣu hố hệ thống sở liệu………………………………… 47 3.2.1.Tại giáo dục đào tạo……………………………………….57 3.2.2.Tại sở giáo dục đào tạo…………………………………… 57 3.3.Xây dựng chƣơng trình………………………………………………….59 3.3.1.Các modul đƣợc xây dựng…………………………………….65 3.3.2.Giao diện cổng thông tin giáo dục……………………………… 67 KẾT LUẬN……………………………………………………………………………… 68 TÀI LIỆU THAM KHẢO……………………………………………………… 69 Nghiên cứu số vấn đề khai thác tìm kiếm liệu cổng thông tin điện tử 72