phương pháp cho bài toán tóm tắt văn bản tiếng việt

... dựng hệ thống Tóm tắt văn tiếng Việt sử dụng kỹ thuật lượng giá, thống kê thuộc văn Ví dụ: Một hai câu văn bản, đoạn văn có khả cao để tạo tóm tắt Một vài câu gần cuối văn bẳn, đoạn văn có giá trị ... xử lý văn chiếm vai trò quan trọng Khai thác văn Nó bước mở đầu cho hướng giải toán Các bước cho q trình tiền xử lý văn tiếng Việt trình bày 3.1 Phương pháp tách thuật ngữ tiếng Việt Từ văn ban ... Xây dựng hệ thống Tóm tắt văn tiếng Việt sử dụng kỹ thuật lượng giá, thống kê CHƯƠNG II CÁC PHƯƠNG ÁN GIẢI QUYẾT BÀI TỐN TĨM TẮT VĂN BẢN Trước vào phân tích cụ thể số phương pháp thực TTVB, cần...

Ngày tải lên: 29/08/2015, 06:03

... lý tóm tắt đa văn tốn tóm tắt phức tạp Chính phương pháp tóm tắt văn đời phương pháp tóm tắt cho văn đơn Các phương pháp nhằm giải toán tóm tắt văn đơn tập trung vào hai loại tóm tắt là: tóm tắt ... nhiều loại tóm tắt khác nhiên hai loại tóm tắt tóm tắt đơn văn tóm tắt đa văn quan tâm lớn nhà nghiên cứu tóm tắt tự động 2.2 Khái qt tóm tắt văn bản: Bài tốn tóm tắt văn đơn giống tốn tóm tắt khác, ... tf*idf phương pháp chủ yếu Một vấn đề thách thức quan tâm năm gần tốn tóm tắt văn tự động đưa kết tóm tắt cho tập văn liên quan với mặt nội dung hay gọi tóm tắt văn tiếng Việt Bài tốn tóm tắt văn tiếng...

Ngày tải lên: 14/11/2015, 10:33

... PHƢƠNG PHÁP TÓM TẮT VĂN BẢN TIẾNG VIỆT DỰA TRÊN NAIVE BAYES 18 2.1 Một số phương pháp tóm tắt văn điển hình 18 2.1.1 Phương pháp tóm tắt văn định 18 2.1.2 Phương pháp tóm tắt văn ... VÀ TÓM TẮT VĂN BẢN TIẾNG VIỆT Trong chương này, luận văn trình bày khái niệm tổng quan tóm tắt văn tóm tắt văn tiếng Việt, kỹ thuật tóm tắt văn dựa máy học như: Naïve Bayes, Cây định, phương pháp ... tuyến tóm tắt - Xây dựng tập liệu huấn luyện gồm 200 văn tiếng Việt Luận văn đƣợc chia thành chƣơng với nội dung sau: Chương 1: Tổng quan tóm tắt tóm tắt văn tiếng Việt Chương 2: Phương pháp tóm tắt...

Ngày tải lên: 01/02/2016, 15:53

... loại tóm tắt tóm tắt đơn văn tóm tắt đa văn quan tâm lớn nhà nghiên cứu tóm tắt tự động 1.4 Tóm tắt đơn văn Bài tốn tóm tắt văn đơn giống toán tóm tắt khác, q trình tóm tắt tự động với đầu vào văn ... đa văn tốn tóm tắt phức tạp Đó nguyên nhân lý giải cho việc phương pháp tóm tắt văn đời phương pháp tóm tắt đơn văn Các phương pháp nhằm giải tốn tóm tắt văn đơn tập trung vào hai loại tóm tắt ... tốn tóm tắt văn tự động, tóm tắt văn sử dụng phương pháp trích rút  Chương 2: Tóm tắt văn sử dụng Text Rank, trình bày chi tiết phương pháp tóm tắt văn Text Rank Đồng thời áp dụng phương pháp...

Ngày tải lên: 06/04/2016, 19:02

... VÀ TÓM TẮT VĂN BẢN TIẾNG VIỆT Trong chương này, luận văn trình bày khái niệm tổng quan tóm tắt văn tóm tắt văn tiếng Việt, kỹ thuật tóm tắt văn dựa máy học như: Naïve Bayes, Cây định, phương pháp ... tuyến tóm tắt - Xây dựng tập liệu huấn luyện gồm 200 văn tiếng Việt Luận văn chia thành chương với nội dung sau: Chương 1: Tổng quan tóm tắt tóm tắt văn tiếng Việt Chương 2: Phương pháp tóm tắt văn ... tóm tắt văn tiếng Việt quan tâm nghiên cứu phát triển nhóm xử lý ngơn ngữ tự nhiên tiếng Việt nước (JAIST) Luận văn đưa đặc điểm ngôn ngữ tiếng Việt, số phương pháp tóm tắt văn đánh giá tóm tắt...

Ngày tải lên: 12/05/2016, 10:38

... đáp hệ thống Nhập trực tiếp: 1.Chọn văn cần tóm tắt Hiện thị nội dung văn Chọn tỉ lệ tóm tắt Cập nhật tỉ lệ tóm tắt 5.Chọn tóm tắt Thực tóm tắt hiển thị văn tóm tắt Giảng viên hướng dẫn: TS Nguyễn ... cho câu - Lặp tóm tắt tự động đạt tính tương đương với tóm tắt thủ cơng: Tính điểm cho câu để tạo tóm tắt cho văn ngữ liệu dựa vào đặc trưng hình thái Từ so sánh tóm tắt tạo tự động với tóm tắt ... chung, tóm tăt hướng truy vấn + Theo miền liệu: Tóm tắt miền liệu, tóm tắt thể loại, tóm tắt độc lập + Theo mức độ chi tiết: Tóm tắt tổng quan, tóm tắt tập trung kiện + Theo số lượng: Tóm tắt đơn văn...

Ngày tải lên: 13/08/2016, 20:40

... tơi tiến hành phân lớp tóm tắt báo khoa học tiếng Việt lĩnh vực CNTT Chiều dài trung bình cho tóm tắt báo khoa học khoảng 300 từ Chúng sử dụng khoảng 2/3 số lượng mẫu cho việc huấn luyện phần ... loại Đối với tiếng Anh, có từ điển Wordnet [7] lưu trữ tập từ đồng nghĩa quan hệ ngữ nghĩa ( nghĩa rộng, nghĩa hẹp) Đối với tiếng Việt, bước đầu xây dựng hệ thống tựa Wordnet cho tiếng Việt Hình ... LỚP VĂN BẢN Sau có tập luật phân lớp, thơng điệp rút trích tạo vector đặc trưng Qui trình phân lớp thực thơng qua thuật toán [2],[8] 1.1.1.1.1.1.1 Thuật toán – Tạo phân loại văn Ứng với văn mới,...

Ngày tải lên: 22/07/2014, 10:22

... tự từ câu  Với 13 Áp dụng độ tương đồng câu cho tóm tắt văn tiếng Việt Tóm tắt văn tiếng Việt dựa vào câu truy vấn người dùng 14 Quy trình tóm tắt văn  Q trình tiền xử lý  Lọc nội dung chính, ... câu vào xử lý ngôn ngữ tiếng Việt  Thử nghiệm thành công độ đo tốn tóm tắt trang web tiếng Việt máy tìm kiếm  Cải thiện kết tính toán độ đo việc xây dựng corpus tiếng Việt (kiểu WordNet) đầy ... câu  Áp dụng phương pháp nêu nêu để tính độ tương đồng câu với câu truy vấn với Wordnet tiếng Việt thô Từ thực nghiệm cho thấy = 0,85 đưa kết độ tương đồng câu cao  Q trình tóm tắt văn   Xếp...

Ngày tải lên: 18/10/2014, 21:30

Ngày tải lên: 18/03/2015, 12:02

... Các phương pháp tóm tắt văn khác chủ yếu cách đánh giá xác định ĐVVB quan trọng Phần lớn phương pháp tóm tắt văn cổ điển dựa kết thống kê phương pháp dựa tần suất xuất từ (TFxIPF), phương pháp ... nội dung văn Tùy theo phương pháp, từ ngữ quan trọng từ ngữ xuất nhiều lần văn bản, từ ngữ xuất tiêu đề văn bản, từ ngữ xuất câu đầu, câu cuối văn bản, Tuy nhiên, kết tóm tắt phương pháp dựa ... nghiên cứu gần Tóm tắt văn bản, người ta thường sử dụng phương pháp dựa ngữ nghĩa để nâng cao độ xác Song, phạm vi tóm tắt văn tiếng Việt, đến đa phần nghiên cứu sử dụng cải tiến phương pháp dựa thống...

Ngày tải lên: 03/07/2015, 15:41

... hầu hết văn bản, thực tế từ lại không mang nhiều ý nghĩa tần suất xuất Một phương pháp khác đời khắc phục nhược điểm phương pháp TF, phương pháp IDF b Phương pháp dựa nghịch đảo tần suất văn (IDF ... đề tìm k văn gần Có nhiều cách đánh giá dựa độ tương tự văn bản, có cách ý nhiều nhất: Gán nhãn văn gần Theo phương pháp này, văn xét gán nhán cho chủ đề văn có độ tương tự cao Giải pháp tương ... thuật toán phân lớp văn Ở đây, em đề xuất hai thuật toán là: thuật toán định (Decision Tree) thuật toán k-NN Cả hai thuật toán cho kết tốt dùng để phân lớp văn So với thuật toán định, thuật toán...

Ngày tải lên: 30/12/2015, 18:35

... trọng văn cho tốn tóm tắt đơn văn tiếng Việt Qua đề xuất hai phương pháp tóm tắt văn tiếng Việt: là, phương pháp tóm tắt văn tiếng Việt dựa hệ số đặc trưng văn bản, hệ số xác định phương pháp ... nghiên cứu Luận án: - Các phương pháp tóm tắt văn giới - Các phương pháp đánh giá tóm tắt văn - Các phương pháp tóm tắt văn tiếng Việt - Các đặc trưng quan trọng văn tiếng Việt - Các giải thuật tối ... phương pháp xác định thơng qua q trình học văn tóm tắt mẫu phương pháp học máy Phương pháp nghiên cứu - Dựa phương pháp tóm tắt văn giới nước - Dựa phân tích hạn chế phương pháp tóm tắt văn tiếng...

Ngày tải lên: 20/07/2016, 01:22

... hầu hết văn bản, thực tế từ lại không mang nhiều ý nghĩa tần suất xuất Một phương pháp khác đời khắc phục nhược điểm phương pháp TF, phương pháp IDF b Phương pháp dựa nghịch đảo tần suất văn (IDF ... đề tìm k văn gần Có nhiều cách đánh giá dựa độ tương tự văn bản, có cách ý nhiều nhất: Gán nhãn văn gần Theo phương pháp này, văn xét gán nhán cho chủ đề văn có độ tương tự cao Giải pháp tương ... thuật toán phân lớp văn Ở đây, em đề xuất hai thuật toán là: thuật toán định (Decision Tree) thuật toán k-NN Cả hai thuật toán cho kết tốt dùng để phân lớp văn So với thuật toán định, thuật toán...

Ngày tải lên: 02/08/2016, 22:05

... Chương 2: Bài tốn tóm tắt đơn văn phương pháp tóm tắt văn Tiếng Việt Trình bày q trình tóm tắt văn bản, hướng tiếp cận cho việc giải tốn tóm tắt đơn văn Chương 3: Xây dựng hệ thống tóm tắt trích ... kết cho độ đo f2 cao 2.4 Kết luận Ở chương đưa số nghiên cứu liên quan đến tóm tắt văn phương pháp tóm tắt văn tiếng Việt Trong chương luận văn trình bày cụ thể phương pháp tóm tắt văn tiếng Việt ... cầu Tóm tắt đơn văn Tóm tắt đa văn bản: Khi xét đầu vào hệ thống TTVB, ta chia thành hai dạng tóm tắt đơn văn (SingleDocument) tóm tắt đa văn (Multi-Document) Tóm tắt đơn văn từ văn nguồn cho...

Ngày tải lên: 26/07/2017, 21:05

... PHƢƠNG PHÁP PHÂN CỤM PHÂN CẤP VÀ PHƢƠNG PHÁP SOM 2.1 Phương pháp phân cụm phân cấp Phương pháp phân cụm phân cấp phương pháp phân cụm, đối tượng liệu gom vào cụm có cấu trúc dạng Trong phƣơng pháp ... giá trị điều kiện dừng kết thúc thuật toán điều kiện dừng 2.4.2 Thuật toán HSOM toán hỗ trợ kinh doanh Thuật toán HSOM thuật toán phù hợp cho việc giải toán phân loại khách hàng triển vọng đánh ... phạm vi luận văn này, việc kết hợp hai phƣơng pháp SOM Hierachical Clustering để tạo bƣớc việc phân cụm liệu đƣợc gọi tắt thuật toán HSOM Nội dung thuật toán HSOM nhƣ sau: Input: cho tập vector...

Ngày tải lên: 14/02/2015, 18:53

... (P1) đạt ~90% dùng phương pháp gán nhãn dựa văn phong kết hợp với phương pháp xác suất (P2) Bảng cho ta kết gán nhãn cho văn bản, văn phong khác 2.4.2 Các nghiên cứu dựa phương pháp học máy Nghiên ... hiểu phương pháp gán nhãn từ loại tiếng Anh cho thấy hướng tiếp cận dựa theo phương pháp học máy cho kết tốt phương pháp cơng bố Nội dung khóa luận tập trung so sánh ba phương pháp học máy cho ... DỤNG CHO BÀI TỐN GÁN NHÃN TỪ LOẠI TIẾNG VIỆT Việc khảo sát phương pháp học máy áp dụng thành công cho nhiều ngôn ngữ (chủ yếu khảo sát phương pháp sử dụng cho ngôn ngữ tiêu biểu tiếng Anh, tiếng...

Ngày tải lên: 27/06/2014, 23:20

... (P1) đạt ~90% dùng phương pháp gán nhãn dựa văn phong kết hợp với phương pháp xác suất (P2) Bảng cho ta kết gán nhãn cho văn bản, văn phong khác 2.4.2 Các nghiên cứu dựa phương pháp học máy Nghiên ... hiểu phương pháp gán nhãn từ loại tiếng Anh cho thấy hướng tiếp cận dựa theo phương pháp học máy cho kết tốt phương pháp cơng bố Nội dung khóa luận tập trung so sánh ba phương pháp học máy cho ... DỤNG CHO BÀI TỐN GÁN NHÃN TỪ LOẠI TIẾNG VIỆT Việc khảo sát phương pháp học máy áp dụng thành công cho nhiều ngôn ngữ (chủ yếu khảo sát phương pháp sử dụng cho ngôn ngữ tiêu biểu tiếng Anh, tiếng...

Ngày tải lên: 23/11/2012, 15:04

... PHƢƠNG PHÁP PHÂN CỤM PHÂN CẤP VÀ PHƢƠNG PHÁP SOM 2.1 Phương pháp phân cụm phân cấp Phương pháp phân cụm phân cấp phương pháp phân cụm, đối tượng liệu gom vào cụm có cấu trúc dạng Trong phƣơng pháp ... giá trị điều kiện dừng kết thúc thuật toán điều kiện dừng 2.4.2 Thuật toán HSOM toán hỗ trợ kinh doanh Thuật toán HSOM thuật toán phù hợp cho việc giải toán phân loại khách hàng triển vọng đánh ... phạm vi luận văn này, việc kết hợp hai phƣơng pháp SOM Hierachical Clustering để tạo bƣớc việc phân cụm liệu đƣợc gọi tắt thuật toán HSOM Nội dung thuật toán HSOM nhƣ sau: Input: cho tập vector...

Ngày tải lên: 17/02/2014, 08:46

... thuật toán xác định ngưỡng chặn ε cho sau lần lặp khơng có tâm cụm dịch chuyển khoảng cách nhỏ ε thuật toán dừng III Áp dụng giải thuật K-Means cho văn Để áp dụng giải thuật K-Means cho văn bản, ... cần phương pháp tính khoảng cách văn dựa nội dung chúng Một phương pháp tiếp cận phổ biến cho việc chuyển hóa văn thành điểm khơng gian tọa độ Giả sử ta có tập hợp N gồm tất từ (term) tất văn ... cần thiết phải làm giảm số lượng đặc trưng Có nhiều phương pháp chọn đặc trưng hiệu Ở đây, sử dụng phương pháp lượng tin tương hỗ Phương pháp sử dụng độ đo lượng tin tương hỗ từ lớp tài liệu...

Ngày tải lên: 09/04/2015, 22:42