... 525” 1.4 Đồngthamchiếudanhtừ (Np-anaphora) Cũng tượng đồngthamchiếu nói chung, đồngthamchiếudanhtừ trường hợp tượng đồngthamchiếuvăntiếngViệtTrongđồngthamchiếudanh từ, từ thay ... TRONG XỬ LÝ ĐỒNGTHAMCHIẾUDANHTỪTRONGVĂN BẢN TIẾNGVIỆT Các chương trước đề cập đến khái niệm liên quan đến toán đồngthamchiếudanhtừvăntiếngViệt Các cách tiếp cận để xử lý đồngtham ... SVM xử lý đồngthamchiếudanhtừvăntiếngViệt CHƯƠNG TỔNG QUAN VỀ ĐỒNGTHAMCHIẾUDANHTỪ 1.1 Tổng quan tình hình nghiên cứu đồngthamchiếu - Ngoài nước: Vấn đề xử lý đồngthamchiếu đề cập...
... tách tiếng (âm tiết) từ Cùng với ngôn ngữ tiếng Trung, tiếng Hàn ,tiếng Nhật, phân tách từtiếngViệt công việc không đơn giản Tách từTiếngViệt Đối với tiếng Anh ngôn ngữ không đơn lập khác từ ... source Vntokenizer II Các phương pháp tách từVấn đề tách từTiếngViệt 1.1 So sánh tiếng Anh tiếngViệt Những đặc điểm tiếng anh tiếng Việt: TiếngViệtTiếng Anh - Là ngôn ngữ đơn lập (isolate) ... thức ý nghĩa từ độc lập với cú pháp Từ cấu trúc từtiếng Từ bao gồm từ đơn từ phức (bao gồm từ láy từ ghép) Phương pháp tách tách từtiếngViệt dựa thống kê từ Internet thuật giải di truyền –...
... tách từtiếngViệt Vấn đề tách từtiếngViệt Các hướng tiếp cận kĩ thuật tách từtiếngViệt Một số phương pháp tách từtiếngViệt Kết luận Vấn đề tách từtiếngViệt Bài toán tách từtiếng ... tiếngViệt toán khó Vì đặc tính chung tiếng Việt- ngôn ngữ đơn lâp • Từ dạng nguyên thể , hình thức ý nghĩa từ độc lập với cú pháp • Từ cấu trúc từtiếng • Từ bao gồm từ đơn từ phức (bao gồm từ ... trúc từtiếng • Từ bao gồm từ đơn từ phức (bao gồm từ láy từ ghép) Vấn đề tách từtiếngViệt Điểm khác tiếng Anh tiếngViệtTiếngViệtTiếng Anh - Là ngôn ngữ đơn lập (isolate) hay...
... cần dùng đến từ điển hay tập ngữ liệu học Trang II Các phương pháp tách từVấn đề tách từtiếngViệt a So sánh tiếng Anh tiếngViệt Những đặc điểm tiếng anh tiếng Việt: TiếngViệtTiếng Anh - ... Từ cấu trúc từtiếng • Từ bao gồm từ đơn từ phức (bao gồm từ láy từ ghép) Phương pháp tách tách từtiếngViệt dựa thống kê từ Internet hướng tiếp cận tách từ với mục đích phân loại văn mà không ... tách tiếng (âm tiết) từ Cùng với ngôn ngữ tiếng Trung, tiếng Hàn, tiếng Nhật, phân tách từtiếngViệt công việc không đơn giản Tách từtiếngViệt Đối với tiếng Anh ngôn ngữ không đơn lập khác “từ...
... dấu ngoặc Từtiếng nước Chữ viết tắt Đề xuất nguyên tắc tách từ cho tiếngViệt Nguyên tắc tách từ cho tiếngViệt xét loại đơn vị từ vựng sau đây: Từ đơn Từ ghép đẳng lập Từ ghép phụ Từ ghép phụ ... v.v tư cách từ ghép phụ B (đồng, đất, nhôm, gỗ, đá) danhtừ chất liệu TrongtiếngViệt có từ có nhiều tiếng (bao gồm từ vay mượn Việt hoá, có hình thức phiên âm gần giống với tiếng Việt) , xét ... v.v b Từ đơn hư từ: - Những từtiếng ý nghĩa từ vựng độc lập, chức định danh - Không có khả độc lập làm thành phần câu - Dùng để biểu thị quan hệ ngữ pháp thực từ - Gồm phụ từ, liên từ, giới từ: ...
... trưng văntiếng Việt, phát biểu toán đồngthamchiếuvăntiếngViệt mô hình trích chọn quan hệ đồngthamchiếuvăntiếngViệt dựa phương pháp máy vector hỗ trợ SVM 3.1 Đặc trưng văntiếngViệtVăn ... toán đồngthamchiếuvăn bản: Đầu vào: Văn T Đầu ra: Các cụm từdanh sách cụm từđồngthamchiếu tương ứng 16 Xử lý: Bước 1: Tìm danh sách P cụm từvăn Bước 2: Với cụm từ J danh sách P, xét danh ... từ sở bao gồm: danhtừ riêng, cụm danhtừ túy, đại từTrongdanhtừ riêng đóng vai trò quan trọng mối quan hệ đồngthamchiếu Nó tảng để xác định cụm đồngthamchiếuvăn a Danhtừ riêng Gồm tên...
... trưng văntiếng Việt, phát biểu toán đồngthamchiếuvăntiếngViệt mô hình trích chọn quan hệ đồngthamchiếuvăntiếngViệt dựa phương pháp máy vector hỗ trợ SVM 3.1 Đặc trưng văntiếngViệtVăn ... toán đồngthamchiếuvăn bản: Đầu vào: Văn T Đầu ra: Các cụm từdanh sách cụm từđồngthamchiếu tương ứng 16 Xử lý: Bước 1: Tìm danh sách P cụm từvăn Bước 2: Với cụm từ J danh sách P, xét danh ... từ sở bao gồm: danhtừ riêng, cụm danhtừ túy, đại từTrongdanhtừ riêng đóng vai trò quan trọng mối quan hệ đồngthamchiếu Nó tảng để xác định cụm đồngthamchiếuvăn a Danhtừ riêng Gồm tên...
... training khác 37 Danh mục bảng biểu Bảng Sự khác biệt đặc điểm từtiếngViệtTiếng Anh Bảng Bảng tham số huấn luyện 14 Bảng Bảng tham số lệnh crf_test 14 Bảng Cấu hình máy ... pháp - Từ cấu trúc từtiếng hay gọi âm tiết - Từ bao gồm từ đơn (từ tiếng) từ phức (n - tiếng với n < 5), bao gồm từ láy từ ghép Trong đó, định nghĩa từtiếng Anh sau: Từ nhóm ký tự có nghĩa, ... tập văndanh sách tên người Đầu vào Tập vănTiếngViệt Đầu Danh sách tên người Hình mô hình hóa toán Đầu vào văntiếngViệt Hệ thống có nhiệm vụ trích chọn thực thể tên người từvăntiếng Việt...
... việc tách từ sử dụng để thực số công việc xử lí văn cao phân loại văn bản, tóm tắt văn bản, xác định ngữ nghĩa văn Tách từ xác định từ khóa văntiếngViệt Cơ sở lí thuyết 2.1 Phương pháp Tần suất ... mười Tách từ xác định từ khóa văntiếngViệt Các bước xây dựng chương trình: Sử dụng công cụ tách từ Lê Hồng Phương để tách từ Loại bỏ từ tầm thường (stop word) tập từ tách (từ tầm thường từ xuất ... định từ có trọng số TFIPF cao chọn làm từ khóa Tách từ xác định từ khóa văntiếngViệt Giới thiệu chương trình Chương trình KeywordDetermining sử dụng để xác định từ khóa tính trọng số từvăn tiếng...
... thực tế Tách từ xác định từ khóa phần quan trọng trình xử lí văn Kết việc tách từ sử dụng để thực số công việc xử lí văn cao phân loại văn bản, tóm tắt văn bản, xác định ngữ nghĩa văn 2 Giới ... Hồng Phương để tách từ (vnTokenizer) Loại bỏ từ tầm thường (stop word) tập từ tách (từ tầm thường từ xuất nhiều không mang ngữ nghĩa văn bản) Loại bỏ từ trùng lặp sau tách từ 3 Các bước tiến ... định từ khóa tính trọng số từvăntiếngViệt (mã hóa bảng mã Unicode UTF-8) Chương trình có sử dụng công cụ tách từ Lê Hồng Phương (vnTokenizer) Các bước tiến hành Tìm hiểu công cụ tách từ...
... liên kết văn Có thể gọi từ nối nhiều tên gọi khác nhau, hƣ từ, phụ từ, quan hệ từ nhƣng chủ yếu liên từ Vai trò từ nối dùng để nối mệnh đề câu ghép sử dụng để liên kết câu với vănĐồng thời từ nối ... "Hệ thống liên kết văntiếng Việt" (1985), đặc biệt tác giả Diệp Quang Ban với hai cuốn: "Văn liên kết tiếng Việt" (1998), "Giao tiếp, Văn bản, Mạch lạc, Liên kết, Đoạn văn" (2002) Ngoài có ... dạng, khái quát đƣợc gần nhƣ toàn từ nối xuất loại văn khác Trong khuôn khổ luận văn này, khảo sát phạm trù trên, từ cụm từ nối theo phạm trù tƣơng phản 2.2 Danh sách từ nối theo phạm trù tƣơng phản...
... với tiếng Việt, chất từ loại thể khả kết hợp từ, tức phân bố vò trí từ bối cảnh ngữ pháp Nói chung, từ loại tiếngViệt thuộc ba tập hợp bản: thực từ (danh từ, động từ, tính từ v.v…), hư từ (liên ... biện pháp liên kết từ vựng văntiếngViệttiếng Anh với mục đích tìm hiểu ý nghóa liên kết văn bản, trình bày nội dung phép liên kết tìm tương đồng dò biệt chúng văntiếngViệttiếng Anh Qua luận ... qui chiếu ngôi, qui chiếu đònh qui chiếu so sánh TiếngViệt có phương tiện qui chiếu dùng phép qui chiếu là: từ ngôi, từ đònh từ so sánh 47 2.1.1 Qui chiếu Các từ mà người tạo văn sử dụng liên...
... Ngọc Thêm (1991), Thử bàntừ việc phân loại từtiếngViệt cách nhìn từvăn bản, Ngôn ngữ (2), tr.10-14 32 Trần Ngọc Thêm (2006, tái bản) , Hệ thống liên kết văntiếng Việt, NXB Giáo dục, Hà Nội ... cách tác giả TÀI LIỆU THAM KHẢO PHỤ LỤC TÀI LIỆU THAM KHẢO Diệp Quang Ban (2005), Ngữ pháp tiếng Việt, NXB Giáo dục, Hà Nội Diệp Quang Ban (2009, tái bản) , Văn liên kết tiếng Việt, NXB Giáo dục, ... dạy ngữ văn nhà trường, Trường Đại học Sư phạm Hà Nội 38 Phạm Văn Tình (1988), Hiện tượng tách câu văntiếng Việt, TiếngViệt ngôn ngữ Đông Nam Á, NXB Khoa học xã hội, Hà Nội 39 Phạm Văn Tình...
... biết loại thực thể tiếngViệt đời góp phần quan trọng xử lý tiếngViệt hiểu văntiếngViệt Tuy nhận biết loại thực thể toán trích chọn thông tin xử lý ngôn ngữ tự nhiên tiếngViệt lại toán tương ... với toán tiếng Anh số nguyên nhân sau: Thiếu liệu huấn luyện nguồn tài nguyên tra cứu WordNet tiếng Anh Thiếu thông tin ngữ pháp (POS) thông tin cụm từ cụm danh từ, cụm độngtừ cho tiếngViệt thông ... 43 Phụ lục: Output hệ thống nhận diện loại thực thể tiếngViệt 45 Tài liệu tham khảo 48 iv Bảng từviết tắt Từ cụm từ Conditional Random Field Viết tắt CRF Mô hình Markov...
... thông tin từvăntiếngViệt gặp nhiều khó khăn văntiếng Anh Trong luận văn, tiến hành nghiên cứu xây dựng hệ thống tựđộng trích rút thực thể tên từvăntiếngViệt Internet 25 KẾT LUẬN Luận văn hệ ... cần phải cắt tỉa chuẩn hóa để thu tên xác Cách viếttiếngViệtvăntiếngViệt Internet đa dạng phong phú Vì vậy, thông tin viếtvăntiếngViệt Internet không thật theo chuẩn – chuẩn ngữ pháp, ... pháp, tách cụm danh từ) nên khó áp dụng cho tài liệu tiếngViệt ngôn ngữ tiếng Việt, kĩ thuật xử lý ngôn ngữ, tài nguyên ngôn ngữ học Input: Tập PrefixPattern mẫu, văn phân đoạn từ Bước 1: Lấy...
... thực thể văntiếngViệt Nguyễn Bá Đạt Chương Nhận dạng thực thể văntiếngViệt Cùng với phát triển lĩnh vực xử lý ngôn ngữ tự nhiên cho tiếng Việt, toán nhận dạng thực thể văntiếngViệt hình ... văntiếngViệt GATE, ta sâu tìm hiểu phận hệ thống 4.3.1 Bộ tách từ gán nhãn từ loại Một nét đặc trưng khác biệt tiếngViệt so với tiếng Anh vấn đề tách từ (word segmentation) Trongtiếng Anh từ ... liệu tham khảo 55 Phụ lục A Annotation Guideline 58 Phụ lục B Bảng nhãn từ loại tiếngViệt 63 iv Nhận dạng thực thể vănTiếngViệt Nguyễn Bá Đạt Danh...
... thị trấn sau tiếp nhận hồ sơ trả kết vào ngày làm việc tuần từ thứ hai đến sáng thứ bảy (buổi sáng từ 07 30 đến 11 00, buổi chiềutừ 13 30 đến 16 30), trừ ngày lễ + Tại thành phố Vũng Tàu: Ủy ... mẫu tờ khai: Không - Kết thực thủ tục hành chính: Chữ ký cá nhân giấy tờ, văn chứng thực - Lệ phí chứng thực: 10.00 0đồng/ trường hợp - Yêu cầu, điều kiện để thực thủ tục hành chính: Không - Căn ... thủ tục hành chính: + Nghị định số 79/2007/NĐ-CP ngày 18 tháng năm 2007 Chính phủ cấp từ sổ gốc, chứng thực từ chứng thực chữ ký; + Thông tư số 03/2008/TT-BTP ngày 25 tháng năm 2008 Bộ Tư pháp...
... thủ tục hành chính: điểm cá nhân giấy tờ, văn chứng thực - Lệ phí chứng thực: 10.00 0đồng/ trường hợp - Yêu cầu, điều kiện để thực thủ tục hành chính: + Trong trường hợp người yêu cầu chứng thực ... thủ tục hành chính: + Nghị định số 79/2007/NĐ-CP ngày 18 tháng năm 2007 Chính phủ cấp từ sổ gốc, chứng thực từ chứng thực chữ ký; + Thông tư số 03/2008/TT-BTP ngày 25 tháng năm 2008 Bộ Tư pháp ... Long xã Bình Ba - Cách thức thực hiện: Trực tiếp quan hành nhà nước - Thành phần hồ sơ: + Giấy tờ, văn mà điểm vào - Số lượng hồ sơ: 01 (bộ) - Thời gian giải quyết: Việc tiếp nhận yêu cầu chứng thực...
... thực thể văntiếngViệt Nguyễn Bá Đạt Chương Nhận dạng thực thể văntiếngViệt Cùng với phát triển lĩnh vực xử lý ngôn ngữ tự nhiên cho tiếng Việt, toán nhận dạng thực thể văntiếngViệt hình ... văntiếngViệt GATE, ta sâu tìm hiểu phận hệ thống 4.3.1 Bộ tách từ gán nhãn từ loại Một nét đặc trưng khác biệt tiếngViệt so với tiếng Anh vấn đề tách từ (word segmentation) Trongtiếng Anh từ ... liệu tham khảo 55 Phụ lục A Annotation Guideline 58 Phụ lục B Bảng nhãn từ loại tiếngViệt 63 iv Nhận dạng thực thể vănTiếngViệt Nguyễn Bá Đạt Danh...