3 44 Thử nghiệm mơ hình được cải tiến giĩng hàng từ sử dụng các kỹ thuật
351 Mơ hình đề xuất kết hợp dịch ngược và chia nhỏ từ
Mơ hình kết hợp được thể hiện trong Hình 3 7 Trong đĩ, ngữ liệu huấn luyện ban đầu sẽ được dịch ngược ở phía ngơn ngữ đích, sau đĩ áp dụng các kỹ thuật lựa chọn thích nghi đã đề cập trong Chương 2 để lựa chọn câu phía đích, kết hợp với các câu phía nguồn tương ứng để tạo ra các cặp câu song ngữ giả lập Các cặp câu song ngữ giả lập này kết hợp với kho ngữ liệu ban đầu để tạo thành kho ngữ liệu huấn luyện đầy đủ Các câu phía đích của kho ngữ liệu đầy đủ được sử dụng để huấn luyện mơ hình ngơn ngữ phía đích Khi đưa kho ngữ liệu đầy đủ vào huấn luyện hệ SMT, các câu phía đích được chia nhỏ bằng các phương pháp chia nhỏ đã trình bày trong Chương 3 Các câu đã được chia nhỏ phía đích kết hợp với các câu phía nguồn để tạo thành kho ngữ liệu huấn luyện đã chia nhỏ trong khi khi thực hiện huấn luyện giĩng hàng từ trên kho ngữ liệu huấn luyện đã chia nhỏ, kỹ thuật cải tiến phương pháp giĩng hàng từ được áp dụng để thu được bảng giĩng hàng từ đã được chuẩn hĩa Bảng giĩng hàng từ này được sử dụng để tiếp tục huấn luyện hệ SMT
Kho song ngữ huấn luyện
Chuẩn hĩa dữ liệu
Dịch ngược các câu phía đích Lựa chọn thích nghi các câu giả lập Kho song ngữ giả lập Kho song ngữ đầy đủ Chia nhỏ từ (subword) phía tiếng Anh
Trích rút cụm từ Giĩng hàng từ (tạo bảng giĩng hàng A)
Chuẩn hĩa bảng giĩng hàng (Tạo bảng giĩng hàng A*)
Huấn luyện mơ hình ngơn ngữ
Sinh mơ hình dịch Tinh chỉnh tham số
Kho song ngữ kiểm chứng
Hệ thống
dịch máy thống kê Đánh giá hệ thống
Kho song ngữ đánh giá
Hình 3 7 Mơ hình kết hợp dịch ngược và chia nhỏ từ