Oracle Loader for Hadoop

Một phần của tài liệu Ứng dụng cơ sở dữ liệu song song trong xử lý dữ liệu cuộc gọi (Trang 26 - 27)

Oracle Loader cho Hadoop là một công cụ tải hiệu suất cao cho phép di chuyển nhanh dữ liệu từ Hadoop đến cơ sở dữ liệu Oracle. Oracle Loader cho Hadoop đưa ra tiện lợi sử dụng Hadoop để tính toán sắp xếp các tài nguyên, phân vùng, và chuyển đổi dữ liệu trên Hadoop về loại dữ liệu Oracle trước khi nạp vào cơ sở dữ liệu. Chuyển dữ liệu về định dạng của Oracle làm giảm thiểu sử dụng CPU trong quá trình tải của cơ sở dữ liệu, tối giản tác động trên các ứng dụng cơ sở dữ liệu. Công cụ làm giảm bớt sự cạnh tranh đối với các nguồn tài nguyên, một vấn đề phổ biến khi phải xử lý khối lượng dữ liệu lớn. Tính năng này làm cho kết nối giữa Oracle và Hadoop đặc biệt hữu ích đối với các tải liên tục và thường xuyên.

Oracle Loader cho Hadoop sử dụng một kỹ thuật lấy mẫu sáng tạo thông minh phân phối dữ liệu qua các nút Hadoop trong khi tải dữ liệu song song. Điều này giảm thiểu những ảnh hưởng của lệch dữ liệu, một mối quan tâm phổ biến trong các ứng dụng song song. Oracle Loader cho Hadoop tải vào bảng với bất kỳ cơ sở dữ liệu nén: nén Bảng cơ bản, nén nâng cao theo hàng, và nén pha trọn giữa các cột.

Oracle Loader cho Hadoop có thể tải một loạt các định dạng đầu vào. Nguyên bản nó có thể tải dữ liệu từ các tập tin văn bản, bảng Hive, log file (phân tích và tải), Oracle NoSQL Database, và nhiều hơn nữa. Thông qua Hive nó cũng có thể được tải từ các định dạng đầu vào (ví dụ như: Parquet, các tập tin JSON) và các nguồn đầu vào (ví dụ như: HBase) có khả năng truy xuất to Hive. Ngoài ra, Oracle Loader cho Hadoop có thể đọc các định dạng dữ liệu độc quyền thông qua định dạng đầu vào hiện thực tùy chỉnh được cung cấp bởi người sử dụng.

Chức năng:

Offload data type conversion to Hadoop Parallel load

Load balancing Security

Input formats

Partition-aware load

Một phần của tài liệu Ứng dụng cơ sở dữ liệu song song trong xử lý dữ liệu cuộc gọi (Trang 26 - 27)

Tải bản đầy đủ (DOCX)

(40 trang)
w