Lưu trữ dữ liệu lớn với HBase - núm vú

HBase là một cơ sở dữ liệu phân tán, phi quan hệ (cột) sử dụng HDFS như một kho lưu trữ lâu dài cho các dự án dữ liệu lớn. Nó được mô phỏng theo Google BigTable và có khả năng lưu trữ các bảng rất lớn (hàng tỷ cột / hàng) bởi vì nó được xếp lớp trên các nhóm phần cứng hàng hóa Hadoop.

HBase cung cấp khả năng đọc / ghi ngẫu nhiên, thời gian thực tới dữ liệu lớn. HBase có cấu hình cao, cung cấp rất nhiều tính linh hoạt để giải quyết số lượng lớn dữ liệu hiệu quả. Bây giờ hãy xem cách HBase có thể giúp giải quyết những thách thức lớn về dữ liệu của bạn.

Mỗi giá trị ô bao gồm một thuộc tính "Phiên bản", không chỉ là dấu thời gian xác định duy nhất một ô. Phiên bản theo dõi các thay đổi trong ô và làm cho nó có thể lấy bất kỳ phiên bản của nội dung khi nó trở nên cần thiết. HBase lưu trữ dữ liệu trong các ô theo thứ tự giảm dần (sử dụng dấu thời gian), do đó, một lần đọc sẽ luôn luôn tìm các giá trị gần đây nhất.

Các cột trong HBase thuộc về họ của cột. Tên họ của cột được sử dụng làm tiền tố để xác định các thành viên trong gia đình của họ. Ví dụ, hoa quả: quả táo và trái cây: chuối là thành viên của gia đình họ quả. Việc triển khai HBase được điều chỉnh ở cấp độ họ hàng của cột, do đó điều quan trọng là phải nhớ đến cách bạn sẽ truy cập dữ liệu và mức độ mong đợi của các cột.

Các hàng trong các bảng HBase cũng có một chìa khóa liên kết với chúng. Cấu trúc của khóa rất linh hoạt. Nó có thể là một giá trị tính toán, một chuỗi, hoặc thậm chí một cấu trúc dữ liệu khác. Khóa được sử dụng để điều khiển truy cập vào các ô trong hàng và chúng được lưu trữ theo thứ tự từ giá trị thấp đến giá trị cao.

Tất cả các tính năng này tạo thành lược đồ. Lược đồ được định nghĩa và tạo ra trước khi bất kỳ dữ liệu nào có thể được lưu trữ. Mặc dù vậy, các bảng có thể được thay đổi và các gia đình cột mới có thể được thêm vào sau khi cơ sở dữ liệu được lên và chạy. Khả năng mở rộng này cực kỳ hữu ích khi đối phó với dữ liệu lớn bởi vì bạn không phải lúc nào cũng biết về sự đa dạng của luồng dữ liệu.