cuốn sách gpt4 ai đã làm

hadoop - 1 cụm Hadoop và Hbase lớn so với 1 cụm Hadoop + 1 cụm Hbase

In lại Tác giả: Hồ Xil Thời gian cập nhật: 2023-11-01 15:15:41 28 4
mua khóa gpt4 Nike

Hadoop sẽ thực hiện nhiều công việc, đọc dữ liệu từ Hbase và ghi dữ liệu vào cơ sở dữ liệu. Giả sử tôi có 100 nút, có hai cách để xây dựng cụm Hadoop/Hbase của mình:

  1. Cụm 100 nút hadoop&hbase(1 Hadoop & Hbase lớn)

  2. Cơ sở dữ liệu riêng biệt (Hbase), thì chúng ta có hai cụm:Cụm Hadoop 60 nút và cụm Hbase 40 nút(1 Hadoop + 1 Hbase)

Lựa chọn nào tốt hơn? Tại sao?

Cảm ơn.

câu trả lời hay nhất

我会说Tùy chọn 2 tốt hơn.
Lý do của tôi - Mặc dù yêu cầu của bạn chủ yếu là chạy một số lượng lớn công việc mapreduce để đọc và ghi dữ liệu từ hbase, nhưng có rất nhiều công việc hậu trường của hbase để tối ưu hóa việc đọc và ghi các công việc bạn gửi. Hmaster phải được cân bằng tải liên tục trừ khi các phím vùng của bạn được cân bằng hoàn hảo. Các điểm nóng trên bảng có thể ở đó. Đối với Máy chủ khu vực, sẽ có các đợt nén lớn, điều này đôi khi sẽ xảy ra nếu kỹ năng jvm của bạn không tốt Dừng lại thế giới Thu gom rác thải. Tất cả các vùng có thể bắt đầu phân chia cùng một lúc. Máy chủ khu vực của bạn có thể ngừng hoạt động, v.v.
Đối số là - điều chỉnh hbase cần có thời gian. Nếu bạn chỉ có một nút dành riêng cho hbase thì vấn đề trên có nhiều khả năng xảy ra hơn. Sẽ tốt hơn nếu có nhiều nút, do đó, tất cả áp lực về hiệu suất không chỉ áp dụng cho một nút. Nhân tiện, điểm ghi điểm của hbase là bản chất phân tán vốn có của nó mà bạn không muốn giết chết.
Nói chung, bạn có thể thử nghiệm tỷ lệ nút của hadoop và hbase - có thể là 70:30 hoặc có thể là 80:20. Số dặm có thể thay đổi tùy theo yêu cầu ứng dụng của bạn.

Về hadoop - 1 cụm Hadoop và Hbase lớn so với 1 cụm Hadoop + 1 cụm Hbase, chúng tôi đã tìm thấy một câu hỏi tương tự trên Stack Overflow: https://stackoverflow.com/questions/23164464/

28 4 0
Chứng chỉ ICP Bắc Kinh số 000000
Hợp tác quảng cáo: 1813099741@qq.com 6ren.com
Xem sitemap của VNExpress