cuốn sách gpt4 ai đã làm

hadoop - Đặt hadoop.tmp.dir trong /tmp

In lại Tác giả: Hồ Xil Thời gian cập nhật: 2023-11-01 15:10:59 29 4
mua khóa gpt4 Nike

Tôi đã thấy trong tài liệu của Hadoop 1 hadoop.tmp.dir Giá trị mặc định là /tmp/hadoop-${user.name} Nhưng nếu mình thiết lập như thế này thì khi khởi động lại máy có bị mất dữ liệu không?

Ý tôi là, có lẽ tôi không cần phải ở trong một nơi thực sự /tmp nhưng tôi cần phải đặt nó vào /home/myuser/tmp/hadoop-${user.name ?

Cảm ơn trước!

Thêm thông tin:

Tôi đã thiết lập nó trong /tmp/hadoop-hduser nhưng do sự cố về điện, máy tính của tôi bị hỏng và hôm nay tôi nhận được thông báo này:Gọi từ java.net.UnknownHostException: hduser-machine: hduser-machine tới localhost:54310 Ngoại lệ kết nối không thành công: java.net.ConnectException: Kết nối bị từ chối để biết thêm chi tiết, xem: http://wiki.apache .org/hadoop/ Kết nối bị từ chối Tôi đã chạy lệnh này nút tên hadoop Tôi đã nhận được điều này:LỖI namenode.NameNode: Không thể khởi động nút tên.
org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Thư mục /tmp/hadoop-hduser/dfs/name ở trạng thái không nhất quán: thư mục lưu trữ không tồn tại hoặc không thể truy cập được.
Tôi nghĩ đó là do cấu hình/tmp ...

câu trả lời hay nhất

Theo mặc định, Hadoop được cấu hình để hoạt động tốt. Để đạt được điều này, tất cả các thư mục quan trọng (không tạm thời) đều trỏ đến ${hadoop.tmp.dir}, từ đó chỉ ra /tmp, do đó tồn tại trên tất cả các hệ thống Linux.

Vì vậy, bạn cũng cần điều chỉnh các đường dẫn quan trọng khác, xemhdfs-default.xml :

dfs.namenode.name.dir
dfs.datanode.data.dir
dfs.namenode.checkpoint.dir

Chúng là những lựa chọn khác nhau vì trong môi trường thực tế, việc phân phối dữ liệu tạm thời và không nhất thời trên các thiết bị lưu trữ vật lý khác nhau có thể khả thi. Nhưng nếu thiết lập nhỏ thì về mặt kỹ thuật là có, bạn có thể ${hadoop.tmp.dir} Chỉ vào một số vị trí cố định (không phải/tmp) và bỏ qua những gì tôi đã viết ở trên.

Về hadoop - cài đặt hadoop.tmp.dir trong/tmp, chúng tôi đã tìm thấy một câu hỏi tương tự trên Stack Overflow: https://stackoverflow.com/questions/40997637/

29 4 0
Chứng chỉ ICP Bắc Kinh số 000000
Hợp tác quảng cáo: 1813099741@qq.com 6ren.com
Xem sitemap của VNExpress