hadoop擴充磁盤操作記錄

發布時間：2020-08-01 18:10:01 來源：網絡閱讀：3478 作者：majun9129 欄目：大數據

記錄cloudera擴充磁盤

1、4臺主機，每臺主機增加一塊2TB的硬盤

2、首先簡單說明步驟

A、分區，掛載（掛載目錄（名稱，路徑）要一致）

B、在掛載的分區內，建立對應的文件夾，并授權

C、在cdh的hdfs配置界面，配置新增hdfs的目錄，然后部署客戶端配置，滾動重啟

3、操作步驟

分區(LVM邏輯卷)：

# pvcreate /dev/sdc

# vgcreage Vgroup03 /dev/sdc

# lvcreate –n cdh01 –L +1.8T Vgroup03

# mkfs.ext4 /dev/mapper/Vgroup03-cdh01

掛載(一定要按照這個順序輸入)：

# mkdir /cdh01

#mount /dev/mapper/Vgroup01-cdh01 /cdh01

開機自動掛載

#vim /etc/fstab

插入 /dev/mapper/Vgroup03-cdh01 /cdh01 ext4 defaults 0 1

保存，退出

建文件夾：

# mkdir /cdh01/dfs

#mdkir /cdh01/dfs/dn

授權：

# chown -R hdfs:hadoop /cdh01/dfs/

----------4臺主機做同樣的操作，分區掛載目錄要一致-----------

登陸cdh，從集群中，選擇HDFS

在中間的部分選擇配置選項

在左側的菜單欄中，選擇DataNode Default Group

在已經有的目錄后面的“+”號點新增一個目錄，然后輸入我們已經掛載好的目錄，保存。

選擇實例選項

選中DataNode的實例，選擇滾動重啟

重啟完畢后，到HDFS集群的界面去看下，應該已經成功了

Datanode group“高級”，在右邊的datanode卷選擇策略中，選擇“可用空間”，這樣，后面的兩個屬性（“10G字節”和“0.75”）就會發揮作用，用于平衡各個卷中空間使用。

向AI問一下細節

91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本