配置中文支持 方案二
配置局域網(wǎng)主機ssh免密碼互通
安裝zsh
安裝pyenv
掛載數(shù)據(jù)盤
安裝FFmpeg:
sudo add-apt-repository ppa:kirillshkrogalev/ffmpeg-next
sudo apt update
sudo apt install ffmpeg
安裝cv2:
pip install opencv-python opencv-contrib-python
sudo apt install libgl1-mesa-glx
源碼安裝node.js
hdfs添加新的節(jié)點:
復(fù)制hk57中的 /opt/java
和 /opt/hadoop
文件夾到新節(jié)點服務(wù)器的/opt/
目錄下
修改新節(jié)點的/opt/hadoop/etc/hadoop/hdfs-site.xml
文件的dfs.namenode.name.dir
(namenode存放的路徑)和 dfs.datanode.data.dir
(datanode存放的路徑)的值
vim /etc/profile
# 配置java和hadoop環(huán)境變量
export JAVA_HOME=/opt/java
export HADOOP_HOME=/opt/hadoop
export PATH=$JAVA_HOME/bin:$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
source /etc/profile
修改集群所有主機的hosts文件 vim /etc/hosts
1xx.xx.xx.56 cxxai
1xx.xx.xx.57 run-xxer
1xx.xx.xx.59 hk59
修改master主機的/opt/hadoop/etc/hadoop/workers
文件
添加新的節(jié)點的主機名
重啟hdfs服務(wù):
進入master主機的/opt/hadoop/sbin
目錄,執(zhí)行./stop-all.sh
停止服務(wù)
start-all.sh
啟動服務(wù)
start-balancer.sh
各節(jié)點負載均衡(無需重啟hdfs服務(wù))