套接字 UDP ???????
當(dāng)hadoop 啟動(dòng)失敗 去安裝目錄下查看日志
例如:當(dāng)namenode節(jié)點(diǎn) 沒有起來時(shí)
hadoop 存在臨時(shí)目錄下 重啟就沒有了
解決方案
停掉所有的進(jìn)程 格式化硬盤
使用web訪問hadoop的 hdfs
netstat -ano | more
任務(wù)提交指定隊(duì)列 默認(rèn)是default
Ambari
scp 遠(yuǎn)程文件的拷貝(兩個(gè)主機(jī)之間)
跟ssh配合使用
此處 -R 用的是 -r
安全遠(yuǎn)程文件復(fù)制程序 基于ssh
符號(hào)連接編程轉(zhuǎn)換成文件
rsync腳本 在集群上分發(fā)文件
遠(yuǎn)程同步工具 主要用于備份和鏡像
支持鏈接饲宿、設(shè)備等
速度快谎替、避免復(fù)制相同內(nèi)容的文件數(shù)據(jù)
不支持兩個(gè)遠(yuǎn)程主機(jī)間的復(fù)制
rsync -rvl ~/hello.txt root@s101:/home/ubuntu/
編寫xcall腳本 在所有主機(jī)上執(zhí)行相同的命令
在/usr/local/bin/xcall 目錄下
今天學(xué)習(xí)遇到的問題
1荠耽、jar 包導(dǎo)進(jìn)hadoop集群 報(bào)出類找不到異常
原因是 jdk 的版本問題引發(fā)
解決過程
1鸡岗、找到我們的java項(xiàng)目 如下進(jìn)行修改jdk的版本
2、克隆客戶機(jī)
問題1
克隆機(jī)跟原來的客戶機(jī)屬于同一網(wǎng)段 因?yàn)閕p和主機(jī)名相同 引發(fā)沖突
對(duì)克隆機(jī)進(jìn)行ip阀圾、 主機(jī)名修改
修改過程中由于重新啟動(dòng)網(wǎng)絡(luò)失敗
chkconfig NetworkManager off
chkconfig network on
service NetworkManager stop
service network start
則清空 /etc/udev/rules.d/70-persistent-net.rules 文件的內(nèi)容
然后重啟系統(tǒng)鲤看、重啟網(wǎng)絡(luò)
reboot
service network restart
然后發(fā)現(xiàn)hadoop啟動(dòng)不了