CDH的配置

配置步驟

有node1水由、node2、node3三臺(tái)機(jī)器赛蔫,node1是server砂客、agent,node2呵恢、node3是agent

一鞠值、網(wǎng)絡(luò)環(huán)境的配置

1、新建虛擬機(jī)

2渗钉、配置網(wǎng)絡(luò)彤恶,能ping通外網(wǎng)

3、配置ip和主機(jī)名的映射

二晌姚、配置主節(jié)點(diǎn)到從節(jié)點(diǎn)的免密登錄

1粤剧、ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

2、cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

三挥唠、關(guān)閉防火墻

1抵恋、service iptables stop

2、chkconfig iptables off(永久關(guān)閉防火墻)

四宝磨、SELINUX關(guān)閉

1弧关、執(zhí)行命令

setenforce 0

2、vi /etc/selinux/config (SELINUX=disabled)

五唤锉、安裝JDK配置環(huán)境變量

1世囊、export JAVA_HOME=/usr/java/jdkXXX

2、export PATH=JAVA_HOME/bin:PATH

3窿祥、export CLASSPATH=.:JAVA_HOMdE/lib/dt.jar:JAVA_HOME/lib/tools.jar

六株憾、設(shè)置時(shí)間同步,分別執(zhí)行以下命令

1、cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime

2嗤瞎、ntpdate us.pool.ntp.org

3墙歪、echo "0 */8 * * * /usr/sbin/ntpdate us.pool.ntp.org" >> /var/spool/cron/root

七、在server的節(jié)點(diǎn)上(node1)安裝配置mysql

詳見hive的配置

八贝奇、下載第三方依賴包

yum install -y chkconfig python bind-utils psmisc libxslt zlib sqlite cyrus-sasl-plain cyrus-sasl-gssapi fuse fuse-libs redhat-lsb

九虹菲、Cloudera Manager 安裝

1、安裝Cloudera Manager Server掉瞳、Agent (3個(gè)節(jié)點(diǎn)都安裝)

1毕源、創(chuàng)建文件架

mkdir /opt/cloudera-manager

2、解壓Cloudera Manager的安裝包

tar xvzf cloudera-manager*.tar.gz -C /opt/cloudera-manager

2陕习、創(chuàng)建用戶cloudera-scm (3個(gè)節(jié)點(diǎn)都創(chuàng)建)

3霎褐、配置CM Agent

1、修改文件/opt/cloudera-manager/cm-5.4.3/etc/cloudera-scm-agent/config.ini中 server_host以及server_port

2衡查、3個(gè)節(jié)點(diǎn)的都設(shè)成server_host=node1,server_port=默認(rèn)的

4瘩欺、配置CM Server數(shù)據(jù)庫

1、拷貝mysql jar文件到目錄 /usr/share/java/

2拌牲、注意jar包名稱要修改為mysql-connector-java.jar

3、在server所在的節(jié)點(diǎn)執(zhí)行下列命令

1歌粥、grant all on *.* to 'temp'@'%' identified by 'temp' with grant option; 
2塌忽、cd /opt/cloudera-manager/cm-5.4.3/share/cmf/schema/
3、./scm_prepare_database.sh mysql temp -h node1 -utemp -ptemp --scm-host node1 scm scm scm 
格式:數(shù)據(jù)庫類型失驶、數(shù)據(jù)庫土居、數(shù)據(jù)庫服務(wù)器、用戶名嬉探、密碼擦耀、cm server服務(wù)器

5、創(chuàng)建Parcel目錄

1涩堤、 Server節(jié)點(diǎn)

– mkdir -p /opt/cloudera/parcel-repo 
– chown cloudera-scm:cloudera-scm /opt/cloudera/parcel-repo 

2眷蜓、 Agent節(jié)點(diǎn)

– mkdir -p /opt/cloudera/parcels 
– chown cloudera-scm:cloudera-scm /opt/cloudera/parcels

6、制作CDH本地源

下載好文件CDH-5.4.0-1.cdh5.4.0.p0.27-el6.parcel以及manifest.json和CDH-5.4.0-1.cdh5.4.0.p0.27-el6.parcel.sha胎围,將這三個(gè)文件放
到server節(jié)點(diǎn)的 /opt/cloudera/parcel-repo下吁系。

7、啟動(dòng)CM Server白魂、Agent

? cd /opt/cloudera-manager/cm-5.4.3/etc/init.d/ 
? ./cloudera-scm-server start – Sever首次啟動(dòng)會(huì)自動(dòng)創(chuàng)建表以及數(shù)據(jù)汽纤,不要立即關(guān)閉或重啟,否則需要?jiǎng)h除所有表及數(shù)據(jù)重新安裝 
? ./cloudera-scm-agent start

8福荸、測試

? 訪問:http://server所在的節(jié)點(diǎn)的ip:7180蕴坪, 
? 用戶名、密碼:admin 
? 若可以訪問敬锐,則CM安裝成功
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末背传,一起剝皮案震驚了整個(gè)濱河市捆等,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌续室,老刑警劉巖栋烤,帶你破解...
    沈念sama閱讀 212,029評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異挺狰,居然都是意外死亡明郭,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,395評論 3 385
  • 文/潘曉璐 我一進(jìn)店門丰泊,熙熙樓的掌柜王于貴愁眉苦臉地迎上來薯定,“玉大人,你說我怎么就攤上這事瞳购』爸叮” “怎么了?”我有些...
    開封第一講書人閱讀 157,570評論 0 348
  • 文/不壞的土叔 我叫張陵学赛,是天一觀的道長年堆。 經(jīng)常有香客問我,道長盏浇,這世上最難降的妖魔是什么变丧? 我笑而不...
    開封第一講書人閱讀 56,535評論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮绢掰,結(jié)果婚禮上痒蓬,老公的妹妹穿的比我還像新娘。我一直安慰自己滴劲,他們只是感情好攻晒,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,650評論 6 386
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著班挖,像睡著了一般鲁捏。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上聪姿,一...
    開封第一講書人閱讀 49,850評論 1 290
  • 那天碴萧,我揣著相機(jī)與錄音,去河邊找鬼末购。 笑死破喻,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的盟榴。 我是一名探鬼主播曹质,決...
    沈念sama閱讀 39,006評論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了羽德?” 一聲冷哼從身側(cè)響起几莽,我...
    開封第一講書人閱讀 37,747評論 0 268
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎宅静,沒想到半個(gè)月后章蚣,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,207評論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡姨夹,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,536評論 2 327
  • 正文 我和宋清朗相戀三年纤垂,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片磷账。...
    茶點(diǎn)故事閱讀 38,683評論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡峭沦,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出逃糟,到底是詐尸還是另有隱情吼鱼,我是刑警寧澤,帶...
    沈念sama閱讀 34,342評論 4 330
  • 正文 年R本政府宣布绰咽,位于F島的核電站菇肃,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏剃诅。R本人自食惡果不足惜巷送,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,964評論 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望矛辕。 院中可真熱鬧,春花似錦付魔、人聲如沸聊品。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,772評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽翻屈。三九已至,卻和暖如春妻坝,著一層夾襖步出監(jiān)牢的瞬間伸眶,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,004評論 1 266
  • 我被黑心中介騙來泰國打工刽宪, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留厘贼,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,401評論 2 360
  • 正文 我出身青樓圣拄,卻偏偏與公主長得像嘴秸,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,566評論 2 349

推薦閱讀更多精彩內(nèi)容