002.課程環(huán)境搭建-centos 6.4集群搭建

CentOS6.4安裝

1焕檬、使用課程提供的鏡像:CentOS-6.4-i386-minimal.iso跃赚。
2、創(chuàng)建虛擬機(jī):打開Virtual Box屯掖,點(diǎn)擊“新建”按鈕玄柏;輸入虛擬機(jī)名稱為sparkproject1,選擇操作系統(tǒng)為Linux贴铜,選擇版本為Red Hat粪摘;分配1024MB內(nèi)存瀑晒;后面所有選項(xiàng)全部用默認(rèn)的設(shè)置;注意徘意,在Virtual disk file location and size中苔悦,一定要自己選擇一個(gè)目錄來存放虛擬機(jī)文件;最后點(diǎn)擊“create”按鈕椎咧,開始創(chuàng)建虛擬機(jī)玖详。
3、設(shè)置網(wǎng)卡(橋接網(wǎng)卡):選擇創(chuàng)建好的虛擬機(jī)勤讽,點(diǎn)擊“設(shè)置”按鈕竹宋,在網(wǎng)絡(luò)一欄中,連接方式中地技,選擇“Bridged Adapter”,即橋接網(wǎng)卡秒拔。
4莫矗、安裝CentOS 6.4操作系統(tǒng):選擇創(chuàng)建好的虛擬機(jī),點(diǎn)擊“開始”按鈕砂缩;選擇安裝介質(zhì)(即本地的CentOS 6.4鏡像文件)作谚;選擇第一項(xiàng)開始安裝-Skip-歡迎界面Next-選擇默認(rèn)語言-Baisc Storage Devices-Yes, discard any data-主機(jī)名:sparkproject1-選擇時(shí)區(qū)-設(shè)置初始密碼為hadoop-Replace Existing Linux System-Write changes to disk-開始安裝。
5庵芭、安裝完以后妹懒,會(huì)提醒你要重啟一下,就是reboot双吆,reboot就可以了眨唬。

密碼設(shè)為hadoop
切出virtualbox的快捷鍵為 右ctrl

網(wǎng)絡(luò)配置

1、先臨時(shí)性設(shè)置虛擬機(jī)ip地址:ifconfig eth0 192.168.1.110好乐,在/etc/hosts文件中配置本地ip到host的映射
2匾竿、配置windows主機(jī)上的hosts文件:C:\Windows\System32\drivers\etc\hosts,192.168.1.110 sparkproject1
3蔚万、使用SecureCRT從windows上連接虛擬機(jī)
4岭妖、永久性配置CentOS網(wǎng)絡(luò)
vi /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
TYPE=Ethernet
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.1.110
NETMASK=255.255.255.0
GATEWAY=192.168.1.1
5、重啟網(wǎng)卡
service network restart

vi /etc/hosts
添加并保存 192.168.1.110 sparkproject1
ping sparkproject1

按ESC鍵 跳到命令模式反璃,然后:
:w 保存文件但不退出vi
:w file 將修改另外保存到file中昵慌,不退出vi
:w! 強(qiáng)制保存,不推出vi
:wq 保存文件并退出vi
:wq! 強(qiáng)制保存文件淮蜈,并退出vi
q: 不保存文件斋攀,退出vi
:q! 不保存文件,強(qiáng)制退出vi
:e! 放棄所有修改礁芦,從上次保存文件開始再編輯

關(guān)閉防火墻

service iptables stop
service ip6tables stop
service iptables status
service ip6tables status

chkconfig iptables off
chkconfig ip6tablesoff

vi /etc/selinux/config
SELINUX=disabled

在win7的控制面板中蜻韭,關(guān)閉windows的防火墻悼尾!如果不關(guān)閉防火墻的話,就怕肖方,可能win7和虛擬機(jī)直接無法ping通闺魏!

配置DNS服務(wù)器,替換repo文件俯画,配置yum

1析桥、配置DNS服務(wù)器
vi /etc/resolv.conf
nameserver 61.139.2.69

ping www.baidu.com

1、修改repo
將CentOS6-Base-163.repo上傳到CentOS中的/usr/local目錄下
cd /etc/yum.repos.d/
rm -rf *
mv 自己的repo文件移動(dòng)到/etc/yum.repos.d/目錄中:cp /usr/local/CentOS6-Base-163.repo .
修改repo文件艰垂,把所有g(shù)pgcheck屬性修改為0

2泡仗、配置yum
yum clean all
yum makecache
yum install telnet

解決無法訪問外網(wǎng)的問題

即使更換了ip地址,重啟網(wǎng)卡猜憎,可能還是聯(lián)不通網(wǎng)娩怎。那么可以先將IPADDR、NETMASK胰柑、GATEWAY給刪除截亦,將BOOTPROTO改成dhcp。然后用service network restart重啟網(wǎng)卡柬讨。此時(shí)linux會(huì)自動(dòng)給分配一個(gè)ip地址崩瓤,用ifconfig查看分配的ip地址。然后再次按照之前說的踩官,配置網(wǎng)卡却桶,將ip改成自動(dòng)分配的ip地址。最后再重啟一次網(wǎng)卡蔗牡。

安裝JDK

1颖系、將jdk-7u60-linux-i586.rpm上傳到虛擬機(jī)中
2、安裝JDK:rpm -ivh jdk-7u65-linux-i586.rpm
3辩越、配置jdk相關(guān)的環(huán)境變量
vi ~/.bashrc
export JAVA_HOME=/usr/java/latest
export PATH=PATH:JAVA_HOME/bin
source ~/.bashrc
4集晚、測試jdk安裝是否成功:java -version
5、rm -f /etc/udev/rules.d/70-persistent-net.rules

linux中 ~ 表示的是什么目錄区匣?

~ 表示代碼主目錄偷拔,也就是當(dāng)前登錄用戶的用戶目錄。
比如:我登錄用戶是chen
cd ~
~ 代表的就是 /home/chen/

這里的.bashrc應(yīng)為~/.bashrc

按照以上操作亏钩,再增加兩臺(tái)機(jī)器sparkproject2莲绰,sparkproject3

配置集群ssh免密碼登陸

1、在三臺(tái)機(jī)器的/etc/hosts文件中姑丑,都配置對三臺(tái)機(jī)器的ip-hostname的映射

2蛤签、首先在三臺(tái)機(jī)器上配置對本機(jī)的ssh免密碼登錄
生成本機(jī)的公鑰,過程中不斷敲回車即可栅哀,ssh-keygen命令默認(rèn)會(huì)將公鑰放在/root/.ssh目錄下
ssh-keygen -t rsa
將公鑰復(fù)制為authorized_keys文件震肮,此時(shí)使用ssh連接本機(jī)就不需要輸入密碼了
cd /root/.ssh
cp id_rsa.pub authorized_keys

3称龙、接著配置三臺(tái)機(jī)器互相之間的ssh免密碼登錄
使用ssh-copy-id -i spark命令將本機(jī)的公鑰拷貝到指定機(jī)器的authorized_keys文件中(方便好用)

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市戳晌,隨后出現(xiàn)的幾起案子鲫尊,更是在濱河造成了極大的恐慌,老刑警劉巖沦偎,帶你破解...
    沈念sama閱讀 211,376評(píng)論 6 491
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件疫向,死亡現(xiàn)場離奇詭異,居然都是意外死亡豪嚎,警方通過查閱死者的電腦和手機(jī)搔驼,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,126評(píng)論 2 385
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來侈询,“玉大人舌涨,你說我怎么就攤上這事∪幼郑” “怎么了泼菌?”我有些...
    開封第一講書人閱讀 156,966評(píng)論 0 347
  • 文/不壞的土叔 我叫張陵,是天一觀的道長啦租。 經(jīng)常有香客問我,道長荒揣,這世上最難降的妖魔是什么篷角? 我笑而不...
    開封第一講書人閱讀 56,432評(píng)論 1 283
  • 正文 為了忘掉前任,我火速辦了婚禮系任,結(jié)果婚禮上恳蹲,老公的妹妹穿的比我還像新娘。我一直安慰自己俩滥,他們只是感情好嘉蕾,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,519評(píng)論 6 385
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著霜旧,像睡著了一般错忱。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上挂据,一...
    開封第一講書人閱讀 49,792評(píng)論 1 290
  • 那天以清,我揣著相機(jī)與錄音,去河邊找鬼崎逃。 笑死掷倔,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的个绍。 我是一名探鬼主播勒葱,決...
    沈念sama閱讀 38,933評(píng)論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼浪汪,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了凛虽?” 一聲冷哼從身側(cè)響起死遭,我...
    開封第一講書人閱讀 37,701評(píng)論 0 266
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎涩维,沒想到半個(gè)月后殃姓,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,143評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡瓦阐,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,488評(píng)論 2 327
  • 正文 我和宋清朗相戀三年蜗侈,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片睡蟋。...
    茶點(diǎn)故事閱讀 38,626評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡踏幻,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出戳杀,到底是詐尸還是另有隱情该面,我是刑警寧澤,帶...
    沈念sama閱讀 34,292評(píng)論 4 329
  • 正文 年R本政府宣布信卡,位于F島的核電站隔缀,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏傍菇。R本人自食惡果不足惜猾瘸,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,896評(píng)論 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望丢习。 院中可真熱鬧牵触,春花似錦、人聲如沸咐低。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,742評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽见擦。三九已至钉汗,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間鲤屡,已是汗流浹背儡湾。 一陣腳步聲響...
    開封第一講書人閱讀 31,977評(píng)論 1 265
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留执俩,地道東北人徐钠。 一個(gè)月前我還...
    沈念sama閱讀 46,324評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長得像役首,于是被迫代替她去往敵國和親尝丐。 傳聞我的和親對象是個(gè)殘疾皇子显拜,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,494評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容

  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 171,760評(píng)論 25 707
  • 歡迎關(guān)注我的公眾號(hào):讀書主義 更多精彩等著你! 這個(gè)讀書方法爹袁,可能會(huì)顛覆你對讀書以往的認(rèn)知|開卷 或許讀書已經(jīng)成為...
    米米粒粒閱讀 34,537評(píng)論 9 209
  • 2018年2月27日 星期二 晴 今天早早就討個(gè)已經(jīng)過了的新年紅包远荠,這個(gè)同事是我們部門回去得最早的,來得最晚的失息,其...
    藝齡菇?jīng)?/span>閱讀 187評(píng)論 0 1
  • 最近很多人應(yīng)該都了解到了譬淳,到處都在弄這個(gè)QQ日程引流,我了解之后確實(shí)覺得很好盹兢,因?yàn)榭梢詫?shí)現(xiàn)不用添加好友還能強(qiáng)制別人...
    協(xié)議之家閱讀 712評(píng)論 0 0
  • 《窮漢歌》 寒夜瘦風(fēng)吹破屋邻梆, 落葉枯枝無遮處。 茅屋灌雪身不支绎秒, 絮蓋無溫寒浸骨浦妄。 命運(yùn)舒展終有度, 貧富輪轉(zhuǎn)智生...
    純水陸零閱讀 475評(píng)論 0 3