Strom安裝流程

系統(tǒng)版本:CentOS 6.5
Storm版本:0.9.2穩(wěn)定版

安裝Storm前,需要做好以下兩個(gè)準(zhǔn)備工作:
有問題可以點(diǎn)擊鏈接進(jìn)入我之前的文章查看

  1. ZooKeeper集群的部署
  2. Storm依賴軟件的安裝

一. 解壓安裝包apache-storm-0.9.2-incubating.tar

解壓apache-storm-0.9.2-incubating.tar安裝包

二. 創(chuàng)建項(xiàng)目目錄并將解壓目錄移入項(xiàng)目目錄中

mkdir /home/host1/storm
mv apache-storm-0.9.2-incubating /home/host1/storm/

三. 建立狀態(tài)存儲(chǔ)文件并修改Storm配置文件storm.yaml

進(jìn)入apache-storm-0.9.2-incubating目錄

cd apache-storm-0.9.2-incubating
vim conf/storm.yaml

配置內(nèi)容如下:

storm.zookeeper.servers:
    - "storm1"
    - "storm2"
    - "storm3"
nimbus.host: "storm1"
storm.local.dir: "/root/storm2/storm/status"
supervisor.slots.ports:
    - 6700
    - 6701
    - 6702
    - 6703

注意:以上為必填的配置項(xiàng),其它配置可以根據(jù)需要填寫查看更多配置。配置必須嚴(yán)格按模板規(guī)則填寫霜瘪,每行頂頭,前面不允許留有空格,并且“-”列上下必須對(duì)齊罪郊,這里很容易出錯(cuò)。

四. 配置環(huán)境變量并使環(huán)境變量立即生效

vim /etc/profile

編輯加入如下內(nèi)容:

export STORM_HOME=/home/host1/storm/apache-storm-0.9.2-incubating
export PATH=$STORM_HOME/bin:$PATH

:wq保存退出尚洽,使環(huán)境變量立即生效

source /etc/profile

五. 啟動(dòng)Storm集群并檢查相應(yīng)的進(jìn)程

在nimbus節(jié)點(diǎn)輸入:

storm ui >/dev/null 2>&1 &
//結(jié)果:[2] 12577
storm nimbus >/dev/null 2>&1 &
//結(jié)果:[3] 12737

在supervisor節(jié)點(diǎn)輸入:

storm supervisor >/dev/null 2>&1 &

啟動(dòng)完成后輸入jps查看進(jìn)程情況:

jps

如果在nimbus節(jié)點(diǎn)中包含nimbus悔橄、core、QuorumPeerMain、Jps進(jìn)程癣疟,supervisor節(jié)點(diǎn)中包含supervisor挣柬、QuorumPeerMain、Jps進(jìn)程睛挚,則證明storm啟動(dòng)成功邪蛔。

也可以瀏覽器登錄Storm監(jiān)控頁面更直觀的查看運(yùn)行狀態(tài)。

六. 通過瀏覽器登錄監(jiān)控UI頁面扎狱,查看監(jiān)控屬性

瀏覽器打開:http://{nimbus host}:8080

至此侧到,Storm集群安裝完畢并啟動(dòng)。

Storem常見配置項(xiàng)

  • storm.zookeeper.servers:ZooKeeper服務(wù)器列表
  • storm.zookeeper.port:ZooKeeper服務(wù)連接端口
  • storm.local.dir:Storm使用本地系統(tǒng)目錄淤击,存儲(chǔ)少量狀態(tài)信息
  • storm.cluster.mode:集群運(yùn)行模式([distrivuted|local])
  • storm.zookeeper.session.timeout:客戶端連接ZooKeeper超時(shí)時(shí)間
  • nimbus.host:nimbus服務(wù)器地址
  • nimbus.task.timeout.secs:判斷task存活的心跳超時(shí)時(shí)間
  • nimbus.supervisor.timeout.secs:判斷supervisor是否存活的心跳超時(shí)時(shí)間
  • nimbus.task.launch.secs:task啟動(dòng)時(shí)的一個(gè)特殊超時(shí)設(shè)置
  • ui.port:Storm UI的服務(wù)端口床牧,默認(rèn)8080
  • drpc.servers:DRPC的服務(wù)器列表,以便DRPCSpout知道和誰通訊
  • drpc.port:Storm DRPC的服務(wù)端口
  • supervisor.slots.ports:supervisor上能夠運(yùn)行workers的端口列表
  • supervisor.worker.timeout.secs:判斷worker是否存活的心跳超時(shí)時(shí)間
  • supervisor.worker.start.timeout.secs:supervisor初始心跳超時(shí)
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末遭贸,一起剝皮案震驚了整個(gè)濱河市戈咳,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌壕吹,老刑警劉巖著蛙,帶你破解...
    沈念sama閱讀 210,914評(píng)論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異耳贬,居然都是意外死亡踏堡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,935評(píng)論 2 383
  • 文/潘曉璐 我一進(jìn)店門咒劲,熙熙樓的掌柜王于貴愁眉苦臉地迎上來顷蟆,“玉大人,你說我怎么就攤上這事腐魂≌寿耍” “怎么了?”我有些...
    開封第一講書人閱讀 156,531評(píng)論 0 345
  • 文/不壞的土叔 我叫張陵蛔屹,是天一觀的道長(zhǎng)削樊。 經(jīng)常有香客問我,道長(zhǎng)兔毒,這世上最難降的妖魔是什么漫贞? 我笑而不...
    開封第一講書人閱讀 56,309評(píng)論 1 282
  • 正文 為了忘掉前任,我火速辦了婚禮育叁,結(jié)果婚禮上迅脐,老公的妹妹穿的比我還像新娘。我一直安慰自己豪嗽,他們只是感情好谴蔑,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,381評(píng)論 5 384
  • 文/花漫 我一把揭開白布豌骏。 她就那樣靜靜地躺著,像睡著了一般树碱。 火紅的嫁衣襯著肌膚如雪肯适。 梳的紋絲不亂的頭發(fā)上变秦,一...
    開封第一講書人閱讀 49,730評(píng)論 1 289
  • 那天成榜,我揣著相機(jī)與錄音,去河邊找鬼蹦玫。 笑死赎婚,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的樱溉。 我是一名探鬼主播挣输,決...
    沈念sama閱讀 38,882評(píng)論 3 404
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼福贞!你這毒婦竟也來了撩嚼?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,643評(píng)論 0 266
  • 序言:老撾萬榮一對(duì)情侶失蹤挖帘,失蹤者是張志新(化名)和其女友劉穎完丽,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體拇舀,經(jīng)...
    沈念sama閱讀 44,095評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡逻族,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,448評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了骄崩。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片聘鳞。...
    茶點(diǎn)故事閱讀 38,566評(píng)論 1 339
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖要拂,靈堂內(nèi)的尸體忽然破棺而出抠璃,到底是詐尸還是另有隱情,我是刑警寧澤脱惰,帶...
    沈念sama閱讀 34,253評(píng)論 4 328
  • 正文 年R本政府宣布鸡典,位于F島的核電站,受9級(jí)特大地震影響枪芒,放射性物質(zhì)發(fā)生泄漏彻况。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,829評(píng)論 3 312
  • 文/蒙蒙 一舅踪、第九天 我趴在偏房一處隱蔽的房頂上張望纽甘。 院中可真熱鬧,春花似錦抽碌、人聲如沸悍赢。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,715評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽左权。三九已至皮胡,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間赏迟,已是汗流浹背屡贺。 一陣腳步聲響...
    開封第一講書人閱讀 31,945評(píng)論 1 264
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留锌杀,地道東北人甩栈。 一個(gè)月前我還...
    沈念sama閱讀 46,248評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像糕再,于是被迫代替她去往敵國和親量没。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,440評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容

  • Strom集群結(jié)構(gòu)是有一個(gè)主節(jié)點(diǎn)(nimbus)和多個(gè)工作節(jié)點(diǎn)(supervisor)組成的主從結(jié)構(gòu)突想,主節(jié)點(diǎn)通過配...
    看山遠(yuǎn)兮閱讀 2,837評(píng)論 0 7
  • 目錄 場(chǎng)景假設(shè) 調(diào)優(yōu)步驟和方法 Storm 的部分特性 Storm 并行度 Storm 消息機(jī)制 Storm UI...
    mtide閱讀 17,060評(píng)論 30 60
  • Date: Nov 17-24, 2017 1. 目的 積累Storm為主的流式大數(shù)據(jù)處理平臺(tái)對(duì)實(shí)時(shí)數(shù)據(jù)處理的相關(guān)...
    一只很努力爬樹的貓閱讀 2,160評(píng)論 0 4
  • 背景 OpenShift是目前比較主流的基于Kubernetes的容器云解決方案殴蹄,OpenShift在kubern...
    小白_18M閱讀 1,173評(píng)論 0 5
  • 我在一個(gè)位于中國農(nóng)村的木板屋里走動(dòng)袭灯,這木板屋老的很,稍一走動(dòng)便伴隨著不停的吱吱聲垒探,我老了妓蛮,腿腳不靈便,這木板屋圾叼,住...
    萌萌寶貝公主閱讀 486評(píng)論 1 1