上一篇 storm 單詞計(jì)數(shù), 主要結(jié)合一個單詞計(jì)數(shù)案例來從代碼層面認(rèn)識storm,本篇主要講解storm 集群搭建。
直接開干吧。
節(jié)點(diǎn)規(guī)劃 centos 6.5-minimal
192.168.0.16(nimbus/supervisor/ui)浮禾、192.168.0.17(supervisor)、192.168.0.18(supervisor)
準(zhǔn)備環(huán)境
安裝Java 7 和 Python 2.6.6 和 zookeeper份汗,這里就不展開講解了盈电。
下載 storm
cd /usr/local && wget http://mirrors.tuna.tsinghua.edu.cn/apache/storm/apache-storm-1.1.0/apache-storm-1.1.0.tar.gz && tar -zxvf apache-storm-1.1.0.tar.gz -C ./ && mv apache-storm-1.1.0 storm
配置環(huán)境變量
vim ~/.bashrc
刷新配置
source ~/.bashrc
創(chuàng)建 storm dir 目錄
mkdir /var/storm
修改 storm 配置文件
vim /usr/local/storm/conf/storm.yaml
配置 zookeeper 列表
storm.zookeeper.servers:
- "192.168.0.16"
- "192.168.0.17"
- "192.168.0.18"
配置 nimbus
nimbus.seeds: ["192.168.0.16"]
配置 storm 本地 dir
storm.local.dir: "/var/storm"
配置 supervisor.slots.ports(指定每個機(jī)器上可以啟動多少個worker,一個端口號代表一個worker)
supervisor.slots.ports:
- 6700
- 6701
- 6702
- 6703
配置完畢杯活!匆帚,所有節(jié)點(diǎn)都按以上方式執(zhí)行(建議scp )。
啟動storm集群
啟動 zookeeper 集群
略
啟動nimbus (192.168.0.16)
storm nimbus >/dev/null 2>&1 &
啟動 supervisor (192.168.0.16,192.168.0.17,192.168.0.18)
storm supervisor >/dev/null 2>&1 &
啟動 storm ui 監(jiān)控界面(192.168.0.16)
storm ui >/dev/null 2>&1 &
打開瀏覽器轩猩,訪問 http://192.168.0.16:8080 即可
以上就是本章內(nèi)容卷扮,如有不對的地方,請多多指教均践,謝謝晤锹!
為了方便有需要的人,本系列全部軟件都在 https://pan.baidu.com/s/1qYsJZfY
下章預(yù)告:主要 “如何將代碼打包部署到storm 集群運(yùn)行”
作者:逐暗者 (轉(zhuǎn)載請注明出處)