玩轉(zhuǎn)大數(shù)據(jù)-如何搭建redis集群

在企業(yè)應(yīng)用中畔规,對(duì)于數(shù)據(jù)的固化一般采用數(shù)據(jù)庫,但是數(shù)據(jù)庫的吞吐量還是存在一定的問題的,在高并發(fā)高吞吐要求時(shí)疯汁,一般會(huì)直接導(dǎo)致數(shù)據(jù)庫的宕機(jī)或者死鎖,目前對(duì)于這個(gè)問題的架構(gòu)是在數(shù)據(jù)庫前邊在緩存池卵酪,redis就是這么一款產(chǎn)品幌蚊。
對(duì)于redis的介紹谤碳,去百度吧,它應(yīng)該被廣泛運(yùn)用在各個(gè)項(xiàng)目中溢豆,我們來看如何搭建一個(gè)redis集群蜒简,這里的集群是個(gè)真分布式集群哦。

首先漩仙,我們需要下載redis源代碼搓茬,然后進(jìn)行編譯,以下命令在linux下執(zhí)行:

wget http://download.redis.io/redis-stable.tar.gz

tar xvzf redis-stable.tar.gz

cd redis-stable

make

前面3步應(yīng)該沒有問題队他,主要的問題是執(zhí)行make的時(shí)候卷仑,出現(xiàn)了異常。

異常一:

make[2]: cc: Command not found

異常原因:沒有安裝gcc

解決方案:yum install gcc-c++

異常二:

zmalloc.h:51:31: error: jemalloc/jemalloc.h: No such file or directory

異常原因:一些編譯依賴或原來編譯遺留出現(xiàn)的問題

解決方案:make distclean麸折。清理一下锡凝,然后再make。

在make成功以后垢啼,需要make test窜锯。在make test出現(xiàn)異常。

異常一:

couldn't execute "tclsh8.5": no such file or directory

異常原因:沒有安裝tcl

解決方案:yum install -y tcl芭析。

在make成功以后锚扎,會(huì)在src目錄下多出一些可執(zhí)行文件:redis-server,redis-cli等等放刨。

方便期間用cp命令復(fù)制到usr目錄下運(yùn)行工秩。

cp redis-server /usr/local/bin/

cp redis-cli /usr/local/bin/

然后新建目錄,存放配置文件

mkdir /etc/redis

mkdir /var/redis

mkdir /var/redis/log

mkdir /var/redis/run

mkdir /var/redis/6379

在redis解壓根目錄中找到配置文件模板进统,復(fù)制到如下位置助币。

cp redis.conf /etc/redis/6379.conf

通過vim命令修改

daemonize yes

pidfile /var/redis/run/redis_6379.pid

logfile /var/redis/log/redis_6379.log

dir /var/redis/6379

最后運(yùn)行redis:

$ redis-server /etc/redis/6379.conf

Redis集群部署文檔(centos6系統(tǒng))

(要讓集群正常工作至少需要3個(gè)主節(jié)點(diǎn),在這里我們要?jiǎng)?chuàng)建6個(gè)redis節(jié)點(diǎn)螟碎,其中三個(gè)為主節(jié)點(diǎn)眉菱,三個(gè)為從節(jié)點(diǎn),對(duì)應(yīng)的redis節(jié)點(diǎn)的ip和端口對(duì)應(yīng)關(guān)系如下)

127.0.0.1:7000
127.0.0.1:7001

127.0.0.1:7002

127.0.0.1:7003

127.0.0.1:7004

127.0.0.1:7005

1:下載redis掉分。官網(wǎng)下載3.0.0版本俭缓,之前2.幾的版本不支持集群模式

下載地址:https://github.com/antirez/redis/archive/3.0.0-rc2.tar.gz

2:上傳服務(wù)器,解壓酥郭,編譯

tar -zxvf redis-3.0.0-rc2.tar.gz

mv redis-3.0.0-rc2.tar.gz redis3.0

cd /usr/local/redis3.0

make

make install

3:創(chuàng)建集群需要的目錄

mkdir -p /usr.local/cluster

cd /usr.local/cluster

mkdir 7000

mkdir 7001

mkdir 7002

mkdir 7003

mkdir 7004

mkdir 7005

4:修改配置文件redis.conf

cp /usr/local/redis3.0/redis.conf /usr.local/cluster

vi redis.conf

修改配置文件中的下面選項(xiàng)

port 7000

daemonize yes

cluster-enabled yes

cluster-config-file nodes.conf

cluster-node-timeout 5000

appendonly yes

修改完redis.conf配置文件中的這些配置項(xiàng)之后把這個(gè)配置文件分別拷貝到7000/7001/7002/7003/7004/7005目錄下面

cp /usr/local/cluster/redis.conf /usr/local/cluster/7000

cp /usr/local/cluster/redis.conf /usr/local/cluster/7001

cp /usr/local/cluster/redis.conf /usr/local/cluster/7002

cp /usr/local/cluster/redis.conf /usr/local/cluster/7003

cp /usr/local/cluster/redis.conf /usr/local/cluster/7004

cp /usr/local/cluster/redis.conf /usr/local/cluster/7005

注意:拷貝完成之后要修改7001/7002/7003/7004/7005目錄下面redis.conf文件中的port參數(shù)华坦,分別改為對(duì)應(yīng)的文件夾的名稱

5:分別啟動(dòng)這6個(gè)redis實(shí)例

cd /usr/local/cluster/7000

redis-server redis.conf

cd /usr/local/cluster/7001

redis-server redis.conf

cd /usr/local/cluster/7002

redis-server redis.conf

cd /usr/local/cluster/7003

redis-server redis.conf

cd /usr/local/cluster/7004

redis-server redis.conf

cd /usr/local/cluster/7005

redis-server redis.conf

啟動(dòng)之后使用命令查看redis的啟動(dòng)情況ps -ef|grep redis

如下圖顯示則說明啟動(dòng)成功

6:執(zhí)行redis的創(chuàng)建集群命令創(chuàng)建集群

cd /usr/local/redis3.0/src

./redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005

6.1執(zhí)行上面的命令的時(shí)候會(huì)報(bào)錯(cuò),因?yàn)槭菆?zhí)行的ruby的腳本不从,需要ruby的環(huán)境

錯(cuò)誤內(nèi)容:/usr/bin/env: ruby: No such file or directory

所以需要安裝ruby的環(huán)境惜姐,這里推薦使用yum install ruby安裝

yum install ruby

6.2然后再執(zhí)行第6步的創(chuàng)建集群命令,還會(huì)報(bào)錯(cuò),提示缺少rubygems組件歹袁,使用yum安裝

錯(cuò)誤內(nèi)容:

./redis-trib.rb:24:in `require': no such file to load -- rubygems (LoadError)

from ./redis-trib.rb:24

yum install rubygems

6.3再次執(zhí)行第6步的命令坷衍,還會(huì)報(bào)錯(cuò),提示不能加載redis条舔,是因?yàn)槿鄙賠edis和ruby的接口枫耳,使用gem 安裝

錯(cuò)誤內(nèi)容:

/usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `gem_original_require': no such file to load -- redis (LoadError)

from /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `require'

from ./redis-trib.rb:25

gem install redis

需要手工下載并安裝:

wget https://rubygems.global.ssl.fastly.net/gems/redis-3.2.1.gem
gem install -l ./redis-3.2.1.gem

6.4 再次執(zhí)行第6步的命令,正常執(zhí)行

輸入yes孟抗,然后配置完成迁杨。

至此redis集群即搭建成功!

7:使用redis-cli命令進(jìn)入集群環(huán)境

redis-cli -c -p 7000

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末凄硼,一起剝皮案震驚了整個(gè)濱河市仑最,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌帆喇,老刑警劉巖警医,帶你破解...
    沈念sama閱讀 206,214評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異坯钦,居然都是意外死亡预皇,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門婉刀,熙熙樓的掌柜王于貴愁眉苦臉地迎上來吟温,“玉大人,你說我怎么就攤上這事突颊÷澈溃” “怎么了?”我有些...
    開封第一講書人閱讀 152,543評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵律秃,是天一觀的道長(zhǎng)爬橡。 經(jīng)常有香客問我,道長(zhǎng)棒动,這世上最難降的妖魔是什么糙申? 我笑而不...
    開封第一講書人閱讀 55,221評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮船惨,結(jié)果婚禮上柜裸,老公的妹妹穿的比我還像新娘。我一直安慰自己粱锐,他們只是感情好疙挺,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,224評(píng)論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著怜浅,像睡著了一般铐然。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,007評(píng)論 1 284
  • 那天锦爵,我揣著相機(jī)與錄音,去河邊找鬼奥裸。 笑死险掀,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的湾宙。 我是一名探鬼主播樟氢,決...
    沈念sama閱讀 38,313評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼侠鳄!你這毒婦竟也來了埠啃?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 36,956評(píng)論 0 259
  • 序言:老撾萬榮一對(duì)情侶失蹤伟恶,失蹤者是張志新(化名)和其女友劉穎碴开,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體博秫,經(jīng)...
    沈念sama閱讀 43,441評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡潦牛,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,925評(píng)論 2 323
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了挡育。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片巴碗。...
    茶點(diǎn)故事閱讀 38,018評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖即寒,靈堂內(nèi)的尸體忽然破棺而出橡淆,到底是詐尸還是另有隱情,我是刑警寧澤母赵,帶...
    沈念sama閱讀 33,685評(píng)論 4 322
  • 正文 年R本政府宣布逸爵,位于F島的核電站,受9級(jí)特大地震影響凹嘲,放射性物質(zhì)發(fā)生泄漏痊银。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,234評(píng)論 3 307
  • 文/蒙蒙 一施绎、第九天 我趴在偏房一處隱蔽的房頂上張望溯革。 院中可真熱鬧,春花似錦谷醉、人聲如沸致稀。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,240評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽抖单。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間矛绘,已是汗流浹背耍休。 一陣腳步聲響...
    開封第一講書人閱讀 31,464評(píng)論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留货矮,地道東北人羊精。 一個(gè)月前我還...
    沈念sama閱讀 45,467評(píng)論 2 352
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像囚玫,于是被迫代替她去往敵國和親喧锦。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,762評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容