mongodb實戰(zhàn)Replica Set + Sharding

環(huán)境說明

三臺機器(centos6.4)

  • host1 192.168.1.201
  • host2 192.168.1.202
  • host3 192.168.1.203

mongdb版本

2.4.0

服務規(guī)劃

繪圖1.jpg
  • shard1 28017：shard1的數據服務
  • shard2 28018：shard2的數據服務
  • config 20000：存儲分片集群的的元數據，其中包括在每個mongod實例的基本信息和塊信息
  • arbiter1 28031：shard1的仲裁節(jié)點
  • arbiter2 28032：shard2的仲裁節(jié)點
  • mongos 28885：數據和請求分發(fā)的中心，使單一的mongod實例組成互相關聯的集群

仲裁節(jié)點是一種特殊的節(jié)點，它本身不存儲數據，主要的作用是決定哪一個備用節(jié)點在主節(jié)點掛掉之后提升為主節(jié)點菠发。

配置文件

host1

數據節(jié)點

shard11表示分片一的第一個節(jié)點
shard21表示分片二的第一個節(jié)點

mkdir -p /home/ayou/mongodb/shard11
cat > /home/ayou/mongodb/shard11.conf <<EOF
shardsvr=true
replSet=shard1
port=28017
dbpath=/home/ayou/mongodb/shard11
oplogSize=2048
logpath=/home/ayou/mongodb/shard11.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

mkdir -p /home/ayou/mongodb/shard21
cat > /home/ayou/mongodb/shard21.conf <<EOF
shardsvr=true
replSet=shard2
port=28018
dbpath=/home/ayou/mongodb/shard21
oplogSize=2048
logpath=/home/ayou/mongodb/shard21.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

配置節(jié)點

mkdir -p /home/ayou/mongodb/config
cat > /home/ayou/mongodb/config1.conf <<EOF
configsvr=true
dbpath=/home/ayou/mongodb/config/
port=20000
logpath=/home/ayou/mongodb/config1.log
logappend=true
fork=true
nojournal=true
EOF

表決節(jié)點

arbiter1表示為分片一的仲裁節(jié)點
arbiter2表示為分片二的仲裁節(jié)點

mkdir -p /home/ayou/mongodb/arbiter1
cat > /home/ayou/mongodb/arbiter1.conf <<EOF
shardsvr=true
replSet=shard1
port=28031
dbpath=/home/ayou/mongodb/arbiter1
oplogSize=100
logpath=/home/ayou/mongodb/arbiter1.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

mkdir -p /home/ayou/mongodb/arbiter2
cat > /home/ayou/mongodb/arbiter2.conf <<EOF
shardsvr=true
replSet=shard2
port=28032
dbpath=/home/ayou/mongodb/arbiter2
oplogSize=100
logpath=/home/ayou/mongodb/arbiter2.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

路由節(jié)點

mkdir -p /home/ayou/mongodb/mongos1
cat > /home/ayou/mongodb/mongos1.conf <<EOF
configdb=host1:20000,host2:20000,host3:20000
port=28885
chunkSize=100
logpath=/home/ayou/mongodb/mongos1.log
logappend=true
fork=true
EOF

host2

數據節(jié)點

mkdir -p /home/ayou/mongodb/shard12
cat > /home/ayou/mongodb/shard12.conf <<EOF
shardsvr=true
replSet=shard1
port=28017
dbpath=/home/ayou/mongodb/shard12
oplogSize=2048
logpath=/home/ayou/mongodb/shard12.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

mkdir -p /home/ayou/mongodb/shard22
cat > /home/ayou/mongodb/shard22.conf <<EOF
shardsvr=true
replSet=shard2
port=28018
dbpath=/home/ayou/mongodb/shard22
oplogSize=2048
logpath=/home/ayou/mongodb/shard22.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

配置節(jié)點

mkdir -p /home/ayou/mongodb/config
cat > /home/ayou/mongodb/config2.conf <<EOF
configsvr=true
dbpath=/home/ayou/mongodb/config/
port=20000
logpath=/home/ayou/mongodb/config2.log
logappend=true
fork=true
EOF

表決節(jié)點

mkdir -p /home/ayou/mongodb/arbiter1
cat > /home/ayou/mongodb/arbiter1.conf <<EOF
shardsvr=true
replSet=shard1
port=28031
dbpath=/home/ayou/mongodb/arbiter1
oplogSize=100
logpath=/home/ayou/mongodb/arbiter1.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

mkdir -p /home/ayou/mongodb/arbiter2
cat > /home/ayou/mongodb/arbiter2.conf <<EOF
shardsvr=true
replSet=shard2
port=28032
dbpath=/home/ayou/mongodb/arbiter2
oplogSize=100
logpath=/home/ayou/mongodb/arbiter2.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

路由節(jié)點

mkdir -p /home/ayou/mongodb/mongos2
cat > /home/ayou/mongodb/mongos2.conf <<EOF
configdb=host1:20000,host2:20000,host3:20000
port=28885
chunkSize=100
logpath=/home/ayou/mongodb/mongos2.log
logappend=true
fork=true
EOF

host3

數據節(jié)點

mkdir -p /home/ayou/mongodb/shard13
cat > /home/ayou/mongodb/shard13.conf <<EOF
shardsvr=true
replSet=shard1
port=28017
dbpath=/home/ayou/mongodb/shard13
oplogSize=2048
logpath=/home/ayou/mongodb/shard13.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

mkdir -p /home/ayou/mongodb/shard23
cat > /home/ayou/mongodb/shard23.conf <<EOF
shardsvr=true
replSet=shard2
port=28018
dbpath=/home/ayou/mongodb/shard23
oplogSize=2048
logpath=/home/ayou/mongodb/shard23.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

配置節(jié)點

mkdir -p /home/ayou/mongodb/config
cat > /home/ayou/mongodb/config3.conf <<EOF
configsvr=true
dbpath=/home/ayou/mongodb/config/
port=20000
logpath=/home/ayou/mongodb/config3.log
logappend=true
fork=true
EOF

表決節(jié)點

mkdir -p /home/ayou/mongodb/arbiter1
cat > /home/ayou/mongodb/arbiter1.conf <<EOF
shardsvr=true
replSet=shard1
port=28031
dbpath=/home/ayou/mongodb/arbiter1
oplogSize=100
logpath=/home/ayou/mongodb/arbiter1.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

mkdir -p /home/ayou/mongodb/arbiter2
cat > /home/ayou/mongodb/arbiter2.conf <<EOF
shardsvr=true
replSet=shard2
port=28032
dbpath=/home/ayou/mongodb/arbiter2
oplogSize=100
logpath=/home/ayou/mongodb/arbiter2.log
logappend=true
fork=true
rest=true
nojournal=true
EOF

路由節(jié)點

mkdir -p /home/ayou/mongodb/mongos3
cat > /home/ayou/mongodb/mongos3.conf <<EOF
configdb=host1:20000,host2:20000,host3:20000
port=28885
chunkSize=100
logpath=/home/ayou/mongodb/mongos3.log
logappend=true
fork=true
EOF

啟動服務

  • mongos服務可以只啟動一臺，本文在host3上啟動
  • 如果啟動不了，可以嘗試同步時間/usr/sbin/ntpdate * *表示需要與之同步的機器名

host1

mongod --config /home/ayou/mongodb/shard11.conf
mongod --config /home/ayou/mongodb/shard21.conf
mongod --config /home/ayou/mongodb/arbiter1.conf
mongod --config /home/ayou/mongodb/arbiter2.conf
mongod --config /home/ayou/mongodb/config1.conf
mongos --config /home/ayou/mongodb/mongos1.conf

host2

mongod --config /home/ayou/mongodb/shard12.conf
mongod --config /home/ayou/mongodb/shard22.conf
mongod --config /home/ayou/mongodb/arbiter1.conf
mongod --config /home/ayou/mongodb/arbiter2.conf
mongod --config /home/ayou/mongodb/config2.conf
mongos --config /home/ayou/mongodb/mongos2.conf

host3

mongod --config /home/ayou/mongodb/shard13.conf
mongod --config /home/ayou/mongodb/shard23.conf
mongod --config /home/ayou/mongodb/arbiter1.conf
mongod --config /home/ayou/mongodb/arbiter2.conf
mongod --config /home/ayou/mongodb/config3.conf
mongos --config /home/ayou/mongodb/mongos3.conf

啟動路由

任選一臺機器居砖，執(zhí)行如下命令

cat > /home/ayou/mongodb/mongos.conf <<EOF
configdb=host1:20000,host2:20000,host3:20000
port=41000
chunkSize=100
logpath=/home/ayou/mongodb/mongos.log
logappend=true
fork=true
EOF

mongos --config /home/ayou/mongodb/mongos.conf

查看運行狀態(tài)

Paste_Image.png
Paste_Image.png
Paste_Image.png

配置分片

  • 可以在任意臺機器上進行如下操作
  • 可能需要關閉防火墻
mongo host1:28017/admin

config = {_id:'shard1', members: [{_id: 0, host: "host1:28017"},{_id: 1, host:"host2:28017"},{ _id : 2,host:"host3:28017",slaveDelay :7200 ,priority:0},{_id: 3, host: 'host1:28031', arbiterOnly : true},{_id: 4,host: 'host2:28031', arbiterOnly : true},{_id: 5, host: 'host3:28031',arbiterOnly : true}]};
rs.initiate(config);

mongo host2:28018/admin

config = {_id:'shard2', members: [{_id: 0, host: "host1:28018"},{_id: 1, host:"host2:28018"},{ _id : 2,host:"host3:28018",slaveDelay :7200 ,priority:0},{_id: 3, host: 'host1:28032', arbiterOnly : true},{_id: 4,host: 'host2:28032', arbiterOnly : true},{_id: 5, host: 'host3:28032',arbiterOnly : true}]};
rs.initiate(config);

添加分片

任選一臺機器

mongo host3:28885/admin
db.runCommand({"addshard" : "shard1/host1:28017,host2:28017"})

db.runCommand({"addshard" : "shard2/host1:28018,host2:28018"})

db.runCommand( { "enablesharding" : "test-shard"})

db.runCommand( { shardcollection : "test-shard.test",key : {_id: 1} } )

測試

往test-shard.test中插入大量數據

for(var i=0;i<1000000;i++) db.test.insert({name:"no"+i})

查看分片狀態(tài)

Paste_Image.png
Paste_Image.png
最后編輯于 ：
?著作權歸作者所有,轉載或內容合作請聯系作者
  • 人面猴
    序言：七十年代末，一起剝皮案震驚了整個濱河市驴娃，隨后出現的幾起案子奏候，更是在濱河造成了極大的恐慌，老刑警劉巖唇敞，帶你破解...
    沈念sama閱讀 222,378評論 6贊 516
  • 死咒
    序言：濱河連續(xù)發(fā)生了三起死亡事件蔗草，死亡現場離奇詭異，居然都是意外死亡疆柔，警方通過查閱死者的電腦和手機咒精，發(fā)現死者居然都...
    沈念sama閱讀 94,970評論 3贊 399
  • 救了他兩次的神仙讓他今天三更去死
    文/潘曉璐 我一進店門，熙熙樓的掌柜王于貴愁眉苦臉地迎上來旷档，“玉大人模叙，你說我怎么就攤上這事⌒” “怎么了范咨？”我有些...
    開封第一講書人閱讀 168,983評論 0贊 362
  • 道士緝兇錄：失蹤的賣姜人
    文/不壞的土叔 我叫張陵故觅，是天一觀的道長。 經常有香客問我渠啊，道長输吏，這世上最難降的妖魔是什么？ 我笑而不...
    開封第一講書人閱讀 59,938評論 1贊 299
  • ?港島之戀（遺憾婚禮）
    正文 為了忘掉前任替蛉，我火速辦了婚禮贯溅，結果婚禮上，老公的妹妹穿的比我還像新娘躲查。我一直安慰自己它浅，他們只是感情好，可當我...
    茶點故事閱讀 68,955評論 6贊 398
  • 惡毒庶女頂嫁案：這布局不是一般人想出來的
    文/花漫 我一把揭開白布镣煮。 她就那樣靜靜地躺著罚缕，像睡著了一般。 火紅的嫁衣襯著肌膚如雪怎静。 梳的紋絲不亂的頭發(fā)上邮弹，一...
    開封第一講書人閱讀 52,549評論 1贊 312
  • 城市分裂傳說
    那天，我揣著相機與錄音蚓聘，去河邊找鬼腌乡。 笑死，一個胖子當著我的面吹牛夜牡，可吹牛的內容都是我干的与纽。 我是一名探鬼主播，決...
    沈念sama閱讀 41,063評論 3贊 422
  • 雙鴛鴦連環(huán)套：你想象不到人心有多黑
    文/蒼蘭香墨 我猛地睜開眼塘装，長吁一口氣：“原來是場噩夢啊……” “哼急迂！你這毒婦竟也來了？” 一聲冷哼從身側響起蹦肴，我...
    開封第一講書人閱讀 39,991評論 0贊 277
  • 萬榮殺人案實錄
    序言：老撾萬榮一對情侶失蹤僚碎，失蹤者是張志新（化名）和其女友劉穎，沒想到半個月后阴幌，有當地人在樹林里發(fā)現了一具尸體勺阐，經...
    沈念sama閱讀 46,522評論 1贊 319
  • ?護林員之死
    正文 獨居荒郊野嶺守林人離奇死亡，尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 38,604評論 3贊 342
  • ?白月光啟示錄
    正文 我和宋清朗相戀三年矛双，在試婚紗的時候發(fā)現自己被綠了渊抽。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,742評論 1贊 353
  • 活死人
    序言：一個原本活蹦亂跳的男人離奇死亡议忽，死狀恐怖懒闷，靈堂內的尸體忽然破棺而出，到底是詐尸還是另有隱情，我是刑警寧澤愤估，帶...
    沈念sama閱讀 36,413評論 5贊 351
  • ?日本核電站爆炸內幕
    正文 年R本政府宣布帮辟，位于F島的核電站，受9級特大地震影響灵疮，放射性物質發(fā)生泄漏织阅。R本人自食惡果不足惜壳繁，卻給世界環(huán)境...
    茶點故事閱讀 42,094評論 3贊 335
  • 男人毒藥：我在死后第九天來索命
    文/蒙蒙 一震捣、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧闹炉，春花似錦蒿赢、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,572評論 0贊 25
  • 一樁弒父案羡棵，背后竟有這般陰謀
    文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至嗅钻，卻和暖如春皂冰，著一層夾襖步出監(jiān)牢的瞬間，已是汗流浹背养篓。 一陣腳步聲響...
    開封第一講書人閱讀 33,671評論 1贊 274
  • 情欲美人皮
    我被黑心中介騙來泰國打工秃流， 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留，地道東北人柳弄。 一個月前我還...
    沈念sama閱讀 49,159評論 3贊 378
  • 代替公主和親
    正文 我出身青樓舶胀，卻偏偏與公主長得像，于是被迫代替她去往敵國和親碧注。 傳聞我的和親對象是個殘疾皇子嚣伐，可洞房花燭夜當晚...
    茶點故事閱讀 45,747評論 2贊 361

推薦閱讀更多精彩內容

  • 配置服務器,全部設置為靜態(tài)地址 轉到/home目錄,創(chuàng)建一個mongo目錄用做實驗,我們需要創(chuàng)建如下的目錄層級和空...
    justonlyyo閱讀 1,328評論 0贊 0
  • MongoDB基礎請參考：http://blog.51cto.com/kaliarch/2044423 Mongo...
    kaliarch閱讀 2,023評論 0贊 0
  • Spring Cloud為開發(fā)人員提供了快速構建分布式系統中一些常見模式的工具（例如配置管理，服務發(fā)現萍丐，斷路器轩端，智...
    卡卡羅2017閱讀 134,714評論 18贊 139
  • 剛接觸MongoDB，就要用到它的集群逝变，只能硬著頭皮短時間去看文檔和嘗試自行搭建船万。遷移歷史數據更是讓人惱火，近10...
    davidpp閱讀 51,737評論 9贊 78
  • 牧牛出診閱讀 182評論 0贊 0