mongoDB 集群模式記錄

mongoDB 集群模式記錄

官方手冊(cè)

replica set(復(fù)制集)

  1. replica set 是一組存儲(chǔ)了相同數(shù)據(jù)的 mongod 實(shí)例
  2. 包含數(shù)個(gè)數(shù)據(jù)節(jié)點(diǎn)和一個(gè)仲裁節(jié)點(diǎn)(可選,不超過(guò)1個(gè))
  3. 數(shù)據(jù)節(jié)點(diǎn)其中有1個(gè)主節(jié)點(diǎn)坎缭、其他的為副節(jié)點(diǎn)
  4. 寫(xiě)請(qǐng)求全部走主節(jié)點(diǎn);缺省情況下沉御,讀請(qǐng)求也走主節(jié)點(diǎn),通過(guò)配置荆针,可以使副節(jié)點(diǎn)接收讀請(qǐng)求
  5. 仲裁節(jié)點(diǎn)不存儲(chǔ)數(shù)據(jù)梅鹦,其作用是主持選舉
  6. 建議:一個(gè) replica set 部署奇數(shù)個(gè)數(shù)據(jù)節(jié)點(diǎn) 或 偶數(shù)個(gè)數(shù)據(jù)節(jié)點(diǎn)+1個(gè)仲裁節(jié)點(diǎn)
  7. 一個(gè) replica set 建議的最小部署單元是3個(gè)節(jié)點(diǎn)
  8. 一個(gè) replica set 最多包含50個(gè)成員,最多包含7個(gè)有投票權(quán)的成員

sharded cluster(分片集群)

Sharding 提供了對(duì)數(shù)據(jù)進(jìn)行分布式存儲(chǔ)的辦法之斯。

一個(gè) sharded Cluster 包括以下組件:

  1. shard:分片數(shù)據(jù),每個(gè) shard 都能以 replica set 的形式部署
  2. mongos:查詢路由(客戶端通過(guò) mongos 訪問(wèn)集群)
  3. config servers:存儲(chǔ)著元數(shù)據(jù)和集群的配置信息遣铝,必須以 replica set 的形式部署

集群安裝

系統(tǒng)配置

  1. 關(guān)閉透明巨頁(yè)佑刷,具體參考官網(wǎng)文檔
  2. 修改 Max processes 設(shè)置,具體參考 soft rlimits too low.
  3. 按系統(tǒng)版本下載對(duì)應(yīng)的 mongo 發(fā)布包

部署步驟

部署 config server

config server 必須replica set 的形式部署酿炸。

此處測(cè)試用瘫絮,在 host1 上部署三個(gè) config server 實(shí)例,分別監(jiān)聽(tīng) 27017填硕,27018麦萤,27019 端口。

啟動(dòng)三個(gè)實(shí)例后廷支,執(zhí)行 mongo 連上任意一個(gè):
在 mongo shell 里執(zhí)行:

rs.initiate(
  {
    _id : "configset",
    members: [
      { _id : 0, host : "host1:27017" },
      { _id : 1, host : "host1:27018" },
      { _id : 2, host : "host1:27019" }
    ]
  }
)

這里的 _id 為 config serverreplica set 的名稱频鉴。

成功返回后執(zhí)行

rs.status()

可以觀察 replica set 的狀態(tài),一主二從說(shuō)明選主成功恋拍。

創(chuàng)建 Shard Replica Sets

在 host1、host2藕甩、host3 上部署一個(gè) replica set(1上一個(gè)仲裁節(jié)點(diǎn)施敢、2上一個(gè)數(shù)據(jù)節(jié)點(diǎn),3上一個(gè)數(shù)據(jù)節(jié)點(diǎn))

執(zhí)行 mongo 連上任意一個(gè):

在 mongo shell 里執(zhí)行:

rs.initiate(
  {
    _id : "shard1",
    members: [
      { _id : 0, host : "host2:27017" },
      { _id : 1, host : "host3:27017" },
      { _id : 2, host : "host1:27020", arbiterOnly : true }
    ]
  }
)

之后可以執(zhí)行 rs.status() 觀察 replica set 的狀態(tài)狭莱,一主一從一仲裁說(shuō)明選主成功僵娃。

部署 mongos

在 host4 上部署4個(gè) mongos 實(shí)例,分別監(jiān)聽(tīng) 27017腋妙,27018默怨,27019,27020 端口骤素。

執(zhí)行 mongo 連上任意一個(gè):

sh.addShard( "shard1/host2:27017")
sh.addShard( "shard1/host3:27017")
sh.addShard( "shard1/host1:27020")

客戶端連接 mongo 集群

按前述結(jié)構(gòu)部署集群時(shí)匙睹,客戶端只需連接 mongos,無(wú)需關(guān)心后部的詳情济竹。
構(gòu)建的 mongoConnectionString 如下:

mongodb://host4:27017,host4:27018,host4:27019,host4:27020/dbname

如需開(kāi)啟讀寫(xiě)分離痕檬,設(shè)置 readPreference 參數(shù)即可, 如下:

mongodb://host4:27017,host4:27018,host4:27019,host4:27020/dbname?readPreference=secondaryPreferred

監(jiān)控工具

Ops Manager

  • 官方出品,企業(yè)版自帶送浊,社區(qū)版自行下載
  • 監(jiān)控功能免費(fèi)梦谜,其余需要付費(fèi)

Nosql client

  • 用法類似(Ops Manager),配置更簡(jiǎn)單

附錄

1. 配置服務(wù)器 配置參考

sharding:
  clusterRole: configsvr
replication:
  replSetName: configset
  
systemLog:
   destination: file
   path: "/path/to/log/mongod.log"
   logAppend: true
   
processManagement:
   fork: true
   pidFilePath: "/path/to/mongo.pid"
   
net:
   port: 27017
   
storage:
   dbPath: "/path/to/data/"

2. 分片數(shù)據(jù)節(jié)點(diǎn) 配置參考

sharding:
  clusterRole: shardsvr
replication:
  replSetName: shardset1
  
systemLog:
   destination: file
   path: "/path/to/log/mongod.log"
   logAppend: true
   
processManagement:
   fork: true
   pidFilePath: "/path/to/mongo.pid"
   
net:
   port: 27017
   
storage:
   dbPath: "/path/to/log/data/"

3. 分片仲裁節(jié)點(diǎn) 配置參考

sharding:
  clusterRole: shardsvr
replication:
  replSetName: shard1
  
systemLog:
   destination: file
   path: "/path/to/log/mongod.log"
   logAppend: true
   
processManagement:
   fork: true
   pidFilePath: "/path/to/mongo.pid"
   
net:
   port: 27017
   
storage:
   dbPath: "/path/to/data/"
   journal:
      enabled: false

4. 查詢路由 配置參考

sharding:
  configDB: "configset/host1:27017,host1:27018,host1:27019"
  
systemLog:
   destination: file
   path: "/path/to/log/mongos.log"
   logAppend: true
   
processManagement:
   fork: true
   pidFilePath: "/path/to/mongos.pid"
   
net:
   port: 27017

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市唁桩,隨后出現(xiàn)的幾起案子闭树,更是在濱河造成了極大的恐慌,老刑警劉巖荒澡,帶你破解...
    沈念sama閱讀 216,591評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件蔼啦,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡仰猖,警方通過(guò)查閱死者的電腦和手機(jī)捏肢,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,448評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)饥侵,“玉大人鸵赫,你說(shuō)我怎么就攤上這事□锷” “怎么了辩棒?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,823評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)膨疏。 經(jīng)常有香客問(wèn)我一睁,道長(zhǎng),這世上最難降的妖魔是什么佃却? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,204評(píng)論 1 292
  • 正文 為了忘掉前任者吁,我火速辦了婚禮,結(jié)果婚禮上饲帅,老公的妹妹穿的比我還像新娘复凳。我一直安慰自己,他們只是感情好灶泵,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,228評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布育八。 她就那樣靜靜地躺著,像睡著了一般赦邻。 火紅的嫁衣襯著肌膚如雪髓棋。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 51,190評(píng)論 1 299
  • 那天惶洲,我揣著相機(jī)與錄音按声,去河邊找鬼。 笑死湃鹊,一個(gè)胖子當(dāng)著我的面吹牛儒喊,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播币呵,決...
    沈念sama閱讀 40,078評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼怀愧,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼侨颈!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起芯义,我...
    開(kāi)封第一講書(shū)人閱讀 38,923評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤哈垢,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后扛拨,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體耘分,經(jīng)...
    沈念sama閱讀 45,334評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,550評(píng)論 2 333
  • 正文 我和宋清朗相戀三年绑警,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了求泰。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,727評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡计盒,死狀恐怖渴频,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情北启,我是刑警寧澤卜朗,帶...
    沈念sama閱讀 35,428評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站咕村,受9級(jí)特大地震影響场钉,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜懈涛,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,022評(píng)論 3 326
  • 文/蒙蒙 一逛万、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧肩钠,春花似錦泣港、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,672評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)呛每。三九已至踩窖,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間晨横,已是汗流浹背洋腮。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,826評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留手形,地道東北人啥供。 一個(gè)月前我還...
    沈念sama閱讀 47,734評(píng)論 2 368
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像库糠,于是被迫代替她去往敵國(guó)和親伙狐。 傳聞我的和親對(duì)象是個(gè)殘疾皇子涮毫,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,619評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • MongoDB基礎(chǔ)請(qǐng)參考:http://blog.51cto.com/kaliarch/2044423 Mongo...
    kaliarch閱讀 2,021評(píng)論 0 0
  • 數(shù)據(jù)副本 MongoDB中的一組副本是一群mongod進(jìn)程,這些進(jìn)程維護(hù)同樣的數(shù)據(jù)集贷屎。副本集提供了冗余和高可用性罢防,...
    大蟒傳奇閱讀 2,693評(píng)論 4 16
  • 一,選擇商業(yè)綜合體的考量唉侄。 1 業(yè)主如何實(shí)現(xiàn)對(duì)運(yùn)營(yíng)商的監(jiān)管咒吐。業(yè)主權(quán)益如何得到保障。 2運(yùn)營(yíng)商的運(yùn)營(yíng)水平属划。 3是否存...
    取個(gè)昵稱都好難閱讀 718評(píng)論 0 0
  • 1 十一黃金周期間恬叹,朋友圈每天都會(huì)被各種婚禮小視頻刷屏。雖然只有十秒的小視頻同眯,但是我仿佛能想象出婚禮的全部绽昼。 閨蜜...
    妙黛閱讀 1,162評(píng)論 0 1
  • 介紹在這世界的角落绪励,有一名叫鈴的日本女孩,和妹妹一起無(wú)憂無(wú)慮地長(zhǎng)在二戰(zhàn)時(shí)期的廣島唠粥。及成年疏魏,父母之命媒妁之言嫁到吳市...
    roli八說(shuō)閱讀 1,046評(píng)論 0 0