[轉(zhuǎn)]
1. 什么是consul？
是一個(gè)服務(wù)管理軟件汽馋。
支持多數(shù)據(jù)中心下侮东，分布式高可用的圈盔，服務(wù)發(fā)現(xiàn)和配置共享。
consul支持健康檢查悄雅，允許存儲(chǔ)鍵值對(duì)驱敲。
一致性協(xié)議采用 Raft 算法,用來保證服務(wù)的高可用.
成員管理和消息廣播 采用GOSSIP協(xié)議，支持ACL訪問控制宽闲。
ACL技術(shù)在路由器中被廣泛采用众眨，它是一種基于包過濾的流控制技術(shù)∪菸埽控制列表通過把源地址娩梨、目的地址及端口號(hào)作為數(shù)據(jù)包檢查的基本元素，并可以規(guī)定符合條件的數(shù)據(jù)包是否允許通過览徒。
gossip就是p2p協(xié)議狈定。他主要要做的事情是，去中心化习蓬。
這個(gè)協(xié)議就是模擬人類中傳播謠言的行為而來纽什。首先要傳播謠言就要有種子節(jié)點(diǎn)。種子節(jié)點(diǎn)每秒都會(huì)隨機(jī)向其他節(jié)點(diǎn)發(fā)送自己所擁有的節(jié)點(diǎn)列表躲叼，以及需要傳播的消息芦缰。任何新加入的節(jié)點(diǎn)，就在這種傳播方式下很快地被全網(wǎng)所知道枫慷。
什么是服務(wù)注冊(cè)让蕾？
一個(gè)服務(wù)將其位置信息在“中心注冊(cè)節(jié)點(diǎn)”注冊(cè)的過程。該服務(wù)一般會(huì)將它的主機(jī)IP地址以及端口號(hào)進(jìn)行注冊(cè)或听，有時(shí)也會(huì)有服務(wù)訪問的認(rèn)證信息探孝，使用協(xié)議，版本號(hào)神帅，以及關(guān)于環(huán)境的一些細(xì)節(jié)信息。
什么是服務(wù)發(fā)現(xiàn)萌抵？
服務(wù)發(fā)現(xiàn)可以讓一個(gè)應(yīng)用或者組件發(fā)現(xiàn)其運(yùn)行環(huán)境以及其它應(yīng)用或組件的信息找御。用戶配置一個(gè)服務(wù)發(fā)現(xiàn)工具就可以將實(shí)際容器跟運(yùn)行配置分離開。常見配置信息包括：ip绍填、端口號(hào)霎桅、名稱等。當(dāng)一項(xiàng)服務(wù)存在于多個(gè)主機(jī)節(jié)點(diǎn)上時(shí)讨永，client端如何決策獲取相應(yīng)正確的IP和port滔驶。
在傳統(tǒng)情況下，當(dāng)出現(xiàn)服務(wù)存在于多個(gè)主機(jī)節(jié)點(diǎn)上時(shí)卿闹，都會(huì)使用靜態(tài)配置的方法來實(shí)現(xiàn)服務(wù)信息的注冊(cè)揭糕。
而當(dāng)在一個(gè)復(fù)雜的系統(tǒng)里萝快，需要較強(qiáng)的可擴(kuò)展性時(shí)，服務(wù)被頻繁替換時(shí)著角，為避免服務(wù)中斷揪漩，動(dòng)態(tài)的服務(wù)注冊(cè)和發(fā)現(xiàn)就很重要。
相關(guān)開源項(xiàng)目：Zookeeper吏口，Doozer奄容，Etcd，強(qiáng)一致性的項(xiàng)目产徊，這些項(xiàng)目主要用于服務(wù)間的協(xié)調(diào)昂勒，同時(shí)又可用于服務(wù)的注冊(cè)。
什么是強(qiáng)一致性協(xié)議舟铜？
按照某一順序串行執(zhí)行存儲(chǔ)對(duì)象讀寫操作戈盈， 更新存儲(chǔ)對(duì)象之后， 后續(xù)訪問總是讀到最新值深滚。 假如進(jìn)程A先更新了存儲(chǔ)對(duì)象奕谭，存儲(chǔ)系統(tǒng)保證后續(xù)A,B,C進(jìn)程的讀取操作都將返回最新值。強(qiáng)一致性模型有幾種常見實(shí)現(xiàn)方法痴荐， 主從同步復(fù)制血柳， 以及quorum復(fù)制等。
http://blog.csdn.net/shlazww/article/details/38736511
consul的具體應(yīng)用場(chǎng)景
docker生兆、coreos 實(shí)例的注冊(cè)與配置共享
vitess集群
SaaS應(yīng)用的配置共享
4.與confd服務(wù)集成难捌，動(dòng)態(tài)生成nignx與haproxy配置文件優(yōu)勢(shì)
使用 Raft 算法來保證一致性，比poxes算法更直接鸦难。zookeeper采用的時(shí)poxes算法根吁。
Raft大概將整個(gè)過程分為三個(gè)階段，leader election合蔽，log replication和commit(safety)击敌。
每個(gè)server處于三個(gè)狀態(tài)：leader，follower拴事，candidate沃斤。正常情況下，所有server中只有一個(gè)是leader刃宵，其它的都是follower衡瓶。server之間通過RPC消息通信。follower不會(huì)主動(dòng)發(fā)起RPC消息牲证。leader和candidate(選主的時(shí)候)會(huì)主動(dòng)發(fā)起RPC消息哮针。
首先選擇一個(gè)leader全權(quán)負(fù)責(zé)管理日志復(fù)制，leader從客戶端接收log entries，將它們復(fù)制給集群中的其它機(jī)器十厢，然后負(fù)責(zé)告訴其它機(jī)器什么時(shí)候?qū)⑷罩緫?yīng)用于它們的狀態(tài)機(jī)等太。舉個(gè)例子，leader可以在無需詢問其它server的情況下決定把新entries放在哪個(gè)位置寿烟，數(shù)據(jù)永遠(yuǎn)是從leader流向其它機(jī)器澈驼。一個(gè)leader可以fail或者與其他機(jī)器失去連接，這種情形下會(huì)有新的leader被選舉出來筛武。
http://www.jdon.com/artichect/raft.html
http://blog.csdn.net/cszhouwei/article/details/38374603支持多數(shù)據(jù)中心缝其，內(nèi)外網(wǎng)的服務(wù)采用不同的端口進(jìn)行監(jiān)聽。這樣可以避免單點(diǎn)故障徘六。
zookeeper等不支持多數(shù)據(jù)中心功能的支持支持健康檢查
提供web界面
支持http協(xié)議與dns協(xié)議接口
安裝
我的是mac os x
通過工具安裝：
brew cask install consul
brew cask安裝也很方便
http://brew.sh/#install
- 測(cè)試 與 運(yùn)行consul
測(cè)試
consul
以服務(wù)端形式運(yùn)行consul
consul agent -server -bootstrap-expect 1 -data-dir /tmp/consul
consul members
查看consul服務(wù)節(jié)點(diǎn)
將http請(qǐng)求發(fā)給consul server
$ curl localhost:8500/v1/catalog/nodes[{"Node":"Armons-MacBook-Air","Address":"10.1.10.38"}]
- 注冊(cè)服務(wù)
- 創(chuàng)建文件夾/etc/consul.d
.d代表有許多配置文件在里面
- 將服務(wù)配置文件寫入文件夾內(nèi)
如 $ echo ‘{"service": {"name": "web", "tags": ["rails"], "port": 80}}‘ >/etc/consul.d/web.json - 重啟consul内边，并將配置文件的路徑給consul
$ consul agent -server -bootstrap-expect 1 -data-dir /tmp/consul -config-dir /etc/consul.d - 查詢ip和端口
DNS方式：dig @127.0.0.1 -p 8600 web.service.consul SRV
Http方式：curl http://localhost:8500/v1/catalog/service/web - 更新
通過http api能對(duì)service配置文件增刪改查，如果更新完成后待锈，可以通過signup命令來生效 -
組建集群
一個(gè)consul agent就是一個(gè)獨(dú)立的程序漠其。一個(gè)長(zhǎng)時(shí)間運(yùn)行的守護(hù)進(jìn)程，運(yùn)行在concul集群中的每個(gè)節(jié)點(diǎn)上竿音。
啟動(dòng)一個(gè)consul agent 和屎，只是啟動(dòng)一個(gè)孤立的node，如果想知道集群中的其他節(jié)點(diǎn)春瞬，應(yīng)該將consul agent加入到集群中去 cluster柴信。
agent有兩種模式：server與client。server模式包含了一致性的工作：保證一致性和可用性（在部分失敗的情況下）宽气，響應(yīng)RPC随常，同步數(shù)據(jù)到其他節(jié)點(diǎn)代理。
client 模式用于與server進(jìn)行通信萄涯，轉(zhuǎn)發(fā)RPC到服務(wù)的代理agent绪氛，它僅保存自身的少量一些狀態(tài)，是非常輕量化的東西涝影。本身是相對(duì)無狀態(tài)的枣察。
agent除去設(shè)置server/client模式、數(shù)據(jù)路徑之外燃逻，還最好設(shè)置node的名稱和ip序目。
一張經(jīng)典的consul架構(gòu)圖片：
技術(shù)分享
LAN gossip pool包含了同一局域網(wǎng)內(nèi)所有節(jié)點(diǎn)，包括server與client唆樊。這基本上是位于同一個(gè)數(shù)據(jù)中心DC宛琅。
WAN gossip pool一般僅包含server刻蟹，將跨越多個(gè)DC數(shù)據(jù)中心逗旁，通過互聯(lián)網(wǎng)或廣域網(wǎng)進(jìn)行通信。
Leader服務(wù)器負(fù)責(zé)所有的RPC請(qǐng)求，查詢并相應(yīng)片效。所以其他服務(wù)器收到client的RPC請(qǐng)求時(shí)红伦，會(huì)轉(zhuǎn)發(fā)到leader服務(wù)器。
第一淀衣，沒有必要配置客戶端與服務(wù)器的地址; 發(fā)現(xiàn)是自動(dòng)完成的昙读。 第二，檢測(cè)節(jié)點(diǎn)故障的工作不放置在服務(wù)器上膨桥，但被分布蛮浑。 這使得故障檢測(cè)比天真的心跳方案更具擴(kuò)展性。 第三只嚣，它是作為一個(gè)消息層通知時(shí)沮稚，重要事件，如leader選舉舉行册舞。
安裝vagrant蕴掏， sudo vagrant init 初始化vagrant環(huán)境。
vagrant up 啟動(dòng)一個(gè)虛擬node節(jié)點(diǎn)
vagrant status 查看vm啟動(dòng)的狀態(tài)调鲸，包括vm的名稱
vagrant ssh vm_name 登陸到vm節(jié)點(diǎn)
bootstrap的模式盛杰，該模式node可以指定自己作為leader，而不用進(jìn)行選舉藐石。然后再依次啟動(dòng)其他server即供，配置為非bootstrap的模式。最后把第一個(gè)serverbootstrap模式停止贯钩，重新以非bootstrap模式啟動(dòng)募狂，這樣server之間就可以自動(dòng)選舉leader。
分別在兩個(gè)vm上配置consul agent角雷，如
$ vagrant ssh n1
vagrant@n1:~$ consul agent -server -bootstrap-expect 1 \ -data-dir /tmp/consul -node=agent-one -bind=172.20.20.10
$ vagrant ssh n2
vagrant@n2:~$ consul agent -data-dir /tmp/consul -node=agent-two \ -bind=172.20.20.11這個(gè)時(shí)候祸穷，應(yīng)用consul members 進(jìn)行查詢，兩個(gè)consul node分別是獨(dú)立勺三，沒有什么關(guān)聯(lián)雷滚。
將client加入到server 集群中
vagrant@n1:~$ consul join 172.20.20.11
再用consul members查詢，就發(fā)現(xiàn)多了一個(gè)node節(jié)點(diǎn)吗坚。
這樣手動(dòng)
加入新節(jié)點(diǎn)太麻煩祈远，而較好的方法就將節(jié)點(diǎn)配置成自動(dòng)加入集群
consul agent -atlas-join \ -atlas=ATLAS_USERNAME/infrastructure \ -atlas-token="YOUR_ATLAS_TOKEN"
離開集群
ctrl+c，或者 kill 指定的agent進(jìn)程商源，就可以將相關(guān)的agent推出集群
讓consul 運(yùn)行起來车份。consul server推薦至少在3~5個(gè)之間，推薦的方法是一開始啟動(dòng)其中一臺(tái)server牡彻，并且配置到bootstrap的模式扫沼，該模式node可以指定自己作為leader出爹，而不用進(jìn)行選舉。然后再依次啟動(dòng)其他server缎除，配置為非bootstrap的模式严就。最后把第一個(gè)serverbootstrap模式停止，重新以非bootstrap模式啟動(dòng)器罐，這樣server之間就可以自動(dòng)選舉leader梢为。
http://www.bubuko.com/infodetail-800623.html
- 查詢健康狀態(tài)
curl http://localhost:8500/v1/health/state/critical // 應(yīng)用http接口查詢失敗的節(jié)點(diǎn)對(duì)于失敗的節(jié)點(diǎn)，應(yīng)用DNS查詢時(shí)轰坊，是無法拿到返回結(jié)果的
dig @127.0.0.1 -p 8600 web.service.consul
- K/V存儲(chǔ)
consul還提供了鍵/值存儲(chǔ)的功能铸董。
如 查詢 所有K/V
curl -v http://localhost:8500/v1/kv/?recurse
保存鍵為web/key2, flags 為42， 值為true的記錄肴沫。
curl -X PUT -d ‘test‘ http://localhost:8500/v1/kv/web/key2?flags=42true
刪除記錄：
curl -X DELETE http://localhost:8500/v1/kv/web/sub?recurse
更新值：
curl -X PUT -d ‘newval‘ http://localhost:8500/v1/kv/web/key1?cas=97true
更新index：
curl "http://localhost:8500/v1/kv/web/key2?index=101&wait=5s"
結(jié)果：[{"CreateIndex":98,"ModifyIndex":101,"Key":"web/key2","Flags":42,"Value":"dGVzdA=="}]
更詳細(xì)的consul命令詳解：
