Consul注銷實例時候的問題

當(dāng)我們在Spring Cloud應(yīng)用中使用Consul來實現(xiàn)服務(wù)治理時蜂大,由于Consul不會自動將不可用的服務(wù)實例注銷掉(deregister),這使得在實際使用過程中蝶怔,可能因為一些操作失誤奶浦、環(huán)境變更等原因讓Consul中存在一些無效實例信息,而這些實例在Consul中會長期存在踢星,并處于斷開狀態(tài)澳叉。它們雖然不會影響到正常的服務(wù)消費過程,但是它們會干擾我們的監(jiān)控沐悦,所以我們可以實現(xiàn)一個清理接口成洗,在確認(rèn)故障實例可以清理的時候進(jìn)行調(diào)用來將這些無效信息清理掉。

開始以為只要簡單的調(diào)用注銷接口就能輕松完成藏否,但是實際實踐的發(fā)現(xiàn)并非如此瓶殃。因此,分享一下整個實現(xiàn)過程以及中間遇到的一些坑秕岛。

借鑒Spring Cloud Consul

在實現(xiàn)之初碌燕,先參考了Spring Cloud Consul在關(guān)閉程序時候?qū)崿F(xiàn)的注銷方法,具體如下:

public class ConsulLifecycle extends AbstractDiscoveryLifecycle {
    ...

    private void deregister(String serviceId) {
        if (!this.properties.isRegister()) {
            return;
        }
        if (ttlScheduler != null) {
            ttlScheduler.remove(serviceId);
        }
        log.info("Deregistering service with consul: {}", serviceId);
        client.agentServiceDeregister(serviceId);
    }

    ...
}

我們可以看到继薛,當(dāng)應(yīng)用關(guān)閉時候的注銷操作是通過調(diào)用client.agentServiceDeregister(serviceId)來實現(xiàn)的修壕。其中client是consul-api的com.ecwid.consul.v1.ConsulClient實例。而agentServiceDeregister方法則是對/v1/agent/service/deregister/<serviceID> 接口的實現(xiàn)遏考,該接口主要用來從Consul Agent中根據(jù)serviceId來注銷實例慈鸠。

以此實現(xiàn)為范例,于是開始的思路是這樣的:

  • 先通過consulClient.getHealthServices(serviceId, false, null)根據(jù)serviceId來獲取服務(wù)實例清單
  • 遍歷實例清單中有不是PASSING狀態(tài)的實例灌具,就調(diào)用client.agentServiceDeregister(serviceId)來剔除

具體實現(xiàn)如下:

@RestController
public class ApiController {

    @Autowired
    private ConsulClient consulClient;

    @RequestMapping(value = "/unregister/{id}", method = RequestMethod.POST)
    public String unregisterServiceAll(@PathVariable String id) {
        List<HealthService> response = consulClient.getHealthServices(id, false, null).getValue();
        for(HealthService service : response) {
            service.getChecks().forEach(check -> {
                if(!check.getStatus().name().equals(Check.CheckStatus.PASSING.name())) {
                    logger.info("unregister : {}", check.getServiceId());
                    consulClient.agentServiceDeregister(check.getServiceId());
                }
            });
        }
        return null;
    }
}

但是青团,在測試后發(fā)現(xiàn)該方法只能剔除同一個agent上的非PASSING實例。

Catalog誤區(qū)

繼續(xù)搜索了一下Consul的文檔咖楣,發(fā)現(xiàn)了這個接口:/v1/catalog/deregister : Deregisters a node, service, or check督笆。于是,嘗試了用該接口來替換之前的consulClient.agentServiceDeregister(check.getServiceId());實現(xiàn)诱贿。

CatalogDeregistration catalogDeregistration = new CatalogDeregistration();
catalogDeregistration.setDatacenter("dc1");
catalogDeregistration.setNode(check.getNode());
catalogDeregistration.setServiceId(check.getServiceId());
catalogDeregistration.setCheckId(check.getCheckId());
consulClient.catalogDeregister(catalogDeregistration);

經(jīng)過測試娃肿,該方法可以實現(xiàn)短暫的剔除,但是過一段時間之后這些被剔除的實例又都恢復(fù)回來了……也就是說這個接口完全沒有什么卵用珠十!

那么為什么會出現(xiàn)這種情況呢料扰?我們可以在Github中找到這個維持了一年多的問題討論:https://github.com/hashicorp/consul/issues/1188 。整個討論過程非常曲折焙蹭,雖然當(dāng)前該問題還依然在open狀態(tài)晒杈,但是一些回復(fù)也基本夠我們?nèi)ダ斫馑脑蛄恕1热缦旅孢@條評論:

You cannot deregister a service from the agent on a different node, service only exists on the agent you have registered with. It also exists in the catalog on all nodes, but that is not related to the agent itself. And to be honest I don't understand why there is a catalog/deregister endpoint at all, in my opinion catalog should be a read-only service list.

從該評論中孔厉,我們可以知道一個重要信息:服務(wù)實例只能在注冊的Agent上進(jìn)行注銷拯钻!另外帖努,對于/v1/catalog/deregister接口,目前還是有不少爭議的说庭,因為根本沒啥用然磷。

最終實現(xiàn)

既然服務(wù)實例只能在注冊的Agent上進(jìn)行注銷,那么我們的實現(xiàn)完全可以按照該思路來實現(xiàn)刊驴,方法很簡單,只需要對一開始實現(xiàn)的內(nèi)容做一些調(diào)整寡润,依然使用client.agentServiceDeregister(serviceId)方法捆憎,只是我們需要調(diào)整client連接的agent必須是serviceId注冊的agent。所以梭纹,最終的修改結(jié)果如下:

List<HealthService> response = consulClient.getHealthServices(id, false, null).getValue();
for(HealthService service : response) {
    // 創(chuàng)建一個用來剔除無效實例的ConsulClient躲惰,連接到無效實例注冊的agent
    ConsulClient clearClient = new ConsulClient(service.getNode().getAddress(), 8500);
    service.getChecks().forEach(check -> {
        if(check.getStatus() != Check.CheckStatus.PASSING) {
            logger.info("unregister : {}", check.getServiceId());
            clearClient.agentServiceDeregister(check.getServiceId());
        }
    });
}
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市变抽,隨后出現(xiàn)的幾起案子础拨,更是在濱河造成了極大的恐慌,老刑警劉巖绍载,帶你破解...
    沈念sama閱讀 217,277評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件诡宗,死亡現(xiàn)場離奇詭異,居然都是意外死亡击儡,警方通過查閱死者的電腦和手機塔沃,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,689評論 3 393
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來阳谍,“玉大人蛀柴,你說我怎么就攤上這事〗煤唬” “怎么了鸽疾?”我有些...
    開封第一講書人閱讀 163,624評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長训貌。 經(jīng)常有香客問我制肮,道長,這世上最難降的妖魔是什么旺订? 我笑而不...
    開封第一講書人閱讀 58,356評論 1 293
  • 正文 為了忘掉前任弄企,我火速辦了婚禮,結(jié)果婚禮上区拳,老公的妹妹穿的比我還像新娘拘领。我一直安慰自己,他們只是感情好樱调,可當(dāng)我...
    茶點故事閱讀 67,402評論 6 392
  • 文/花漫 我一把揭開白布约素。 她就那樣靜靜地躺著届良,像睡著了一般。 火紅的嫁衣襯著肌膚如雪圣猎。 梳的紋絲不亂的頭發(fā)上士葫,一...
    開封第一講書人閱讀 51,292評論 1 301
  • 那天,我揣著相機與錄音送悔,去河邊找鬼慢显。 笑死,一個胖子當(dāng)著我的面吹牛欠啤,可吹牛的內(nèi)容都是我干的荚藻。 我是一名探鬼主播,決...
    沈念sama閱讀 40,135評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼洁段,長吁一口氣:“原來是場噩夢啊……” “哼应狱!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起祠丝,我...
    開封第一講書人閱讀 38,992評論 0 275
  • 序言:老撾萬榮一對情侶失蹤疾呻,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后写半,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體岸蜗,經(jīng)...
    沈念sama閱讀 45,429評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,636評論 3 334
  • 正文 我和宋清朗相戀三年污朽,在試婚紗的時候發(fā)現(xiàn)自己被綠了散吵。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,785評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡蟆肆,死狀恐怖矾睦,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情炎功,我是刑警寧澤枚冗,帶...
    沈念sama閱讀 35,492評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站蛇损,受9級特大地震影響赁温,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜淤齐,卻給世界環(huán)境...
    茶點故事閱讀 41,092評論 3 328
  • 文/蒙蒙 一股囊、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧更啄,春花似錦稚疹、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,723評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽怪嫌。三九已至,卻和暖如春柳沙,著一層夾襖步出監(jiān)牢的瞬間岩灭,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,858評論 1 269
  • 我被黑心中介騙來泰國打工赂鲤, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留噪径,地道東北人。 一個月前我還...
    沈念sama閱讀 47,891評論 2 370
  • 正文 我出身青樓蛤袒,卻偏偏與公主長得像熄云,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子妙真,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,713評論 2 354

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn)荚守,斷路器珍德,智...
    卡卡羅2017閱讀 134,654評論 18 139
  • [轉(zhuǎn)] 1. 什么是consul? 是一個服務(wù)管理軟件矗漾。支持多數(shù)據(jù)中心下锈候,分布式高可用的,服務(wù)發(fā)現(xiàn)和配置共享敞贡。co...
    baboon閱讀 3,043評論 0 7
  • 在互聯(lián)網(wǎng)應(yīng)用領(lǐng)域泵琳,服務(wù)的動態(tài)性需求十分常見,這就對服務(wù)的自動發(fā)現(xiàn)和可動態(tài)擴展提出了很高的要求誊役。 微服務(wù)系統(tǒng)動輒上萬...
    Liberalman閱讀 8,052評論 23 80
  • consul是golang開發(fā)的一個高可用的分布式服務(wù)注冊系統(tǒng)获列,有service discovery和key/va...
    auguszou閱讀 2,268評論 0 6
  • 時光如梭,過的飛快蛔垢,3.0轉(zhuǎn)眼間過了60天击孩,而這60天帶來的變化是巨大的。 讀書確實是件有福氣的事情鹏漆,以前不覺得巩梢,...
    易效能張倩閱讀 234評論 9 11