gRPC-go自定義負載均衡策略

前言

grpc默認支持兩種負載均衡算法pick_first 和 round_robin

輪詢法round_robin不能滿足因服務器配置不同而承擔不同負載量拐迁,這篇文章將介紹如何實現(xiàn)自定義負載均衡策略--加權隨機。

加權隨機法可以根據(jù)服務器的處理能力而分配不同的權重绿语,從而實現(xiàn)處理能力高的服務器可承擔更多的請求叹括,處理能力低的服務器少承擔請求隅熙。

上一篇我們實現(xiàn)resolverBuilder接口哲戚,用來解析服務器地址,而負載均衡算法就是在這個接口基礎上篩選出一個地址荤堪,這個過程是在客戶端發(fā)送請求的時候進行。

以下示例基于grpc v1.26.0版本,更高的版本不兼容etcd逞力,不方便測試曙寡,而接口名或者參數(shù)也會不同,不過原理是相似的

自定義負載均衡策略

使用自定義的負載均衡策略主要實現(xiàn)V2PickerBuilderV2Picker這兩個接口

type V2PickerBuilder interface {
    Build(info PickerBuildInfo) balancer.V2Picker
}

Build方法:返回一個V2選擇器寇荧,將用于gRPC選擇子連接。

type V2Picker interface {
    Pick(info PickInfo) (PickResult, error)
}

Pick方法:子連接選擇执隧,具體的算法在這個方法內實現(xiàn)

完整代碼:

package rpc

import (
    "google.golang.org/grpc/balancer"
    "google.golang.org/grpc/balancer/base"
    "google.golang.org/grpc/grpclog"
    "math/rand"
    "sync"
)

const WEIGHT_LB_NAME =  "weight"

func init() {
    balancer.Register(
        base.NewBalancerBuilderV2(WEIGHT_LB_NAME,&LocalBuilder{},base.Config{HealthCheck: false}))
}

type LocalBuilder struct {

}

func (*LocalBuilder) Build(info base.PickerBuildInfo) balancer.V2Picker {
    if len(info.ReadySCs) == 0 {
        return base.NewErrPickerV2(balancer.ErrNoSubConnAvailable)
    }
    var scs []balancer.SubConn
    for subConn,addr := range info.ReadySCs {
        weight := addr.Address.Attributes.Value("weight").(int)
        if weight <= 0 {
            weight = 1
        }
        for i := 0; i < weight; i++ {
            scs = append(scs, subConn)
        }
    }
    return &localPick{
        subConn: scs,
    }
}

type localPick struct {
    subConn []balancer.SubConn
    mu sync.Mutex
}

func  (l *localPick)Pick(info balancer.PickInfo) (r balancer.PickResult, err error){
    l.mu.Lock()
    index := rand.Intn(len(l.subConn))
    r.SubConn = l.subConn[index]
    l.mu.Lock()
    return r,nil
}

結合示例再看一下Build(info PickerBuildInfo) balancer.V2Picker這個方法的作用:

這個函數(shù)的返回值就是我們還要實現(xiàn)的第二個接口揩抡,所以這里主要看一下參數(shù)

type PickerBuildInfo struct {
    // ReadySCs is a map from all ready SubConns to the Addresses used to
    // create them.
    ReadySCs map[balancer.SubConn]
}

type SubConnInfo struct {
    Address resolver.Address // the address used to create this SubConn
}

ReadySCs:是所有可用的子連接
balancer.SubConn:是一個子連接的結構,這里我們不用關心這個值镀琉,在pick里面直接返回就可以了峦嗤。
SubConnInfo:里面是一個Address的結構

type Address struct {
    Addr string
    ServerName string

    // Attributes contains arbitrary data about this address intended for
    // consumption by the load balancing policy.
    Attributes *attributes.Attributes  
    Type AddressType
    Metadata interface{}
}
...
...
type Attributes struct {
    m map[interface{}]interface{}
}

這個Address就是上一篇中resolverBuilder中設置的值,所以這兩個功能是有聯(lián)系的屋摔,Attributes的m是一個map烁设,剛剛好保存我們需要的權重weight

結下來就是Pick方法
Pick(info balancer.PickInfo) (r balancer.PickResult, err error)

type PickInfo struct {
    // FullMethodName is the method name that NewClientStream() is called
    // with. The canonical format is /service/Method.
    FullMethodName string    //eg : /User/GetInfo
    // Ctx is the RPC's context, and may contain relevant RPC-level information
    // like the outgoing header metadata.
    Ctx context.Context
}

type PickResult struct {
    SubConn SubConn
    Done func(DoneInfo)
}

FullMethodName:對應XXXpb.go中生成的FullMethod: "/Memo/GetMemo",
Ctx: 如注釋所說,包含metadata
PickResult: 返回的子連接
Done:rpc完成之后調用Done

使用新建的策略

func main()  {
    grpc.UseCompressor(gzip.Name)
    conn, err := grpc.Dial(
        fmt.Sprintf("%s:///%s", "game", baseService),
        //grpc.WithDefaultServiceConfig(fmt.Sprintf(`{"LoadBalancingPolicy": "%s"}`, roundrobin.Name)),
        grpc.WithDefaultServiceConfig(fmt.Sprintf(`{"LoadBalancingPolicy": "%s"}`, rpc.WEIGHT_LB_NAME)),
        grpc.WithInsecure(),
    )  
      ...
}
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末钓试,一起剝皮案震驚了整個濱河市装黑,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌弓熏,老刑警劉巖恋谭,帶你破解...
    沈念sama閱讀 206,214評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異挽鞠,居然都是意外死亡疚颊,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評論 2 382
  • 文/潘曉璐 我一進店門信认,熙熙樓的掌柜王于貴愁眉苦臉地迎上來材义,“玉大人,你說我怎么就攤上這事嫁赏∑涞啵” “怎么了?”我有些...
    開封第一講書人閱讀 152,543評論 0 341
  • 文/不壞的土叔 我叫張陵橄教,是天一觀的道長清寇。 經常有香客問我,道長护蝶,這世上最難降的妖魔是什么华烟? 我笑而不...
    開封第一講書人閱讀 55,221評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮持灰,結果婚禮上盔夜,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好喂链,可當我...
    茶點故事閱讀 64,224評論 5 371
  • 文/花漫 我一把揭開白布返十。 她就那樣靜靜地躺著,像睡著了一般椭微。 火紅的嫁衣襯著肌膚如雪洞坑。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,007評論 1 284
  • 那天蝇率,我揣著相機與錄音迟杂,去河邊找鬼。 笑死本慕,一個胖子當著我的面吹牛排拷,可吹牛的內容都是我干的。 我是一名探鬼主播锅尘,決...
    沈念sama閱讀 38,313評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼监氢,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了藤违?” 一聲冷哼從身側響起浪腐,我...
    開封第一講書人閱讀 36,956評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎纺弊,沒想到半個月后牛欢,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經...
    沈念sama閱讀 43,441評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡淆游,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 35,925評論 2 323
  • 正文 我和宋清朗相戀三年傍睹,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片犹菱。...
    茶點故事閱讀 38,018評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡拾稳,死狀恐怖,靈堂內的尸體忽然破棺而出腊脱,到底是詐尸還是另有隱情访得,我是刑警寧澤,帶...
    沈念sama閱讀 33,685評論 4 322
  • 正文 年R本政府宣布陕凹,位于F島的核電站悍抑,受9級特大地震影響,放射性物質發(fā)生泄漏杜耙。R本人自食惡果不足惜搜骡,卻給世界環(huán)境...
    茶點故事閱讀 39,234評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望佑女。 院中可真熱鬧记靡,春花似錦谈竿、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,240評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至寸痢,卻和暖如春呀洲,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背轿腺。 一陣腳步聲響...
    開封第一講書人閱讀 31,464評論 1 261
  • 我被黑心中介騙來泰國打工两嘴, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人族壳。 一個月前我還...
    沈念sama閱讀 45,467評論 2 352
  • 正文 我出身青樓,卻偏偏與公主長得像趣些,于是被迫代替她去往敵國和親仿荆。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 42,762評論 2 345