Redis Pipelining

Redis Pipelining可以一次發(fā)送多個(gè)命令璧诵,并按順序執(zhí)行邪财、返回結(jié)果,節(jié)省RTT(Round Trip Time)。

使用Pipelining

Jedis客戶端支持Redis的Pipelining坝初,使用方式如下:

public static void main(String[] args) {
    Jedis jedis = null;
    Pipeline pipeline = null;
    try{
        jedis = new Jedis("localhost", 6379);
        //使用pipeline
        pipeline = jedis.pipelined();
        //開(kāi)始時(shí)間
        long start = System.currentTimeMillis();
        //刪除lists
        pipeline.del("lists");
        //循環(huán)添加10000個(gè)元素
        for(int i = 0; i < 10000; i++){
            pipeline.rpush("lists", i + "");
        }
        //執(zhí)行
        pipeline.sync();
        //結(jié)束時(shí)間
        long end = System.currentTimeMillis();
        System.out.println(end - start);
    }catch (Exception e){
        e.printStackTrace();
    }finally {
        if(pipeline != null){
            try {
                pipeline.close();
            } catch (IOException e) {
                e.printStackTrace();
            }
        }

        if(jedis != null){
            jedis.close();
        }
    }
}

=> "237"

同樣的命令,不使用Pipelining消耗時(shí)間是800ms-900ms钾军。測(cè)試時(shí)Redis Server和Client都運(yùn)行在同一臺(tái)機(jī)器鳄袍,由于本地環(huán)回接口(loopback interface)的原因RTT會(huì)非常短,真實(shí)環(huán)境下的差距會(huì)更大吏恭。

從協(xié)議層面看Pipelining

從Redis的RESP協(xié)議上看拗小,Pipelining并沒(méi)有什么特殊的地方,只是把多個(gè)命令連續(xù)的發(fā)送給Redis Server樱哼,然后一一解析返回結(jié)果:

public static void main(String[] args) throws Exception{

    Socket socket = new Socket();
    //TIME_WAIT狀態(tài)下可以復(fù)用端口
    socket.setReuseAddress(true);
    //空閑時(shí)發(fā)送數(shù)據(jù)包哀九,確認(rèn)服務(wù)端狀態(tài)
    socket.setKeepAlive(true);
    //關(guān)閉Nagle算法,盡快發(fā)送
    socket.setTcpNoDelay(true);
    //調(diào)用close方法立即關(guān)閉socket搅幅,丟棄所有未發(fā)送的數(shù)據(jù)包
    socket.setSoLinger(true, 0);
    //連接server
    socket.connect(new InetSocketAddress("localhost", 6379), 3000);
    //設(shè)置讀取時(shí)超時(shí)時(shí)間
    socket.setSoTimeout(3000);

    OutputStream os = socket.getOutputStream();
    InputStream is = socket.getInputStream();
    /**
     * SET 命令  寫第一個(gè)命令
     * 協(xié)議: array 3個(gè)元素 SET simpleKey simpleValue
     */
    os.write(getBytes("*3\r\n$3\r\nSET\r\n$9\r\nsimpleKey\r\n$11\r\nsimpleValue\r\n"));

    /**
     * GET 命令  寫第二個(gè)命令
     * 協(xié)議: array 2個(gè)元素 GET simpleKey
     */
    os.write(getBytes("*2\r\n$3\r\nGET\r\n$9\r\nsimpleKey\r\n"));

    os.flush();

    /**
     * 解析第一個(gè)命令SET的返回結(jié)果
     */
    String result = analysisResult(is);

    System.out.println("SET command response : " + result);
    System.out.println();

    /**
     * 解析第二個(gè)命令GET返回結(jié)果
     */
    String value = analysisResult(is);
    System.out.println("GET command response : " + value);

}

=>
response type is : +
SET command response : OK

response type is : $
$ value len : 11
GET command response : simpleValue

RESP協(xié)議和詳細(xì)代碼可以參考《Redis協(xié)議:RESP》阅束。

Jedis的Pipelining實(shí)現(xiàn)方式

Pipeline pipeline = jedis.pipelined();

通過(guò)Jedis對(duì)象的pipelined方法可以創(chuàng)建Pipeline對(duì)象。pipelined方法內(nèi)部實(shí)際上是把Jedis對(duì)象的client賦給了pipeline茄唐。在《Redis客戶端:Jedis》中介紹過(guò)Jedis類的結(jié)構(gòu)息裸,Pipeline類的結(jié)構(gòu)與Jedis類似也實(shí)現(xiàn)了多個(gè)接口。不同的是方法的返回值沪编,所有Pipeline中方法的返回值都被封裝成了Response類呼盆。

當(dāng)通過(guò)Pipeline對(duì)象執(zhí)行命令時(shí),同樣也會(huì)委托給內(nèi)部的Client對(duì)象去執(zhí)行蚁廓,但不會(huì)立即調(diào)用client的getXXX方法獲取返回結(jié)果访圃,而是創(chuàng)建了一個(gè)Response對(duì)象:

  public Response<Long> del(String key) {
    getClient(key).del(key);
    return getResponse(BuilderFactory.LONG);
  }

DEL命令的返回值是0或1表示是否刪除成功,所以傳入了BuilderFactory.LONG用來(lái)解析Integer型的返回結(jié)果相嵌。

  protected <T> Response<T> getResponse(Builder<T> builder) {
    Response<T> lr = new Response<T>(builder);
    pipelinedResponses.add(lr);
    return lr;
  }

在getResponse方法中腿时,創(chuàng)建了Response對(duì)象克胳,每個(gè)Response對(duì)象都有一個(gè)解析返回結(jié)果的Builder。Response按照命令的執(zhí)行順序被添加到pipelinedResponses隊(duì)列中圈匆。

Pipeline對(duì)象的sync方法會(huì)真正的執(zhí)行命令:

  public void sync() {
    if (getPipelinedResponseLength() > 0) {
      //這里會(huì)真正的調(diào)用client執(zhí)行命令漠另,并獲取返回結(jié)果
      List<Object> unformatted = client.getAll();
      //將按照協(xié)議解析、分隔好的返回結(jié)果跃赚,按順序賦給隊(duì)列中的Response
      for (Object o : unformatted) {
        generateResponse(o);
      }
    }
  }

在getAll方法中會(huì)按照RESP協(xié)議的結(jié)構(gòu)解析返回結(jié)果笆搓,將輸入流中的內(nèi)容按照協(xié)議格式切分成每個(gè)命令的返回結(jié)果:

  public List<Object> getAll(int except) {
    List<Object> all = new ArrayList<Object>();
    //執(zhí)行命令
    flush();
    //pipelinedCommands是一個(gè)計(jì)數(shù)器,記錄了執(zhí)行了多少個(gè)命令
    while (pipelinedCommands > except) {
      try {
        //readProtocolWithCheckingBroken中解析了返回結(jié)果
        all.add(readProtocolWithCheckingBroken());
      } catch (JedisDataException e) {
        all.add(e);
      }
      //每解析一個(gè)命令纬傲,計(jì)數(shù)減1满败,為0時(shí)退出循環(huán)
      pipelinedCommands--;
    }
    return all;
  }

readProtocolWithCheckingBroken方法解析的方式與普通Jedis解析方式一致。當(dāng)從Response獲取返回結(jié)果時(shí)叹括,會(huì)用設(shè)置好的Builder把unformatted的數(shù)據(jù)轉(zhuǎn)換成對(duì)應(yīng)的結(jié)構(gòu)算墨。

public class Response<T> {
    protected T response = null;
    ...
    
    //通過(guò)get獲取命令返回值
    public T get() {
        ...
        if (!built) {
           //通過(guò)builder格式化返回結(jié)果
            build();
        }
        ...
        return response;
    }
    
    private void build() {
        ...
        response = builder.build(data);
        ...
    }
}
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市汁雷,隨后出現(xiàn)的幾起案子净嘀,更是在濱河造成了極大的恐慌,老刑警劉巖侠讯,帶你破解...
    沈念sama閱讀 222,464評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件挖藏,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡厢漩,警方通過(guò)查閱死者的電腦和手機(jī)膜眠,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,033評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)溜嗜,“玉大人宵膨,你說(shuō)我怎么就攤上這事≌ㄏ” “怎么了辟躏?”我有些...
    開(kāi)封第一講書(shū)人閱讀 169,078評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)焙压。 經(jīng)常有香客問(wèn)我鸿脓,道長(zhǎng),這世上最難降的妖魔是什么涯曲? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 59,979評(píng)論 1 299
  • 正文 為了忘掉前任野哭,我火速辦了婚禮,結(jié)果婚禮上幻件,老公的妹妹穿的比我還像新娘拨黔。我一直安慰自己,他們只是感情好绰沥,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,001評(píng)論 6 398
  • 文/花漫 我一把揭開(kāi)白布篱蝇。 她就那樣靜靜地躺著贺待,像睡著了一般。 火紅的嫁衣襯著肌膚如雪零截。 梳的紋絲不亂的頭發(fā)上麸塞,一...
    開(kāi)封第一講書(shū)人閱讀 52,584評(píng)論 1 312
  • 那天,我揣著相機(jī)與錄音涧衙,去河邊找鬼哪工。 笑死,一個(gè)胖子當(dāng)著我的面吹牛弧哎,可吹牛的內(nèi)容都是我干的雁比。 我是一名探鬼主播,決...
    沈念sama閱讀 41,085評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼撤嫩,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼偎捎!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起序攘,我...
    開(kāi)封第一講書(shū)人閱讀 40,023評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤茴她,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后两踏,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體败京,經(jīng)...
    沈念sama閱讀 46,555評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,626評(píng)論 3 342
  • 正文 我和宋清朗相戀三年梦染,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片朴皆。...
    茶點(diǎn)故事閱讀 40,769評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡帕识,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出遂铡,到底是詐尸還是另有隱情肮疗,我是刑警寧澤,帶...
    沈念sama閱讀 36,439評(píng)論 5 351
  • 正文 年R本政府宣布扒接,位于F島的核電站伪货,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏钾怔。R本人自食惡果不足惜碱呼,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,115評(píng)論 3 335
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望宗侦。 院中可真熱鬧愚臀,春花似錦、人聲如沸矾利。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,601評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至舶斧,卻和暖如春欣鳖,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背茴厉。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,702評(píng)論 1 274
  • 我被黑心中介騙來(lái)泰國(guó)打工泽台, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人呀忧。 一個(gè)月前我還...
    沈念sama閱讀 49,191評(píng)論 3 378
  • 正文 我出身青樓师痕,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親而账。 傳聞我的和親對(duì)象是個(gè)殘疾皇子胰坟,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,781評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容