關(guān)于 Redis 的 keyspace notification(密鑰空間通知)這個東西和環(huán)形隊(duì)列

我決定收尾呼應(yīng)先來說一下廢墟樂隊(duì)的新專輯《正大光明》挺尾。哈哈哈哈

首先是需求,其實(shí)我們想做的就是一個定時發(fā)系統(tǒng)消息的任務(wù)魂挂。這個時間節(jié)點(diǎn)是后臺進(jìn)行設(shè)置的。然而這個定時任務(wù)是需要精確到秒的果正。所以如果用 Linux 的 crontab 就不是很合適辅肾。所以就想別的方法要尔。

然后就看到了網(wǎng)上說的 keyspace notification(密鑰空間通知)這個東西既绩。但我告訴你蚕键,這是其實(shí)是不行的笆怠。不哄你,

這里 有相關(guān)介紹办成,并且該功能是自** 2.8.0 *版本之后可用的功能状答。如果使用該功能需要到 redis 的配置中 配置 notify-keyspace-events 的參數(shù)為 “Ex” 或者 “Kx”拍摇。x 代表了過期事件 *大概就是一種你的 redis 的 key 發(fā)生變化的時候就會觸發(fā)這個功能蜂莉,并且通知你。比如你的 key 過期了蚁滋,刪除了之類的。

他會發(fā)送兩種類型:

  • K鍵空間通知,所有通知以 __keyspace@ __ 為前綴的

  • E鍵事件通知蚣旱,所有通知以 __keyevent@ __ 為前綴的

我們本來的思路是后臺每添加一個定時任務(wù)的時候猜欺,就直接在 redis 里存一個具有時效性的key (SETEX涧黄、EXPIRE)窄潭,當(dāng)該 key 失效的時候就會觸發(fā) K 或者 E 的通知月帝,收到通知后我們就做發(fā)消息處理距误。為了避免和其他的時效 key 有混淆趁俊,redis 的密鑰空間通知是提供正則匹配的。所以美滋滋的實(shí)現(xiàn)了代碼:

/**
 * Redis處理類
 */
class RedisInstance {

    private $redis;

    public function __construct($host = '127.0.0.1', $port = 6379) {
        $this->redis = new Redis();
        $this->redis->connect($host, $port);
    }

    public function expire($key = null, $time = 0) {
        return $this->redis->expire($key, $time);
    }

    public function psubscribe($patterns = array(), $callback) {
        $this->redis->psubscribe($patterns, $callback);
    }

    public function setOption() {
        $this->redis->setOption(\Redis::OPT_READ_TIMEOUT,-1);
    }
}

這里沒有寫具體的消息處理,只是收到通知并且把 key 打印出來!

<?php
/**
 * 處理BI后臺消息定時發(fā)送
 * User: 郭貳小姐
 * Date: 2017/4/13
 * Time: 下午9:47
 */
require_once '/data/momoma.com/redis/RedisInstance.php';
$redis = new \RedisInstance();
// 解決Redis客戶端訂閱時候超時情況
$redis->setOption();
$redis->psubscribe(array('__keyspace@0*gm_cp*'), 'psCallback');
// 回調(diào)函數(shù),這里寫處理邏輯
function psCallback($redis, $pattern, $chan, $msg)
{
    echo "Pattern: $pattern\n";
    echo "Channel: $chan\n";
    echo "Payload: $msg\n\n";
}

結(jié)果饲梭,無論是用 Ex 還是用 Kx 都不是很好使,有時候可以收到通知穿扳,有時候很久都收不到通知。

那么 why? 為什么?我覺得大概的原因是:

首先 官方 最后一段關(guān)于這個 “過期活動的時間” 的說法忆首,我理解的就是,當(dāng)某個 key 過期了的時候妒潭,實(shí)際上他并沒有馬上刪除冯凹,所以并不會馬上去通知浑劳,什么情況會下觸發(fā)過期并且通知:

  1. 當(dāng)密鑰被命令訪問并被發(fā)現(xiàn)已過期時蒜绽。
  2. Redis會隨機(jī)掃帶有過期時間的 key相赁,當(dāng)掃到并發(fā)現(xiàn)已過期時間跺嗽。

所以官方講:如果沒有命令不斷地定位密鑰璃吧,并且有許多與TTL相關(guān)聯(lián)的密鑰,則在關(guān)鍵生存時間到零之間的時間和生成過期事件的時間之間(就是你設(shè)置了某個 key 失效時間【比如60秒】和該 key 實(shí)際失效并且觸發(fā)通知事件的時間 【可能70秒】)可能存在顯著的延遲。

其次 還有什么原因我就不得而知了...哈哈哈

既然不行

那只能再想別的辦法,后來參考了 1分鐘實(shí)現(xiàn)“延遲消息”功能 做一個環(huán)形隊(duì)列片仿,大概原理就是:

環(huán)形隊(duì)列

做一個3600(其實(shí)我做了60)的環(huán)形隊(duì)列可帽,當(dāng)你有一個任務(wù)是59秒后執(zhí)行努隙,你就可以將這個任務(wù)存到第59個格里躬存,然后圈數(shù)存為0盾剩。當(dāng)你有一個任務(wù)需要61秒后執(zhí)行,那你可以將這個任務(wù)存到第一個格里,但是圈數(shù)要存為1。

然后有一個定時器,每秒鐘都會沿著這個圈中的小格無線循環(huán)下去徘意。當(dāng)然這個定時器小人跳到某一格勤讽,他會把該格子中所有圈數(shù)為0的數(shù)據(jù)都處理掉券膀,圈數(shù)不為0的雀监,可能需要下一圈或者下下很多圈才需要處理蔚万。

這就是原理淮蜈,如果你沒太理解可以去看下原文,如果你看懂了是不是覺得,嗨泡仗,確實(shí)是這么回事截亦。這TM有點(diǎn)意思哈...然而并沒有什么卵用,代碼我還是不會寫。

這個環(huán)形隊(duì)列要怎么實(shí)現(xiàn)呢?我想了下可以用 redis 的哈希來實(shí)現(xiàn):

//添加任務(wù) hash
$value = [0=>['a任務(wù)','b任務(wù)'],1=>['c任務(wù)'],2=>['d任務(wù)']];
$value = json_encode($value);
$redis->hSet('cycle','second_1',$value);

$value = [0=>['e任務(wù)','f任務(wù)'],1=>['g任務(wù)'],2=>['h任務(wù)']];
$value = json_encode($value);
$redis->hSet('cycle','second_2',$value);

然后是小人跳格子的環(huán)形隊(duì)列:

/**
* 小人跳格子的環(huán)形隊(duì)列啊
* User: 郭貳小姐
* Date: 2017/4/16
* Time: 下午10:38
*/
require_once '/data/momoma.com/redis/RedisInstance.php';
$redis = new \RedisInstance();

// 執(zhí)行任務(wù)的函數(shù)
function task($task){
   //if(!empty($task)){
   echo "----開始一次執(zhí)行任務(wù)----\n";
   foreach ($task as $val){
       echo "正在執(zhí)行 $val\n";
   }
}

while (true){
   for ($i=1;$i<=60;$i++){
       // 存儲當(dāng)前指針的位置
       $redis->set('current',$i);
       $val = $redis->hGet('cycle','second_'.$i);
       $val = json_decode($val);

       if($val){
           // 執(zhí)行當(dāng)前要執(zhí)行的任務(wù)
           task($val[0]);
           array_shift($val);
           // 把剩余的任務(wù)重新寫到redis
           $val = json_encode($val);
           $redis->hSet('cycle','second_'.$i,$val);
       } else {
           echo "$i 當(dāng)前時間沒有任務(wù)可執(zhí)行\(zhòng)n";
       }
       sleep(1);
   }
}

額好吧鲫尊,我這里用的 sleep(1)革为,你可以用 swoole 來做定時器。

但是其實(shí)這個方案我們最終并沒有用崎逃,就算用 swoole 來做定時器巴柿,配合 supervisor 來實(shí)現(xiàn)進(jìn)程管理。我覺得還差點(diǎn)什么吶...

最后谐鼎,聽一首,不,是一張專輯。來自廢墟樂隊(duì)的2017新專輯钉汗,從大二開始聽周云山的廢墟樂隊(duì)肪凛。說實(shí)話,這張新專輯也是等了好久的,終于出了绎秒,滿心歡喜阅懦。美滋滋废登。

美滋滋

《正大光明》 - 來自廢墟樂隊(duì)

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末缩多,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子四苇,更是在濱河造成了極大的恐慌片拍,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,941評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件颓屑,死亡現(xiàn)場離奇詭異溪猿,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)缴渊,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,397評論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人陨亡,你說我怎么就攤上這事×呛罚” “怎么了?”我有些...
    開封第一講書人閱讀 165,345評論 0 356
  • 文/不壞的土叔 我叫張陵儡首,是天一觀的道長鹅髓。 經(jīng)常有香客問我重归,道長育苟,這世上最難降的妖魔是什么违柏? 我笑而不...
    開封第一講書人閱讀 58,851評論 1 295
  • 正文 為了忘掉前任漱竖,我火速辦了婚禮,結(jié)果婚禮上笨枯,老公的妹妹穿的比我還像新娘硫嘶。我一直安慰自己尸执,他們只是感情好送粱,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,868評論 6 392
  • 文/花漫 我一把揭開白布褪贵。 她就那樣靜靜地躺著,像睡著了一般抗俄。 火紅的嫁衣襯著肌膚如雪脆丁。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,688評論 1 305
  • 那天动雹,我揣著相機(jī)與錄音槽卫,去河邊找鬼。 笑死洽胶,一個胖子當(dāng)著我的面吹牛晒夹,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播姊氓,決...
    沈念sama閱讀 40,414評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼丐怯,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了翔横?” 一聲冷哼從身側(cè)響起读跷,我...
    開封第一講書人閱讀 39,319評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎禾唁,沒想到半個月后效览,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,775評論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡荡短,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,945評論 3 336
  • 正文 我和宋清朗相戀三年丐枉,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片掘托。...
    茶點(diǎn)故事閱讀 40,096評論 1 350
  • 序言:一個原本活蹦亂跳的男人離奇死亡瘦锹,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情弯院,我是刑警寧澤辱士,帶...
    沈念sama閱讀 35,789評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站听绳,受9級特大地震影響颂碘,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜椅挣,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,437評論 3 331
  • 文/蒙蒙 一头岔、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧鼠证,春花似錦切油、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,993評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽孕荠。三九已至娩鹉,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間稚伍,已是汗流浹背弯予。 一陣腳步聲響...
    開封第一講書人閱讀 33,107評論 1 271
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留个曙,地道東北人锈嫩。 一個月前我還...
    沈念sama閱讀 48,308評論 3 372
  • 正文 我出身青樓,卻偏偏與公主長得像垦搬,于是被迫代替她去往敵國和親呼寸。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,037評論 2 355

推薦閱讀更多精彩內(nèi)容

  • 1.1 資料 猴贰,最好的入門小冊子对雪,可以先于一切文檔之前看,免費(fèi)米绕。 作者Antirez的博客瑟捣,Antirez維護(hù)的R...
    JefferyLcm閱讀 17,059評論 1 51
  • 分布式緩存技術(shù)PK:選擇Redis還是Memcached迈套? 經(jīng)平臺同意授權(quán)轉(zhuǎn)載 作者:田京昆(騰訊后臺研發(fā)工程師)...
    meng_philip123閱讀 68,926評論 7 60
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn)碱鳞,斷路器桑李,智...
    卡卡羅2017閱讀 134,660評論 18 139
  • 相戀的小情侶幾乎都一樣,大多數(shù)通常都是要經(jīng)歷新鮮期、熱戀期芙扎、降溫期和冷淡期這四個戀愛階段星岗。前兩個階段可謂是充滿了甜...
    Ketno花間閱讀 1,509評論 5 2
  • 無奈的我們想的多做的少害怕卻又不珍惜
    化沙閱讀 79評論 0 1