rgw:數(shù)據(jù)訪問加速(D3N)

介紹

D3N全稱是Datacenter-Data-Delivery Network (D3N) 妇汗,簡單理解是在rgw網(wǎng)關(guān)節(jié)點上把存儲在rados集群的數(shù)據(jù)緩存起來,這種對于rgw網(wǎng)關(guān)和rados集群分離部署的場景效果非常好说莫,少了rgw網(wǎng)關(guān)到rados集群的網(wǎng)絡(luò)開銷和rados集群讀取數(shù)據(jù)的開銷杨箭。

P版已經(jīng)release到16.2.5,但是這個功能沒有跟著release储狭,還在開發(fā)中互婿。

配置

配置起來還是很簡單的,在rgw網(wǎng)關(guān)節(jié)點操作辽狈,假設(shè)/dev/sdd1是nvme ssd分區(qū)

1慈参、mkdir -p /mnt/nvme0/

2、mount /dev/sdd1 /mnt/nvme0/

3刮萌、mkdir -p /mnt/nvme0/rgw_datacache/client.rgw.8000/

4驮配、修改ceph.conf,在[client.rgw.8000]下增加如下配置 :

[client.rgw.8000]
rgw_d3n_l1_local_datacache_enabled = true   # 表示開啟D3N功能
rgw_d3n_l1_datacache_persistent_path = "/mnt/nvme0/rgw_datacache/client.rgw.8000/"  # 該rgw實例緩存數(shù)據(jù)的目錄 rgw_d3n_l1_datacache_size = 10737418240 # 緩存大小是10G尊勿,單位bytes
rgw_d3n_l1_eviction_policy = lru    # 緩存淘汰策略僧凤,有兩種:random和lru,默認(rèn)是lru

如果網(wǎng)關(guān)節(jié)點上有多個rgw實例元扔,那么將可以把每個rgw實例的緩存目錄分開,例如在[client.rgw.8001]的rgw_d3n_l1_datacache_ persistent_ path =”/mnt/nvme0/rgw_datacache/client.rgw.8001/”旋膳。

日志

日志也會打在在radosgw.xx.log中澎语,D3N相關(guān)的日志行包含了D3N關(guān)鍵字⊙榘茫可以通過debug_rgw_datacache調(diào)整日志界別擅羞,最高30。

幾個注意點

1义图、每次重啟rgw網(wǎng)關(guān)實例時减俏,都會清除其對應(yīng)的緩存目錄的數(shù)據(jù)。

2碱工、不會緩存被rgw網(wǎng)關(guān)壓縮的對象娃承。

3奏夫、不會緩存由rgw網(wǎng)關(guān)加密的對象。

4历筝、如果rgw_max_chunk_size配置與rgw_obj_stripe_size配置不同酗昼,D3N將會失效。

這里還沒有本地實測梳猪,后面搞下麻削,參考:https://docs.ceph.com/en/latest/radosgw/d3n_datacache/

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市春弥,隨后出現(xiàn)的幾起案子呛哟,更是在濱河造成了極大的恐慌,老刑警劉巖匿沛,帶你破解...
    沈念sama閱讀 216,402評論 6 499
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件竖共,死亡現(xiàn)場離奇詭異,居然都是意外死亡俺祠,警方通過查閱死者的電腦和手機(jī)公给,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,377評論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來蜘渣,“玉大人淌铐,你說我怎么就攤上這事∧韪祝” “怎么了腿准?”我有些...
    開封第一講書人閱讀 162,483評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長拾碌。 經(jīng)常有香客問我吐葱,道長,這世上最難降的妖魔是什么校翔? 我笑而不...
    開封第一講書人閱讀 58,165評論 1 292
  • 正文 為了忘掉前任弟跑,我火速辦了婚禮,結(jié)果婚禮上防症,老公的妹妹穿的比我還像新娘孟辑。我一直安慰自己,他們只是感情好蔫敲,可當(dāng)我...
    茶點故事閱讀 67,176評論 6 388
  • 文/花漫 我一把揭開白布饲嗽。 她就那樣靜靜地躺著,像睡著了一般奈嘿。 火紅的嫁衣襯著肌膚如雪貌虾。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,146評論 1 297
  • 那天裙犹,我揣著相機(jī)與錄音尽狠,去河邊找鬼衔憨。 笑死,一個胖子當(dāng)著我的面吹牛晚唇,可吹牛的內(nèi)容都是我干的巫财。 我是一名探鬼主播,決...
    沈念sama閱讀 40,032評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼哩陕,長吁一口氣:“原來是場噩夢啊……” “哼平项!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起悍及,我...
    開封第一講書人閱讀 38,896評論 0 274
  • 序言:老撾萬榮一對情侶失蹤闽瓢,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后心赶,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體扣讼,經(jīng)...
    沈念sama閱讀 45,311評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,536評論 2 332
  • 正文 我和宋清朗相戀三年缨叫,在試婚紗的時候發(fā)現(xiàn)自己被綠了椭符。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,696評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡耻姥,死狀恐怖销钝,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情琐簇,我是刑警寧澤蒸健,帶...
    沈念sama閱讀 35,413評論 5 343
  • 正文 年R本政府宣布,位于F島的核電站婉商,受9級特大地震影響似忧,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜丈秩,卻給世界環(huán)境...
    茶點故事閱讀 41,008評論 3 325
  • 文/蒙蒙 一盯捌、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧癣籽,春花似錦挽唉、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽匠童。三九已至埂材,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間汤求,已是汗流浹背俏险。 一陣腳步聲響...
    開封第一講書人閱讀 32,815評論 1 269
  • 我被黑心中介騙來泰國打工严拒, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人竖独。 一個月前我還...
    沈念sama閱讀 47,698評論 2 368
  • 正文 我出身青樓裤唠,卻偏偏與公主長得像,于是被迫代替她去往敵國和親莹痢。 傳聞我的和親對象是個殘疾皇子种蘸,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,592評論 2 353

推薦閱讀更多精彩內(nèi)容