k8s flexvolume lvm使用

我們?cè)谧鋈罩臼占桨高x型的時(shí)候,ops 給的方案是日志先落盤老翘,然后再做收集芹啥。這樣做有一個(gè)好處,對(duì)應(yīng)用沒有影響铺峭,據(jù)說其他公司有通過網(wǎng)絡(luò)收集日志的墓怀,后來收集系統(tǒng)出故障導(dǎo)致應(yīng)用 hang 住。 ops 推薦使用了 flexvolume 插件來支持可擴(kuò)展 lvm 方案

學(xué)習(xí)了解:

先推薦幾個(gè)經(jīng)典的教程:

  https://diamanti.com/flexvolume-explored/
  https://github.com/kubernetes/kubernetes/tree/master/examples/volumes/flexvolume
  http://leebriggs.co.uk/blog/2017/03/12/kubernetes-flexvolumes.html

官網(wǎng)的例子在 https://github.com/kubernetes/community/blob/master/contributors/devel/flexvolume.md

簡單說卫键,flexvolume 支持用戶自定義 volume driver, 這種方式非常靈活傀履,driver 只需要定義實(shí)現(xiàn)幾個(gè)接口即可

  • init
  • attach
  • detach
  • mount
  • unmount

官網(wǎng)用的 bash 定義的 lvm driver 應(yīng)該是使用最廣泛的,這個(gè)不限于 bash, 還可以使用其他語言實(shí)現(xiàn)這些接口莉炉, 使用 bash 應(yīng)該是考慮通用性方面钓账。

使用 xfs 文件系統(tǒng)做 lvm 遇到的坑點(diǎn)

雖然 lvm shell 腳本中的幾個(gè)函數(shù)非常簡單,但還是免不了遇到問題絮宁。我們?cè)賶簻y(cè)創(chuàng)建 100個(gè) deployment (每一個(gè)掛一個(gè) xfs 的lvm volume)梆暮,每次壓測(cè)會(huì)有一個(gè) volume mount 失敗,導(dǎo)致 pod 一致再 containterCreating 狀態(tài)中,

通過日志發(fā)現(xiàn)绍昂,正在 mount 的 volume type 類型是 xfs_external_log, 通過科普發(fā)現(xiàn) xfs 還有 logdev 這種 volume 類型惕蹄,看一下 lvm 的實(shí)現(xiàn)中

VOLFSTYPE=`blkid -o udev ${DMDEV} 2>/dev/null|grep "ID_FS_TYPE"|cut -d"=" -f2`
   if [ "${VOLFSTYPE}" == "" ]; then
     mkfs -t ${FSTYPE} ${DMDEV} >/dev/null 2>&1
     if [ $? -ne 0 ]; then
         err "{ \"status\": \"Failure\", \"message\": \"Failed to create fs ${FSTYPE} on device ${DMDEV}\"}"
         exit 1
     fi
fi

如果發(fā)現(xiàn) volume type 為空就做格式化,但是缺漏掉了 xfs_external_log 這種類型,xfs_external_log 類型也需要做初始化才能 mount 成功. 可以更改為

    if [ "${VOLFSTYPE}" == "" ] || [ "${VOLFSTYPE}" == "xfs_external_log" ]

這樣就避免了 xfs_external_log 類型的 volume mount 失敗卖陵。

flexvolume 的插件是都在 k8s 集群外部實(shí)現(xiàn)的遭顶,維護(hù)沒有那么方便,看官方已經(jīng)有 pr 在 k8s 內(nèi)部實(shí)現(xiàn)第三方 volume 插件的支持, 期待中 ...

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末泪蔫,一起剝皮案震驚了整個(gè)濱河市棒旗,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌撩荣,老刑警劉巖铣揉,帶你破解...
    沈念sama閱讀 218,122評(píng)論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異餐曹,居然都是意外死亡逛拱,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,070評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門台猴,熙熙樓的掌柜王于貴愁眉苦臉地迎上來朽合,“玉大人,你說我怎么就攤上這事饱狂〔懿剑” “怎么了?”我有些...
    開封第一講書人閱讀 164,491評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵休讳,是天一觀的道長讲婚。 經(jīng)常有香客問我,道長俊柔,這世上最難降的妖魔是什么筹麸? 我笑而不...
    開封第一講書人閱讀 58,636評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮雏婶,結(jié)果婚禮上物赶,老公的妹妹穿的比我還像新娘。我一直安慰自己尚骄,他們只是感情好块差,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,676評(píng)論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著倔丈,像睡著了一般憨闰。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上需五,一...
    開封第一講書人閱讀 51,541評(píng)論 1 305
  • 那天鹉动,我揣著相機(jī)與錄音,去河邊找鬼宏邮。 笑死泽示,一個(gè)胖子當(dāng)著我的面吹牛缸血,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播械筛,決...
    沈念sama閱讀 40,292評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼捎泻,長吁一口氣:“原來是場噩夢(mèng)啊……” “哼!你這毒婦竟也來了埋哟?” 一聲冷哼從身側(cè)響起笆豁,我...
    開封第一講書人閱讀 39,211評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎赤赊,沒想到半個(gè)月后闯狱,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,655評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡抛计,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,846評(píng)論 3 336
  • 正文 我和宋清朗相戀三年哄孤,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片吹截。...
    茶點(diǎn)故事閱讀 39,965評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡瘦陈,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出饭弓,到底是詐尸還是另有隱情双饥,我是刑警寧澤媒抠,帶...
    沈念sama閱讀 35,684評(píng)論 5 347
  • 正文 年R本政府宣布弟断,位于F島的核電站,受9級(jí)特大地震影響趴生,放射性物質(zhì)發(fā)生泄漏阀趴。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,295評(píng)論 3 329
  • 文/蒙蒙 一苍匆、第九天 我趴在偏房一處隱蔽的房頂上張望刘急。 院中可真熱鬧,春花似錦浸踩、人聲如沸叔汁。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,894評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽据块。三九已至,卻和暖如春折剃,著一層夾襖步出監(jiān)牢的瞬間另假,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,012評(píng)論 1 269
  • 我被黑心中介騙來泰國打工怕犁, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留边篮,地道東北人己莺。 一個(gè)月前我還...
    沈念sama閱讀 48,126評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像戈轿,于是被迫代替她去往敵國和親凌受。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,914評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容

  • feisky云計(jì)算思杯、虛擬化與Linux技術(shù)筆記posts - 1014, comments - 298, trac...
    不排版閱讀 3,849評(píng)論 0 5
  • 注: 所有命令都要切換到 root 用戶下執(zhí)行,通過 sudo su 命令可切換到 root 用戶 ,這樣就不需要...
    余帶鹽閱讀 2,326評(píng)論 0 4
  • 始於點(diǎn)滴胁艰,行於洶涌,匯於浩瀚智蝠,靜於無極腾么。 一一少一
    抱樸齋主閱讀 128評(píng)論 0 0
  • 午后的陽光不算慵懶解虱,秋天也不像秋天。不知道該怎么形容……二十出頭怎么有那么多力不從心漆撞,不知道怎么努力殴泰,害怕...
    Dharma59閱讀 295評(píng)論 0 0
  • 愛情來了可以發(fā)生在那么一瞬間的回眸,也可以在千百個(gè)日夜的陪伴浮驳。 一點(diǎn)點(diǎn)的積累讓你確定是曾以為最不可能的他悍汛。 01 ...
    J木木菇?jīng)?/span>閱讀 245評(píng)論 0 1