Centos7使用s3fs掛載Ceph rgw bucket實(shí)測(cè)

1.簡介

s3fs允許Linux和macOS通過FUSE掛載ceph rgw bucket,s3fs保留文件原來的對(duì)象格式虎敦。本文簡要測(cè)試在Centos下掛載ceph rgw bucket陡叠。

2.環(huán)境配置信息說明

ceph版本:Nautilus 14.2.8
操作系統(tǒng)信息:Centos7

3.配置實(shí)測(cè)

3.1 安裝s3fs-fuse

sudo yum install epel-release
sudo yum install s3fs-fuse

3.2配置s3fs密鑰文件

命令:

echo ACCESS_KEY_ID:SECRET_ACCESS_KEY > ${HOME}/.passwd-s3fs
chmod 600 ${HOME}/.passwd-s3fs

ACCESS_KEY_ID:測(cè)試bucket用戶的access_key
SECRET_ACCESS_KEY:測(cè)試bucket用戶的secret_key
例如:用戶test的access_key為123456,secret_key為654321隅忿,則:

[root@node44 s3fs]# echo 123456:654321 > ~/.passwd-s3fs
[root@node44 s3fs]# cat /root/.passwd-s3fs 
123456:654321
[root@node44 s3fs]# chmod 600 ~/.passwd-s3fs

3.3掛載bucket

命令:

s3fs <bucketname> <mountpoint> -o passwd_file=${HOME}/.passwd-s3fs -o url=http://url:7480 -o use_path_request_style

<bucketname>:替換實(shí)踐需要掛載的桶名
<mountpoint>:替換掛載點(diǎn)
例如:將test用戶的testbucket掛載到/root/mnt_s3fs下,則:

s3fs testbucket /root/mnt_s3fs/ -o passwd_file=~/.passwd-s3fs -o url=http://10.0.9.44:7480 -o use_path_request_style

查看掛載是否成功:

[root@node44 ~]# df | grep s3fs
s3fs                                     274877906944        0 274877906944   0% /root/mnt_s3fs
[root@node44 ~]# 

3.4簡要測(cè)試

測(cè)試寫入:


4.s3fs特性

兼容POSIX的較大子集,包括讀/寫文件荣倾,目錄,符號(hào)鏈接骑丸,模式舌仍,uid / gid和擴(kuò)展屬性
與Amazon S3和其他基于S3的對(duì)象存儲(chǔ)兼容
允許隨機(jī)寫入和追加
通過分段上傳大文件
通過服務(wù)器端副本重命名
可選的服務(wù)器端加密
通過MD5哈希保證數(shù)據(jù)完整性
內(nèi)存中緩存元數(shù)據(jù)
用戶指定的區(qū)域,包括Amazon GovCloud
可通過v2或v4簽名進(jìn)行身份驗(yàn)證

5.s3fs局限性

通常者娱,S3無法提供與本地文件系統(tǒng)相同的性能或語義抡笼。進(jìn)一步來說:
隨機(jī)寫入或追加文件需要重寫整個(gè)對(duì)象,使用分段上傳副本進(jìn)行了優(yōu)化
元數(shù)據(jù)操作(如列出目錄)由于網(wǎng)絡(luò)延遲而導(dǎo)致性能不佳
非AWS提供商可能最終具有一致性黄鳍,因此讀取可以臨時(shí)生成陳舊數(shù)據(jù)(AWS自2020年12月以來提供寫入后讀取一致性)
不支持文件或目錄的原子重命名
掛載同一存儲(chǔ)桶的多個(gè)客戶端之間沒有協(xié)調(diào)
不支持硬鏈接
inotify僅檢測(cè)本地修改推姻,而不檢測(cè)其他客戶端或工具的外部修改

6. 參考鏈接

詳情見:
https://github.com/s3fs-fuse/s3fs-fuse

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市框沟,隨后出現(xiàn)的幾起案子藏古,更是在濱河造成了極大的恐慌,老刑警劉巖忍燥,帶你破解...
    沈念sama閱讀 219,039評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件拧晕,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡梅垄,警方通過查閱死者的電腦和手機(jī)厂捞,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,426評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來队丝,“玉大人靡馁,你說我怎么就攤上這事』茫” “怎么了臭墨?”我有些...
    開封第一講書人閱讀 165,417評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長膘盖。 經(jīng)常有香客問我胧弛,道長,這世上最難降的妖魔是什么侠畔? 我笑而不...
    開封第一講書人閱讀 58,868評(píng)論 1 295
  • 正文 為了忘掉前任结缚,我火速辦了婚禮,結(jié)果婚禮上践图,老公的妹妹穿的比我還像新娘掺冠。我一直安慰自己,他們只是感情好码党,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,892評(píng)論 6 392
  • 文/花漫 我一把揭開白布德崭。 她就那樣靜靜地躺著,像睡著了一般揖盘。 火紅的嫁衣襯著肌膚如雪眉厨。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,692評(píng)論 1 305
  • 那天兽狭,我揣著相機(jī)與錄音憾股,去河邊找鬼。 笑死箕慧,一個(gè)胖子當(dāng)著我的面吹牛服球,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播颠焦,決...
    沈念sama閱讀 40,416評(píng)論 3 419
  • 文/蒼蘭香墨 我猛地睜開眼斩熊,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了伐庭?” 一聲冷哼從身側(cè)響起粉渠,我...
    開封第一講書人閱讀 39,326評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎圾另,沒想到半個(gè)月后霸株,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,782評(píng)論 1 316
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡集乔,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,957評(píng)論 3 337
  • 正文 我和宋清朗相戀三年去件,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片扰路。...
    茶點(diǎn)故事閱讀 40,102評(píng)論 1 350
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡尤溜,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出幼衰,到底是詐尸還是另有隱情靴跛,我是刑警寧澤,帶...
    沈念sama閱讀 35,790評(píng)論 5 346
  • 正文 年R本政府宣布渡嚣,位于F島的核電站梢睛,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏识椰。R本人自食惡果不足惜绝葡,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,442評(píng)論 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望腹鹉。 院中可真熱鬧藏畅,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,996評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至榜旦,卻和暖如春幽七,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背溅呢。 一陣腳步聲響...
    開封第一講書人閱讀 33,113評(píng)論 1 272
  • 我被黑心中介騙來泰國打工澡屡, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人咐旧。 一個(gè)月前我還...
    沈念sama閱讀 48,332評(píng)論 3 373
  • 正文 我出身青樓驶鹉,卻偏偏與公主長得像,于是被迫代替她去往敵國和親铣墨。 傳聞我的和親對(duì)象是個(gè)殘疾皇子室埋,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,044評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容