BFG Repo-Cleaner 的使用

官網(wǎng)

https://rtyley.github.io/bfg-repo-cleaner/
最新版需要確保本地的java為Jdk8+

背景(我為什么要使用這個工具)

最近開發(fā)中有一個需求票编,就是讓我從一個倉庫clone代碼下來拷姿,然后提交到另一個倉庫凡桥,需求確實不算難仔涩,理想情況:從一個地址clone下來掖疮,然后push到另一個地址盼玄,結(jié)束≈雀裕現(xiàn)實:↗↘↗↘↘↗
在往另一個倉庫push的時候爆阶,發(fā)現(xiàn)另一個倉庫的服務(wù)器不支持這么大的文件(500多M)的庫上傳。
所以我在詢問過負(fù)責(zé)人之后溶褪,告訴我可以把附件刪除币旧,只保留代碼即可,但是手動刪除之后猿妈,倉庫還是那么大吹菱,因為在倉庫的歷史中還是有這些附件的記錄的,所以就需要把這些附件從歷史中進(jìn)行刪除彭则。

工具的使用

1鳍刷、上官網(wǎng)下載BFG Repo-Cleaner的客戶端(jar包)

2、使用--mirror克隆一個新的倉庫

$ git clone --mirror git://example.com/some-big-repo.git
--mirror 后為倉庫地址俯抖,可以用https或者ssh

在進(jìn)行操作之前输瓜,最好備份下這個庫,操作出了問題用這個備份庫即可芬萍,不用再重新下載尤揣。

下載好的庫的格式:


image.png

倉庫內(nèi)的文件格式

ps:在啟動客戶端時,報錯:不是一個有效的庫(is not a invalid repository)柬祠,就按上面的方式重新clone北戏。

3、刪除不需要的文件

將下載好的jar放到下載好的git庫的同級目錄
刪除大于100M的文件

$ java -jar bfg.jar --strip-blobs-bigger-than 100M some-big-repo.git

刪除大于100M的文件

BFG將更新您的提交以及所有分支和標(biāo)記瓶盛,此時還沒有物理刪除最欠。使用gc去除git認(rèn)為多余的數(shù)據(jù)(上面調(diào)用命令刪除的文件)示罗。

$ cd some-big-repo.git
$ git reflog expire --expire=now --all && git gc --prune=now --aggressive

調(diào)用上面的命令后惩猫,文件將徹底刪除(everywhere)。

4蚜点、將代碼提交到遠(yuǎn)程倉庫

確保文件沒有任何問題之后轧房,將代碼提交到遠(yuǎn)程倉庫,這將影響遠(yuǎn)程服務(wù)器上所有的refs绍绘。

$ git push

如果有必要奶镶,讓其他人刪除原來的倉庫,因為原來的倉庫中還是有臟數(shù)據(jù)陪拘,有可能會再次提交到遠(yuǎn)程倉庫厂镇。

5、其他命令

1.刪除所有的名為'id_dsa'或'id_rsa'的文件
$ java -jar bfg.jar --delete-files id_{dsa,rsa}  my-repo.git

2.刪除所有大于50M的文件
$ java -jar bfg.jar --strip-blobs-bigger-than 50M  my-repo.git

3.刪除文件夾下所有的文件
$ java -jar bfg.jar --delete-folders doc  my-repo.git

6左刽、注意

刪除文件后別忘了gc命令捺信,工具不會清除最近一次提交的文件內(nèi)容,如果需要刪除欠痴,使用
--no-blob-protection迄靠,官方不推薦秒咨。在刪除前最好確保最新的提交為干凈的。

7掌挚、詳細(xì)命令

bfg 1.13.0
Usage: bfg [options] [<repo>]

  -b, --strip-blobs-bigger-than <size>
                           strip blobs bigger than X (eg '128K', '1M', etc)
  -B, --strip-biggest-blobs NUM
                           strip the top NUM biggest blobs
  -bi, --strip-blobs-with-ids <blob-ids-file>
                           strip blobs with the specified Git object ids
  -D, --delete-files <glob>
                           delete files with the specified names (eg '*.class', '*.{txt,log}' - matches on file name, not path within repo)
  --delete-folders <glob>  delete folders with the specified names (eg '.svn', '*-tmp' - matches on folder name, not path within repo)
  --convert-to-git-lfs <value>
                           extract files with the specified names (eg '*.zip' or '*.mp4') into Git LFS
  -rt, --replace-text <expressions-file>
                           filter content of files, replacing matched text. Match expressions should be listed in the file, one expression per line - by default, each expression is treated as a literal, but 'regex:' & 'glob:' prefixes are supported, with '==>' to specify a replacement string other than the default of '***REMOVED***'.
  -fi, --filter-content-including <glob>
                           do file-content filtering on files that match the specified expression (eg '*.{txt,properties}')
  -fe, --filter-content-excluding <glob>
                           don't do file-content filtering on files that match the specified expression (eg '*.{xml,pdf}')
  -fs, --filter-content-size-threshold <size>
                           only do file-content filtering on files smaller than <size> (default is 1048576 bytes)
  -p, --protect-blobs-from <refs>
                           protect blobs that appear in the most recent versions of the specified refs (default is 'HEAD')
  --no-blob-protection     allow the BFG to modify even your *latest* commit. Not recommended: you should have already ensured your latest commit is clean.
  --private                treat this repo-rewrite as removing private data (for example: omit old commit ids from commit messages)
  --massive-non-file-objects-sized-up-to <size>
                           increase memory usage to handle over-size Commits, Tags, and Trees that are up to X in size (eg '10M')
  <repo>                   file path for Git repository to clean
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末雨席,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子吠式,更是在濱河造成了極大的恐慌陡厘,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,651評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件奇徒,死亡現(xiàn)場離奇詭異雏亚,居然都是意外死亡,警方通過查閱死者的電腦和手機摩钙,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,468評論 3 392
  • 文/潘曉璐 我一進(jìn)店門罢低,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人胖笛,你說我怎么就攤上這事网持。” “怎么了长踊?”我有些...
    開封第一講書人閱讀 162,931評論 0 353
  • 文/不壞的土叔 我叫張陵功舀,是天一觀的道長。 經(jīng)常有香客問我身弊,道長辟汰,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,218評論 1 292
  • 正文 為了忘掉前任阱佛,我火速辦了婚禮帖汞,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘凑术。我一直安慰自己翩蘸,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,234評論 6 388
  • 文/花漫 我一把揭開白布淮逊。 她就那樣靜靜地躺著催首,像睡著了一般。 火紅的嫁衣襯著肌膚如雪泄鹏。 梳的紋絲不亂的頭發(fā)上郎任,一...
    開封第一講書人閱讀 51,198評論 1 299
  • 那天,我揣著相機與錄音备籽,去河邊找鬼舶治。 笑死,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的歼疮。 我是一名探鬼主播杂抽,決...
    沈念sama閱讀 40,084評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼韩脏!你這毒婦竟也來了缩麸?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,926評論 0 274
  • 序言:老撾萬榮一對情侶失蹤赡矢,失蹤者是張志新(化名)和其女友劉穎杭朱,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體吹散,經(jīng)...
    沈念sama閱讀 45,341評論 1 311
  • 正文 獨居荒郊野嶺守林人離奇死亡弧械,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,563評論 2 333
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了空民。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片刃唐。...
    茶點故事閱讀 39,731評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖界轩,靈堂內(nèi)的尸體忽然破棺而出画饥,到底是詐尸還是另有隱情,我是刑警寧澤浊猾,帶...
    沈念sama閱讀 35,430評論 5 343
  • 正文 年R本政府宣布抖甘,位于F島的核電站,受9級特大地震影響葫慎,放射性物質(zhì)發(fā)生泄漏衔彻。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,036評論 3 326
  • 文/蒙蒙 一偷办、第九天 我趴在偏房一處隱蔽的房頂上張望艰额。 院中可真熱鬧,春花似錦爽篷、人聲如沸悴晰。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,676評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至漂辐,卻和暖如春泪喊,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背髓涯。 一陣腳步聲響...
    開封第一講書人閱讀 32,829評論 1 269
  • 我被黑心中介騙來泰國打工袒啼, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 47,743評論 2 368
  • 正文 我出身青樓蚓再,卻偏偏與公主長得像滑肉,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子摘仅,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,629評論 2 354

推薦閱讀更多精彩內(nèi)容