使用rsync -arLP進(jìn)行斷點(diǎn)續(xù)傳

在不同節(jié)點(diǎn)進(jìn)行數(shù)據(jù)傳輸?shù)臅r(shí)候,如果數(shù)據(jù)文件大小數(shù)目比較大的話使用scp經(jīng)常會(huì)傳到一半給斷掉。
這里我改成了rsync進(jìn)行斷點(diǎn)續(xù)傳坤候,不過(guò)這種方法也會(huì)有時(shí)候斷掉。所以我這里補(bǔ)充了一個(gè)使用while循環(huán)的操作企蹭,即如果斷掉了白筹,那就接著來(lái),循環(huán)指定次數(shù)谅摄,直到全部跑完徒河。不過(guò)這種方式也有不足之處,有時(shí)候全部傳完了也會(huì)繼續(xù)跑送漠。但是也無(wú)傷大雅顽照,只要全部傳完就可以啦~

直接放腳本scp.sh,如下:

# 設(shè)置參數(shù)
indir=$1  # 上傳文件夾
num=$2  # 循環(huán)次數(shù)
log_dir=`pwd`
for i in `seq 1 $num`
do
    echo $i >> $log_dir/copy.log
expect -c "
set timeout 2000
#spawn scp -r $indir <你的目標(biāo)賬戶名>@<你的目標(biāo)IP>:<你的目標(biāo)目錄>
spawn rsync -arLP $indir <你的目標(biāo)賬戶名>@<你的目標(biāo)IP>:<你的目標(biāo)目錄>
#--- 自動(dòng)填充密碼 ---
expect {
    \"password:\" {log_file $log_dir/copy.log;send \"<你的目標(biāo)賬戶名密碼>\r\";}
    timeout { puts \" time out\" ;exit 1 }
}
expect eof"
done

運(yùn)行很簡(jiǎn)單闽寡,如下

bash <上傳文件夾> <次數(shù)int>

要注意代兵,上傳文件夾不能有/在最后面,如果有的話會(huì)直接上傳文件夾里面的內(nèi)容爷狈,而不是整個(gè)文件夾V灿啊!淆院!

最后會(huì)在本地跑的路徑下面生成一個(gè)copy.log的日志文件何乎,記錄了上傳的數(shù)據(jù)日志


copy.log日志

如果不想要這個(gè)日志,可以在腳本里面設(shè)置rsync -arPrsync -arp土辩。具體的參數(shù)解釋如下(參考:http://www.ruanyifeng.com/blog/2020/08/rsync.html

-a支救、--archive參數(shù)表示存檔模式,保存所有的元數(shù)據(jù)拷淘,比如修改時(shí)間(modification time)各墨、權(quán)限、所有者等启涯,并且軟鏈接也會(huì)同步過(guò)去
-r參數(shù)表示遞歸贬堵,即包含子目錄恃轩。
--progress參數(shù)表示顯示進(jìn)展。
--partial參數(shù)允許恢復(fù)中斷的傳輸黎做。不使用該參數(shù)時(shí)叉跛,rsync會(huì)刪除傳輸?shù)揭话氡淮驍嗟奈募皇褂迷搮?shù)后蒸殿,傳輸?shù)揭话氲奈募矔?huì)同步到目標(biāo)目錄筷厘,下次同步時(shí)再恢復(fù)中斷的傳輸。一般需要與--append或--append-verify配合使用宏所。
-P參數(shù)是--progress和--partial這兩個(gè)參數(shù)的結(jié)合酥艳。
-l 保留軟連接
若是拷貝的原目錄里面有一個(gè)軟鏈接文件,那這個(gè)軟鏈接文件指向到了另外一個(gè)目錄下
在加上-l爬骤,它會(huì)把軟鏈接文件本身拷貝到目標(biāo)目錄里面去
-L 加上該選項(xiàng)后充石,同步軟鏈接時(shí)會(huì)把源文件給同步

如果跑完了會(huì)在在文件夾中出現(xiàn)了如下信息:


跑完了

最后,大功告成霞玄!如果設(shè)置的次數(shù)還沒(méi)有傳完骤铃,則再繼續(xù)提交即可,會(huì)接著上傳溃列。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末劲厌,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子听隐,更是在濱河造成了極大的恐慌补鼻,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,427評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件雅任,死亡現(xiàn)場(chǎng)離奇詭異风范,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)沪么,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,551評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門硼婿,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人禽车,你說(shuō)我怎么就攤上這事寇漫。” “怎么了殉摔?”我有些...
    開(kāi)封第一講書人閱讀 165,747評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵州胳,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我逸月,道長(zhǎng)栓撞,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書人閱讀 58,939評(píng)論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮瓤湘,結(jié)果婚禮上瓢颅,老公的妹妹穿的比我還像新娘。我一直安慰自己弛说,他們只是感情好挽懦,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,955評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著剃浇,像睡著了一般巾兆。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上虎囚,一...
    開(kāi)封第一講書人閱讀 51,737評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音蔫磨,去河邊找鬼淘讥。 笑死,一個(gè)胖子當(dāng)著我的面吹牛堤如,可吹牛的內(nèi)容都是我干的蒲列。 我是一名探鬼主播,決...
    沈念sama閱讀 40,448評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼搀罢,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼蝗岖!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起榔至,我...
    開(kāi)封第一講書人閱讀 39,352評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤抵赢,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后唧取,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體铅鲤,經(jīng)...
    沈念sama閱讀 45,834評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,992評(píng)論 3 338
  • 正文 我和宋清朗相戀三年枫弟,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了邢享。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,133評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡淡诗,死狀恐怖骇塘,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情韩容,我是刑警寧澤款违,帶...
    沈念sama閱讀 35,815評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站宙攻,受9級(jí)特大地震影響奠货,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜座掘,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,477評(píng)論 3 331
  • 文/蒙蒙 一递惋、第九天 我趴在偏房一處隱蔽的房頂上張望柔滔。 院中可真熱鬧萍虽,春花似錦超全、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 32,022評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)财异。三九已至戳寸,卻和暖如春疫鹊,著一層夾襖步出監(jiān)牢的瞬間订晌,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 33,147評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留缝彬,地道東北人谷浅。 一個(gè)月前我還...
    沈念sama閱讀 48,398評(píng)論 3 373
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像掌猛,于是被迫代替她去往敵國(guó)和親荔茬。 傳聞我的和親對(duì)象是個(gè)殘疾皇子慕蔚,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,077評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容