rsync-集群機器之間的拷貝

一般情況下都是用scp進行拷貝株汉,這里介紹一個更加優(yōu)質的工具——rsync

rsync 遠程同步工具

rsync主要用于備份和鏡像冒版。具有速度快液茎、避免復制相同內容和支持符號鏈接的優(yōu)點。

rsync和scp區(qū)別: 用rsync做文件的復制要比scp的速度快,rsync只對差異文件做更新捆等。scp是把所有文件都復制過去哼凯。

安裝:

yum install rsync -y
命令 選項參數(shù) 要拷貝的文件路徑/名稱 目的用戶@主機:目的路徑/名稱
rsync -av $pdir/$fname $user@hadoop$host:$pdir/$fname

選項參數(shù)說明:

選項 功能
-a 歸檔拷貝(全拷貝,包括權限,時間戳,遞歸目錄等等)
-v 顯示復制過程

eg:把node2上的/opt/soft目錄同步到node1的/opt目錄下(root用戶),默認是root
(實例是遠端文件復制到本機)

# root@node2
[root@node1  opt]$ rsync -av node2:/opt/soft  /opt/soft

最后,奉上一個拷貝腳本:

#!/bin/bash
#判斷是否有參數(shù), -z 長度為0->true
if [ -z $1 ]; then
    echo "Usage: csync [filedir]"
    exit
fi


filedir=$1
#獲取文件名稱 basename
filename=`basename $filedir`
echo "csync filename $filename"

# 獲取絕對路徑,-P獲取真實絕對路徑
sdir=`cd -P $(dirname $filedir); pwd`
echo sdir=$sdir

# 獲取當前用戶名稱
user=`whoami`

# 發(fā)送至每個節(jié)點,我這里hostname是以cdh開頭楚里, 1-3
for((host=1; host<4; host++)); do
        echo ------------------- csync cdh$host --------------
        rsync -av $sdir/$filename $user@cdh$host:$sdir
done

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末断部,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子班缎,更是在濱河造成了極大的恐慌蝴光,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,406評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件达址,死亡現(xiàn)場離奇詭異蔑祟,居然都是意外死亡,警方通過查閱死者的電腦和手機沉唠,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,732評論 3 393
  • 文/潘曉璐 我一進店門疆虚,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人满葛,你說我怎么就攤上這事径簿。” “怎么了嘀韧?”我有些...
    開封第一講書人閱讀 163,711評論 0 353
  • 文/不壞的土叔 我叫張陵篇亭,是天一觀的道長。 經(jīng)常有香客問我锄贷,道長译蒂,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,380評論 1 293
  • 正文 為了忘掉前任谊却,我火速辦了婚禮柔昼,結果婚禮上,老公的妹妹穿的比我還像新娘炎辨。我一直安慰自己捕透,他們只是感情好,可當我...
    茶點故事閱讀 67,432評論 6 392
  • 文/花漫 我一把揭開白布蹦魔。 她就那樣靜靜地躺著激率,像睡著了一般。 火紅的嫁衣襯著肌膚如雪勿决。 梳的紋絲不亂的頭發(fā)上乒躺,一...
    開封第一講書人閱讀 51,301評論 1 301
  • 那天,我揣著相機與錄音低缩,去河邊找鬼嘉冒。 笑死曹货,一個胖子當著我的面吹牛,可吹牛的內容都是我干的讳推。 我是一名探鬼主播顶籽,決...
    沈念sama閱讀 40,145評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼银觅!你這毒婦竟也來了礼饱?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 39,008評論 0 276
  • 序言:老撾萬榮一對情侶失蹤究驴,失蹤者是張志新(化名)和其女友劉穎镊绪,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體洒忧,經(jīng)...
    沈念sama閱讀 45,443評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡蝴韭,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,649評論 3 334
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了熙侍。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片榄鉴。...
    茶點故事閱讀 39,795評論 1 347
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖蛉抓,靈堂內的尸體忽然破棺而出庆尘,到底是詐尸還是另有隱情,我是刑警寧澤芝雪,帶...
    沈念sama閱讀 35,501評論 5 345
  • 正文 年R本政府宣布减余,位于F島的核電站,受9級特大地震影響惩系,放射性物質發(fā)生泄漏。R本人自食惡果不足惜如筛,卻給世界環(huán)境...
    茶點故事閱讀 41,119評論 3 328
  • 文/蒙蒙 一堡牡、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧杨刨,春花似錦晤柄、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,731評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至赚抡,卻和暖如春爬坑,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背涂臣。 一陣腳步聲響...
    開封第一講書人閱讀 32,865評論 1 269
  • 我被黑心中介騙來泰國打工盾计, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留售担,地道東北人。 一個月前我還...
    沈念sama閱讀 47,899評論 2 370
  • 正文 我出身青樓署辉,卻偏偏與公主長得像族铆,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子哭尝,可洞房花燭夜當晚...
    茶點故事閱讀 44,724評論 2 354

推薦閱讀更多精彩內容