[055]linux一些基本命令-sed,$()

背景

晚上幫一個(gè)朋友解決shell腳本的命令祠够,好久沒(méi)有用shell腳本有點(diǎn)生疏萍肆。
所以我也跟著回顧了一些shell知識(shí)。

sed

sed 是一個(gè)流編輯器而不是一個(gè)替換的工具(我們 用得最多的就是其替換功能)。他的原理是讀取文件中的行存放到緩沖區(qū)靴寂,接著用sed處理緩沖區(qū)的內(nèi)容,處理完成后把結(jié)果送到屏幕召耘,所以文件內(nèi)容并沒(méi)有變百炬。

sed 主要用來(lái)編輯多個(gè)文件簡(jiǎn)化文件的反復(fù)操作用來(lái)轉(zhuǎn)換程序。

shawndeMacBook-Pro:~ shawn$ cat seddemo.txt 
I have a lot of books
shawndeMacBook-Pro:~ shawn$ sed 's/book/books/'  seddemo.txt
I have a lot of bookss
shawndeMacBook-Pro:~ shawn$ cat seddemo.txt  //原有的文件沒(méi)有被替換
I have a lot of books
shawndeMacBook-Pro:~ shawn$ 

sed命令具體參考:http://man.linuxde.net/sed
sed主要用于對(duì)于緩沖中的數(shù)據(jù)進(jìn)行污它,處理比如del剖踊、replace等等,還可以使用正則表達(dá)式衫贬。

awk

awk是一門編程語(yǔ)句德澈,可以定義變量、數(shù)組固惯、有運(yùn)算符梆造、有控制語(yǔ)句比如for循環(huán)等。

awk工作原理參考:
http://man.linuxde.net/awk#awk的工作原理葬毫,具體步驟是
1).定義頭部BEGIN{}
2).pattern,讀取文件每一行澳窑,進(jìn)行轉(zhuǎn)換輸出。//注意在pattern中才開始遍歷循環(huán)
3).end{}輸出尾部供常。
由于頭部,pattern鸡捐,尾部經(jīng)常用于輸出類似表格的格式化數(shù)據(jù)栈暇。

cat    test.csv  | awk -F"," '{print $2,$3}'    ----------------我習(xí)慣與用管道如此寫:
//$n 當(dāng)前記錄的第n個(gè)字段,比如n為1表示第一個(gè)字段箍镜,n為2表示第二個(gè)字段源祈。 $0 //這個(gè)變量包含執(zhí)行過(guò)程中當(dāng)前行的文本內(nèi)容。

定義變量

redo=1
data_root_dir="$HOME/data/VOCdevkit"
1.等號(hào)兩遍不要有空格
2.引用一個(gè)變量需要帶$符號(hào)色迂,比如
一般情況下香缺,$var 與 ${var} 并沒(méi)有啥不一樣。
但是用 ${ } 會(huì)比較精確的界定變量名稱的范圍歇僧,比方說(shuō):

$ A=B
$ echo $AB

原本是打算先將 $A 的結(jié)果替換出來(lái)图张,然后再補(bǔ)一個(gè) B 字母于其后,
但在命令行上诈悍,真正的結(jié)果卻是只會(huì)替換變量名稱為 AB 的值出來(lái)…
若使用 ${ } 就沒(méi)問(wèn)題了:
3.定義數(shù)字不帶“”祸轮,定義字符串要帶“”號(hào)。

if語(yǔ)法

if [ $redo ]
then
  extra_cmd="$extra_cmd --redo"
fi

for 命令語(yǔ)法

for subset in test trainval
do
  ...
done

dirname

截圖路徑的目錄部分

dirname
shawndeMacBook-Pro:~ shawn$ dirname /usr/bin/sort 
/usr/bin

變量替換

$( ) 與 (反引號(hào)) 都是用來(lái)做命令替換用(command substitution)的侥钳。
所謂的命令替換與我們第五章學(xué)過(guò)的變量替換差不多适袜,都是用來(lái)重組命令行:

$ echo the last sunday is $(date -d "last sunday" +%Y-%m-%d)
-- 結(jié)果:
the last sunday is 2018-02-18

如此便可方便得到上一星期天的日期了… _
用 $( ) 的理由:
1, 很容易與 ' ' ( 單引號(hào))搞混亂,尤其對(duì)初學(xué)者來(lái)說(shuō)舷夺。
有時(shí)在一些奇怪的字形顯示中苦酱,兩種符號(hào)是一模一樣的(直豎兩點(diǎn))售貌。
2, 在多層次的復(fù)合替換中, 須要額外的跳脫( ` )處理疫萤,而 $( ) 則比較直觀颂跨。例如:
這是錯(cuò)的:
[code]command1 command2command3[/code]
原本的意圖是要在 command2 command3 先將 command3 提取出來(lái)給 command 2 處理。

pwd1=$(ls ./)
shawndeMacBook-Pro:~ shawn$ echo $(pwd1) //$()里必須是command
-bash: pwd1: command not found

shawndeMacBook-Pro:~ shawn$ echo ${pwd1}
Applications Applications (Parallels) ...... 我的堅(jiān)果云

說(shuō)在后面的話

由于代碼運(yùn)行結(jié)果依賴輸入數(shù)據(jù)且人很容易陷入扣代碼的細(xì)節(jié)给僵,所以我建議是把代碼日志輸出出來(lái)毫捣。根據(jù)輸入和輸出你能夠忽略細(xì)節(jié)最快的看代碼。從這一點(diǎn)上我們看源代碼不能只看不去運(yùn)行帝际,帶著疑問(wèn)要跑起查看運(yùn)行日志這會(huì)讓我們更加快速的開源軟件架構(gòu)和細(xì)節(jié)蔓同。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市蹲诀,隨后出現(xiàn)的幾起案子斑粱,更是在濱河造成了極大的恐慌,老刑警劉巖脯爪,帶你破解...
    沈念sama閱讀 206,968評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件则北,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡痕慢,警方通過(guò)查閱死者的電腦和手機(jī)尚揣,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)掖举,“玉大人快骗,你說(shuō)我怎么就攤上這事∷危” “怎么了方篮?”我有些...
    開封第一講書人閱讀 153,220評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)励负。 經(jīng)常有香客問(wèn)我藕溅,道長(zhǎng),這世上最難降的妖魔是什么继榆? 我笑而不...
    開封第一講書人閱讀 55,416評(píng)論 1 279
  • 正文 為了忘掉前任巾表,我火速辦了婚禮,結(jié)果婚禮上裕照,老公的妹妹穿的比我還像新娘攒发。我一直安慰自己,他們只是感情好晋南,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,425評(píng)論 5 374
  • 文/花漫 我一把揭開白布惠猿。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪偶妖。 梳的紋絲不亂的頭發(fā)上姜凄,一...
    開封第一講書人閱讀 49,144評(píng)論 1 285
  • 那天,我揣著相機(jī)與錄音趾访,去河邊找鬼态秧。 笑死,一個(gè)胖子當(dāng)著我的面吹牛扼鞋,可吹牛的內(nèi)容都是我干的申鱼。 我是一名探鬼主播,決...
    沈念sama閱讀 38,432評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼云头,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼捐友!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起溃槐,我...
    開封第一講書人閱讀 37,088評(píng)論 0 261
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤匣砖,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后昏滴,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體猴鲫,經(jīng)...
    沈念sama閱讀 43,586評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,028評(píng)論 2 325
  • 正文 我和宋清朗相戀三年谣殊,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了拂共。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,137評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡姻几,死狀恐怖匣缘,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情鲜棠,我是刑警寧澤,帶...
    沈念sama閱讀 33,783評(píng)論 4 324
  • 正文 年R本政府宣布培慌,位于F島的核電站豁陆,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏吵护。R本人自食惡果不足惜盒音,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,343評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望馅而。 院中可真熱鬧祥诽,春花似錦、人聲如沸瓮恭。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)屯蹦。三九已至维哈,卻和暖如春绳姨,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背阔挠。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評(píng)論 1 262
  • 我被黑心中介騙來(lái)泰國(guó)打工飘庄, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人购撼。 一個(gè)月前我還...
    沈念sama閱讀 45,595評(píng)論 2 355
  • 正文 我出身青樓跪削,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親迂求。 傳聞我的和親對(duì)象是個(gè)殘疾皇子碾盐,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,901評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容

  • linux資料總章2.1 1.0寫的不好抱歉 但是2.0已經(jīng)改了很多 但是錯(cuò)誤還是無(wú)法避免 以后資料會(huì)慢慢更新 大...
    數(shù)據(jù)革命閱讀 12,135評(píng)論 2 34
  • 基礎(chǔ)命令 主要的命令和快捷鍵 Linux系統(tǒng)命令由三部分組成:cmd + [options]+[operation...
    485b1aca799e閱讀 1,086評(píng)論 0 0
  • sed與awk實(shí)例 文本間隔 在每一行后面增加一空行 將原來(lái)的所有空行刪除并在每一行后面增加一空行。這樣在輸出的文...
    stuha閱讀 1,883評(píng)論 0 21
  • 本文承接之前寫的三十分鐘學(xué)會(huì)AWK一文锁摔,在學(xué)習(xí)完AWK之后廓旬,趁熱打鐵又學(xué)習(xí)了一下SED,不得不說(shuō)這兩個(gè)工具真的堪稱...
    mylxsw閱讀 4,382評(píng)論 3 74
  • 知識(shí)點(diǎn) sort uniq cut wc sed命令 awk命令 crontab定時(shí)器 sort sort 命令對(duì)...