文本處理——sed初步

sed是一種流編輯器漓库,它一次處理一行內(nèi)容吧黄。
處理時柬帕,把當前處理的行存儲在臨時緩沖區(qū)(pattern space),同時輸出到屏幕枚钓,接著用sed命令處理緩沖區(qū)中的內(nèi)容铅搓,接著讀取下一行,這樣不斷重復搀捷,直到文件末尾星掰。

用法:

sed -[options] [操作] inputfile

-n:不輸出模式空間內(nèi)容到屏幕,即不自動打印
-e: 多點編輯
-f:/PATH/SCRIPT_FILE: 從指定文件中讀取編輯腳本
-r: 支持使用擴展正則表達式
-i.bak: 原處編輯并且備份源文件(.bak可以改為任意字符)

操作: [地址定界]function

地址定界:最簡單的是n1,n2function:從n1匹配到n2的行嫩舟,然后進行操作比如:10,20[動作行為]

單地址:
       #:指定的行
                /pattern/:被此模式匹配到的行蹋偏,如果要使用擴展的正則表達式,則要使用-f選項
            地址范圍:
       #,#從行到行
                #至壤,+#:比如3,+6代表是從第3行開始增加6行到第9行
                /pat1/,/pat2/:pat1到pat2的行威始,如果匹配到pat1到pat2,將其加入到緩沖區(qū)像街,并且會繼續(xù)向下匹配
                #,/pat1/
       ~:步進
                1~2:匹配奇數(shù)行黎棠。從第一行開始,每隔2行匹配一次
                2~2:匹配偶數(shù)行
    ```
   function:

d: 刪除模式空間匹配的行镰绎,因為是刪除啊脓斩,所以 d 后面通常不接任何咚咚;
p: 顯示模式空間中的內(nèi)容
a []text:在指定行后面追加文本
支持使用\n實現(xiàn)多行追加
i []text:在行前面插入文本
c []text:替換行為單行或多行文本
w /path/somefile: 保存模式匹配的行至指定文件畴栖,sed '10,90w /root/file' file1將從f1匹配到的行到file
r /path/somefile:讀取指定文件的文本至模式空間中
匹配到的行后
=: 為模式空間中的行打印行號
!:模式空間中匹配行取反處理cat
s///:查找替換,支持使用其它分隔符随静,s@@@,s###
替換標記:
g: 行內(nèi)全局替換
w /PATH/TO/SOMEFILE:將替換成功的行保存至文件中

####數(shù)據(jù)的搜尋并執(zhí)行命令

搜索/etc/passwd,找到root對應的行吗讶,執(zhí)行后面花括號中的一組命令燎猛,每個命令之間用分號分隔,這里把bash替換為blueshell照皆,再輸出這行:
nl /etc/passwd | sed -n '/root/{s/bash/blueshell/;p}'
root:x:0:0:root:/root:/bin/blueshell

如果只替換/etc/passwd的第一個bash關鍵字為blueshell重绷,就退出
nl /etc/passwd | sed -n '/bash/{s/bash/blueshell/;p;q}'
root:x:0:0:root:/root:/bin/blueshell
最后的q是退出。

##案例:

nl /etc/passwd |sed '2d'只刪除第 2 行
sed '/#|[[:space:]]*$/d' f1搜索出來以#號開頭或有空白行
sed –n '2p' /etc/passwd 輸出第二行
sed –n '1,4p' /etc/passwd從第一行到第四行顯示
sed –n '/root/p' /etc/passwd 顯示匹配到root的行
sed –n '2,/root/p' /etc/passwd 從2行開始匹配root膜毁,并顯示
sed -n '/^$/=' file 顯示空行行號
sed –n –e '/^$/p' –e '/^$/=' file 多點編輯昭卓,我覺得類似grep的-e選項,或者的關系
sed '/root/a\superman' /etc/passwd行后添加字符
sed '/root/i\superman' /etc/passwd 行前
sed '/root/c\superman' /etc/passwd 代替行
sed '/^$/d' file刪除空行瘟滨,不包括空格組成的空行
sed '1,10d' file
nl /etc/passwd | sed '2,5d'
nl /etc/passwd | sed '2a tea'在第二行后面添加tea
sed 's/test/mytest/g' example 將test替換為mytest
sed –n 's/root/&superman/p' /etc/passwd 單詞后候醒,相當于后向引用,替換為rootsuperman
sed –n 's/root/superman&/p' /etc/passwd 單詞前
sed -e 's/dog/cat/' -e 's/hi/lo/' pets
sed –i.bak 's/dog/cat/g' pets 編輯前先將pets備份為pets.bak然后進行替換編輯

##高級編輯命令:

h:把模式空間中的內(nèi)容覆蓋至保持空間中杂瘸;
H:把模式空間中的內(nèi)容追加至保持空間中倒淫;
g:把保持空間中的內(nèi)容覆蓋至模式空間中;
G:把保持空間中的內(nèi)容追加至模式空間中胧沫;
x:把模式空間中的內(nèi)容與保持空間中的內(nèi)容互換昌简;
n:覆蓋讀取匹配到的行的下一行至模式空間中;
N:追加讀取匹配到的行的下一行至模式空間中绒怨;
d: 刪除模式空間中的行
D:刪除當前模式空間開端至\n的內(nèi)容(不再傳至標準輸出)纯赎,放棄之后的命令,但是對剩余模式空間重新執(zhí)行sed

示例:     

sed -n 'n;p' FILE:顯示偶數(shù)行南蹂;
sed '1!G;h;$!d' FILE:逆序顯示文件的內(nèi)容犬金;
sed ’$!d' FILE:取出最后一行;
sed '$!N;$!D' FILE:取出文件后兩行六剥;
sed '/^$/d;G' FILE:刪除原有的所有空白行晚顷,而后為所有的非空白行后添加一個空白行;
sed 'n;d' FILE:顯示奇數(shù)行疗疟;
sed 'G' FILE:在原有的每行后方添加一個空白行该默;

作業(yè):

1.刪除centos7系統(tǒng)/etc/grub2.cfg文件中所有以空白開頭的行行首的空白字符
sed 's/^[[:space:]]//gp' /etc/grub2.cfg
2.刪除/etc/fstab文件中所有以#開頭,后面至少跟一個空白字符的行的行首的#和空白字符
sed 's/^#[[:space:]]+//g' /etc/fstab
3策彤、在centos6系統(tǒng)/root/install.log每一行行首增加#號
sed 's/^/#/' /root/install.log
4栓袖、在/etc/fstab文件中不以#開頭的行的行首增加#號
sed -n '/#/!{s//#/p}' /root/f1
sed 's/[#]|^$/#&/' /root/f1
5、處理/etc/fstab路徑,使用sed命令取出其目錄名和基名
echo "/etc/sysconfig/network-scripts" |sed -r 's@(^/.
/)([^/]+/?)@\2@'
echo "/etc/sysconfig/network-scripts" |sed -r 's@(/.*/)([/]+/?)@\1@'
6店诗、利用sed 取出ifconfig命令中本機的IPv4地址
ifconfig eth0|sed -n -e '2s/^.r://' -e '2s/ .//p'
7裹刮、統(tǒng)計centos安裝光盤中Package目錄下的所有rpm文件的以.分隔倒數(shù)第二個字段的重復次數(shù)
ls -1 /misc/cd/Packages/ |sed -nr "s@(.*.)([[:alnum:]_]+.rpm)@\2@p" |sort |uniq -c|sort -n
8、統(tǒng)計/etc/init.d/functions文件中每個單詞的出現(xiàn)次數(shù)庞瘸,并排序(用grep和sed兩種方法分別實現(xiàn))
grep -o "[[:alpha:]]+" /etc/init.d/functions |sort|uniq -c|sort -nr
sed -nre 's/[^[:alpha:]]+/\n/gp' /etc/init.d/functions |sort | uniq -c|sort -n
9捧弃、將文本文件的n和n+1行合并為一行,n為奇數(shù)行
nl f1|sed -n "N;s/\n//p"

##后話
做這種題最重要是練習擦囊,練得多了违霞,自然就會了,沒有必要找好多文章來說明一種命令的用法瞬场,還是慢慢體會的好
最后編輯于
?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末葛家,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子泌类,更是在濱河造成了極大的恐慌癞谒,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,084評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件刃榨,死亡現(xiàn)場離奇詭異弹砚,居然都是意外死亡,警方通過查閱死者的電腦和手機枢希,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,623評論 3 392
  • 文/潘曉璐 我一進店門桌吃,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人苞轿,你說我怎么就攤上這事茅诱《何铮” “怎么了?”我有些...
    開封第一講書人閱讀 163,450評論 0 353
  • 文/不壞的土叔 我叫張陵瑟俭,是天一觀的道長翎卓。 經(jīng)常有香客問我,道長摆寄,這世上最難降的妖魔是什么失暴? 我笑而不...
    開封第一講書人閱讀 58,322評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮微饥,結果婚禮上逗扒,老公的妹妹穿的比我還像新娘。我一直安慰自己欠橘,他們只是感情好矩肩,可當我...
    茶點故事閱讀 67,370評論 6 390
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著肃续,像睡著了一般蛮拔。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上痹升,一...
    開封第一講書人閱讀 51,274評論 1 300
  • 那天建炫,我揣著相機與錄音,去河邊找鬼疼蛾。 笑死肛跌,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的察郁。 我是一名探鬼主播衍慎,決...
    沈念sama閱讀 40,126評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼皮钠!你這毒婦竟也來了稳捆?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 38,980評論 0 275
  • 序言:老撾萬榮一對情侶失蹤麦轰,失蹤者是張志新(化名)和其女友劉穎乔夯,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體款侵,經(jīng)...
    沈念sama閱讀 45,414評論 1 313
  • 正文 獨居荒郊野嶺守林人離奇死亡末荐,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,599評論 3 334
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了新锈。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片甲脏。...
    茶點故事閱讀 39,773評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出块请,到底是詐尸還是另有隱情娜氏,我是刑警寧澤,帶...
    沈念sama閱讀 35,470評論 5 344
  • 正文 年R本政府宣布墩新,位于F島的核電站贸弥,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏抖棘。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,080評論 3 327
  • 文/蒙蒙 一狸涌、第九天 我趴在偏房一處隱蔽的房頂上張望切省。 院中可真熱鬧,春花似錦帕胆、人聲如沸朝捆。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,713評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽芙盘。三九已至,卻和暖如春脸秽,著一層夾襖步出監(jiān)牢的瞬間儒老,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,852評論 1 269
  • 我被黑心中介騙來泰國打工记餐, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留驮樊,地道東北人。 一個月前我還...
    沈念sama閱讀 47,865評論 2 370
  • 正文 我出身青樓片酝,卻偏偏與公主長得像囚衔,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子雕沿,可洞房花燭夜當晚...
    茶點故事閱讀 44,689評論 2 354

推薦閱讀更多精彩內(nèi)容