正則表達(dá)式只是一種表示法,只要工具支持這種表示法沥匈, 那么該工具就可以處理正則表達(dá)式的字符串聪黎。vim罕容、grep、awk 稿饰、sed 都支持正則表達(dá)式锦秒,也正是因?yàn)橛捎谒鼈冎С终齽t,才顯得它們強(qiáng)大喉镰;
1基礎(chǔ)正則表達(dá)式
grep 工具旅择,以前介紹過。
grep -[acinv] '搜索內(nèi)容串' filename
-a 以文本文件方式搜索
-c 計(jì)算找到的符合行的次數(shù)
-i 忽略大小寫
-n 順便輸出行號
-v 反向選擇侣姆,即找 沒有搜索字符串的行
其中搜索串可以是正則表達(dá)式!
1
搜索有the的行,并輸出行號
$grep -n 'the' regular_express.txt
搜 索沒有the的行,并輸出行號
$grep -nv 'the' regular_express.txt
2 利 用[]搜索集合字符
[] 表示其中的某一個(gè)字符 生真,例如[ade] 表示a或d或e
woody@xiaoc:~/tmp$ grep -n 't[ae]st' regular_express.txt
8:I can't finish the test.
9:Oh! the soup taste good!
可以用^符號做[]內(nèi)的前綴,表示除[]內(nèi)的字符之外的字 符捺宗。
比如搜索oo前沒有g(shù)的字符串所在的行. 使用 '[^g]oo' 作搜索字符串
woody@xiaoc:~/tmp$ grep -n '[^g]oo' regular_express.txt
2:apple is my favorite food.
3:Football game is not use feet only.
18:google is the best tools for search keyword.
19:goooooogle yes!
[] 內(nèi)可以用范圍表示柱蟀,比如[a-z] 表示小寫字母,[0-9] 表示0~9的數(shù)字, [A-Z] 則是大寫字母們。[a-zA-Z0-9]表示所有數(shù)字與英文字符蚜厉。 當(dāng)然也可以配合^來排除字符长已。
搜索包含數(shù)字的行
woody@xiaoc:~/tmp$ grep -n '[0-9]' regular_express.txt
5:However ,this dress is about $ 3183 dollars.
15:You are the best is menu you are the no.1.
行首與行尾字符 ^ $. ^ 表示行的開頭,$表示行的結(jié)尾( 不是字符弯囊,是位置)那么‘^$' 就表示空行,因?yàn)橹挥?br>
行首和行尾痰哨。
這里與[]里面使用的意義不同。它表示^后面的串是在行的開頭匾嘱。
比如搜索the在開頭的行
woody@xiaoc:~/tmp$ grep -n '^the' regular_express.txt
12:the symbol '*' is represented as star.
搜索以小寫字母開頭的行
woody@xiaoc:~/tmp$ grep -n '^[a-z]' regular_express.txt
2:apple is my favorite food.
4:this dress doesn't fit me.
10:motorcycle is cheap than car.
12:the symbol '*' is represented as star.
18:google is the best tools for search keyword.
19:goooooogle yes!
20:go! go! Let's go.
woody@xiaoc:~/tmp$
搜索開頭不是英文字母的行
woody@xiaoc:~/tmp$ grep -n '[a-zA-Z]' regular_express.txt
1:"Open Source" is a good mechanism to develop programs.
21:#I am VBird
woody@xiaoc:~/tmp$
$表示它前面的串是在行的結(jié)尾斤斧,比如 '.' 表示 . 在一行的結(jié)尾
搜索末尾是.的行
woody@xiaoc:~/tmp$ grep -n '.$' regular_express.txt //. 是正則表達(dá)式的特殊符號,所以要用\轉(zhuǎn)義
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
4:this dress doesn't fit me.
5:However ,this dress is about $ 3183 dollars.
6:GNU is free air not free beer.
.....
注意在MS的系統(tǒng)下生成的文本文件霎烙,換行會加上一個(gè) ^M 字符撬讽。所以最后的字符會是隱藏的^M ,在處理Windows
下面的文本時(shí)要特別注意!
可以用cat dos_file | tr -d '\r' > unix_file 來刪除^M符號悬垃。 ^M==\r
那么'^$' 就表示只有行首行尾的空行拉游昼!
搜索空行
woody@xiaoc:~/tmp$ grep -n '^$' regular_express.txt
22:
23:
woody@xiaoc:~/tmp$
搜索非空行
woody@xiaoc:~/tmp$ grep -vn '^$' regular_express.txt
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
4:this dress doesn't fit me.
..........
任意一個(gè)字符. 與重復(fù)字符 *
在bash中代表通配符,用來代表任意個(gè) 字符尝蠕,但是在正則表達(dá)式中烘豌,他含義不同,表示有0個(gè)或多個(gè) 某個(gè)字符看彼。
例如 oo*, 表示第一個(gè)o一定存在廊佩,第二個(gè)o可以有一個(gè)或多個(gè)囚聚,也可以沒有,因此代表至少一個(gè)o.
點(diǎn). 代表一個(gè)任意字符标锄,必須存在顽铸。 g??d 可以用 'g..d' 表示。 good ,gxxd ,gabd .....都符合料皇。
woody@xiaoc:~/tmp$ grep -n 'g..d' regular_express.txt
1:"Open Source" is a good mechanism to develop programs.
9:Oh! the soup taste good!
16:The world is the same with 'glad'.
woody@xiaoc:~/tmp$
搜索兩個(gè)o以上的字符串
woody@xiaoc:~/tmp$ grep -n 'ooo*' regular_express.txt //前兩個(gè)o一定存在谓松,第三個(gè)o可沒有,也可有多個(gè)践剂。
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
9:Oh! the soup taste good!
18:google is the best tools for search keyword.
19:goooooogle yes!
搜索g開頭和結(jié)尾鬼譬,中間是至少一個(gè)o的字符串,即gog, goog....gooog...等
woody@xiaoc:~/tmp$ grep -n 'goo*g' regular_express.txt
18:google is the best tools for search keyword.
19:goooooogle yes!
搜索g開頭和結(jié)尾的字符串在的行
woody@xiaoc:~/tmp$ grep -n 'g.g' regular_express.txt // .表示 0個(gè)或多個(gè)任意字符
1:"Open Source" is a good mechanism to develop programs.
14:The gd software is a library for drafting programs.
18:google is the best tools for search keyword.
19:goooooogle yes!
20:go! go! Let's go.
限定連續(xù)重復(fù)字符的范圍 { }
. * 只能限制0個(gè)或多個(gè)舷手, 如果要確切的限制字符重復(fù)數(shù)量拧簸,就用{范圍} 劲绪。范圍是數(shù)字用,隔開 2,5 表示2~5個(gè),
2表示2個(gè)男窟,2, 表示2到更多個(gè)
注意,由于{ }在SHELL中有特殊意義贾富,因此作為正則表達(dá)式用的時(shí)候要用\轉(zhuǎn)義一下歉眷。
搜索包含兩個(gè)o的字符串的行。
woody@xiaoc:~/tmp$ grep -n 'o{2}' regular_express.txt
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
9:Oh! the soup taste good!
18:google is the best tools for search keyword.
19:goooooogle yes!
搜索g后面跟2~5個(gè)o,后面再跟一個(gè)g的字符串的行颤枪。
woody@xiaoc:~/tmp$ grep -n 'go{2,5}g' regular_express.txt
18:google is the best tools for search keyword.
搜索包含g后面跟2個(gè)以上o,后面再跟g的行汗捡。。
woody@xiaoc:~/tmp$ grep -n 'go{2,}g' regular_express.txt
18:google is the best tools for search keyword.
19:goooooogle yes!
注意畏纲,相讓[]中的^ - 不表現(xiàn)特殊意義扇住,可以放在[]里面內(nèi)容的后面。
'[a-z.! -]' 表示沒有小寫字母盗胀,沒有. 沒有!, 沒有空格艘蹋,沒有- 的 串,注意[]里面有個(gè)小空格票灰。
另外shell 里面的反向選擇為[!range], 正則里面是 [^range]
2擴(kuò)展正則表達(dá)式
擴(kuò)展正則表達(dá)式是對基礎(chǔ)正則表達(dá)式添加了幾個(gè)特殊構(gòu)成的女阀。
它令某些操作更加方便。
比如我們要去除 空白行和行首為 #的行屑迂, 會這樣用:
woody@xiaoc:~/tmp$ grep -v '^$' regular_express.txt | grep -v '^#'
"Open Source" is a good mechanism to develop programs.
apple is my favorite food.
Football game is not use feet only.
this dress doesn't fit me.
............
然而使用支持?jǐn)U展正則表達(dá)式的 egrep 與擴(kuò)展特殊符號 | 浸策,會方便許多。
注意grep只支持基礎(chǔ)表達(dá)式惹盼, 而egrep 支持?jǐn)U展的庸汗, 其實(shí) egrep 是 grep -E 的別名而已。因此grep -E 支持?jǐn)U展正則手报。
那么:
woody@xiaoc:~/tmp$ egrep -v '$|#' regular_express.txt
"Open Source" is a good mechanism to develop programs.
apple is my favorite food.
Football game is not use feet only.
this dress doesn't fit me.
....................
這里| 表示或的關(guān)系蚯舱。 即滿足 ^$ 或者 ^# 的字符串雕薪。
這里列出幾個(gè)擴(kuò)展特殊符號:
+, 于 . * 作用類似晓淀,表示 一個(gè)或多個(gè)重復(fù)字符所袁。
?, 于 . * 作用類似凶掰,表示0個(gè)或一個(gè)字符燥爷。
|,表示或關(guān)系懦窘,比如 'gd|good|dog' 表示有g(shù)d,good或dog的串
()前翎,將部分內(nèi)容合成一個(gè)單元組。 比如 要搜索 glad 或 good 可以這樣 'g(la|oo)d'
()的好處是可以對小組使用 + ? * 等畅涂。
比如要搜索A和C開頭結(jié)尾港华,中間有至少一個(gè)(xyz) 的串,可以這樣 : 'A(xyz)+C'