Linux文本處理三劍客
grep：文本過濾(模式：pattern)工具
grep, egrep, fgrep（不支持正則表達(dá)式搜索）
sed：stream editor畅蹂，文本編輯工具
awk：Linux上的實(shí)現(xiàn)gawk，文本報(bào)告生成器
grep
grep: Global search REgularexpression and Print out the line（全局搜索正則表達(dá)式苛让，列出行）
作用：文本搜索工具，根據(jù)用戶指定的“模式”對目標(biāo)文本逐行進(jìn)行匹配檢查湿诊；打印匹配到的行
模式：由正則表達(dá)式字符及文本字符所編寫的過濾條件
grep [OPTIONS] PATTERN [FILE...]
grep root /etc/passwd
grep "$USER" /etc/passwd
grep '$USER' /etc/passwd
grep `whoami` /etc/passwd
grep命令選項(xiàng)
--color=auto: 對匹配到的文本著色顯示
-v: 顯示不被pattern匹配到的行
-i: 忽略字符大小寫
-n：顯示匹配的行號
-c: 統(tǒng)計(jì)匹配的行數(shù)
-o: 僅顯示匹配到的字符串
-q: 靜默模式狱杰，不輸出任何信息
-A #: after, 后#行
-B #: before, 前#行
-C #：context, 前后各#行
-e：實(shí)現(xiàn)多個(gè)選項(xiàng)間的邏輯or關(guān)系
grep –e ‘cat ’ -e ‘dog’ file
-w：匹配整個(gè)單詞
-E：使用ERE
-F：相當(dāng)于fgrep，不支持正則表達(dá)式
-q 靜默模式 找到?jīng)]找到都不顯示
echo $? 為0表示找到了
echo $? 為1表示沒找到
-w 匹配整個(gè)單詞（漢字字母數(shù)字下劃線算一個(gè)單詞內(nèi)部）
正則表達(dá)式
正則表達(dá)式用來處理的不是文件的名稱厅须，而是匹配文件的內(nèi)容或字符串
REGEXP：由一類特殊字符及文本字符所編寫的模式仿畸，其中有些字符（元字符）不表示字符字面意義，而表示控制或通配的功能
程序支持：grep,sed,awk,vim, less,nginx,varnish等
分兩類：
基本正則表達(dá)式：BRE
擴(kuò)展正則表達(dá)式：ERE
grep -E, egrep
正則表達(dá)式引擎：
采用不同算法，檢查處理正則表達(dá)式的軟件模塊
PCRE（Perl Compatible Regular Expressions）
元字符分類：字符匹配错沽、匹配次數(shù)簿晓、位置錨定、分組
man 7 regex
fgrep = grep -F 不支持正則表達(dá)式
基本正則表達(dá)式元字符
字符匹配:
. 匹配任意單個(gè)字符
[] 匹配指定范圍內(nèi)的任意單個(gè)字符
[^] 匹配指定范圍外的任意單個(gè)字符
[:alnum:] 字母和數(shù)字
[:alpha:] 代表任何英文大小寫字符千埃，亦即A-Z, a-z
[:lower:] 小寫字母 [:upper:] 大寫字母
[:blank:] 空白字符（空格和制表符）
[:space:]水平和垂直的空白字符（比[:blank:]包含的范圍廣）
[:cntrl:] 不可打印的控制字符（退格憔儿、刪除、警鈴...）
[:digit:] 十進(jìn)制數(shù)字[:xdigit:]十六進(jìn)制數(shù)字
[:graph:] 可打印的非空白字符
[:print:] 可打印字符
[:punct:] 標(biāo)點(diǎn)符號
匹配次數(shù)
用在要指定次數(shù)的字符后面放可，用于指定前面的字符要出現(xiàn)的次數(shù)
* 匹配前面的字符任意次谒臼，包括0次
貪婪式：盡可能長的匹配
.*任意長的任意字符
\?匹配其前面的字符0或1次
\+匹配其前面的字符至少1次
\{n\}匹配前面的字符n次
\{m,n\}匹配前面的字符至少m次，至多n次
\{,n\}匹配前面的字符至多n次
\{n,\}匹配前面的字符至少n次
位置錨定
定位出現(xiàn)的位置
^ 行首錨定耀里，用于模式的最左側(cè)
$ 行尾錨定蜈缤，用于模式的最右側(cè)
^PATTERN$ 用于模式匹配整行
^$ 空行（回車導(dǎo)致的空行）
^[[:space:]]*$ 空白行（空格、Tab鍵冯挎、空行）
\< 或\b詞首錨定底哥，用于單詞模式的左側(cè)
\> 或\b詞尾錨定；用于單詞模式的右側(cè)
\<PATTERN\>匹配整個(gè)單詞
單詞邊界：除了漢字字母數(shù)字下劃線其余的都可以作為單詞邊界
分組
\ ( \ ) 將一個(gè)或多個(gè)字符捆綁在一起房官，當(dāng)作一個(gè)整體進(jìn)行處理趾徽，如：\ (root \ ) +
分組括號中的模式匹配到的內(nèi)容會(huì)被正則表達(dá)式引擎記錄于內(nèi)部的變量中，這些變量的命名方式為: \1, \2, \3, ...
\1表示從左側(cè)起第一個(gè)左括號以及與之匹配右括號之間的模式所匹配到的字符
示例：\ (string1 \ + \ (string2 \ )\ )
\1 ：string1 \ + \ (string2 \ )
\2 ：string2
后向引用：引用前面的分組括號中的模式所匹配字符易阳，而非模式本身
或者：|
示例：a|b: a或b C|cat: C或cat (C|c)at:Cat或cat
egrep及擴(kuò)展的正則表達(dá)式
egrep= grep -E
egrep[OPTIONS] PATTERN [FILE...]
擴(kuò)展正則表達(dá)式的元字符：
字符匹配:
. 任意單個(gè)字符
[] 指定范圍的字符
[^] 不在指定范圍的字符
次數(shù)匹配：
*：匹配前面字符任意次
?: 0或1次
+：1次或多次
{m}：匹配m次
{m,n}：至少m附较，至多n次
位置錨定：
^ :行首
$ :行尾
\<, \b :語首
\>, \b :語尾
分組：
()
后向引用：\1, \2, ...
或者：
a|b: a或b
C|cat: C或cat
(C|c)at:Cat或cat