三劍客

??????功能

grep過濾 ??

sed過濾圆雁，修改（增刪改查）取行 ?

awk過濾取列統(tǒng)計計算

????????grep 過濾

??????????????-n??顯示行號

?????????????-i??不區(qū)分大小寫

?????????????-w ??以完整單詞顯示內(nèi)容

?????????????-v ?取反

?????????????-o 顯示過濾過程

?????????????-E 可過濾擴(kuò)展正則egrep

?????????????-c統(tǒng)計包含引號內(nèi)容的一共有幾行

?????????????-l (grep過濾時只顯示文件名不顯示內(nèi)容) ?

?????????????-R遞歸進(jìn)行過濾（在最后查找可以接目錄）

?????????????-A顯示grep查找出的內(nèi)容的行及接下來的行(行數(shù)為參數(shù)后面所接數(shù)字)

?????????????-B顯示grep查找出的內(nèi)容的行及之前的行??(行數(shù)為參數(shù)后面所接數(shù)字)

?????????????-C顯示grep查找出的內(nèi)容的行及前后的行 ?(行數(shù)為參數(shù)后面所接數(shù)字)

????sed stream editor流編輯器 ????????????

過濾褂萧，修改（增刪改查），取行

（格式：sed參數(shù) ‘條件命令’ ?所查找文件）

??????參數(shù)?

??????????????-n取消默認(rèn)輸出（sed會默認(rèn)將文件內(nèi)容全部顯示）

??????????????-i修改文件內(nèi)容

????????????????????-i.bak 先備份文件為帶后綴.bak帶新文件嫉戚，再修改原文件內(nèi)容

??????????????-r支持?jǐn)U展正則

? ? ? ? ? ? ? -e? 可時進(jìn)行兩次操作

（展辞！不）

????查??????????p顯示 ????!p 不顯示

???????????????????sed ?-n '3p' /oldboy/lidao.txt

? ? ? ? ? ? ? ? ? ?顯示第三行的內(nèi)容

? ? ? ? ? ? ? ? ? ?sed ?-n '$p' /oldboy/lidao.txt

? ? ? ? ? ? ? ? ? ?顯示最后一行的內(nèi)容

? ? ? ? ? ? ? ? ? ? sed ?-n '1键科，3p' /oldboy/lidao.txt

? ? ? ? ? ? ? ? ? ? 顯示一到三行的內(nèi)容

???????????????????sed ?-n '/oldboy/p' /oldboy/lidao.txt

? ? ? ? ? ? ? ? ? ? 顯示包含oldboy的行（//內(nèi)可使用正則過濾）

? ? ? ? ? ? ? ? ? ? sed ?-n '/oldboy/浇衬，/lidao/p' /oldboy/lidao.txt

? ? ? ? ? ? ? ? ? ? 顯示從第一個包含/oldboy/的行到第一個/lidao/的行（循環(huán)查找）??????

??????????增加????????c ?a ???i

???????????????????sed ?'1,3a162,habijisd.CDF' lidao.txt ????

? ? ? ? ? ? ? ? ? ? 在第一行到第三行的每一行后都加上 162,habijisd.CDF

? ? ? ? ? ? ? ? a???????在下一行追加??????（真實(shí)文件內(nèi)容未被修改）

????????????????i ???????在這一行插入??????（真實(shí)文件內(nèi)容未被修改）

? ? ? ? ? ? ? ? c ?????先清空，再寫入???（真實(shí)文件內(nèi)容未被修改）

??????????刪除??????????

? ? ? ? ? ? ? ? ? ? ? ? ? ?sed ?'3d' lidao.txt刪除第三行

? ? ? ? ? ? ? ? ? ? ? ? ? sed ?'/yy/d' lidao.txt刪除有yy的行

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?d刪除

??????????替換????????????s??sub替換

???????????????????????????sed ?'s#oldboy#alex#g ?' ?oldboy.txt ????????

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?將oldboy替換為alex

? ? ? ? ? ? ? ? ? ? ? ? ? ?sed默認(rèn)替換每一行匹配到的第一個內(nèi)容 ????

? ? ? ? ? ? ? ? ? ? ? ? ? ? ?g代表全局替換

????????????后向引用????????????????????????????

? ? ? ? ? ? ? ? ? ? ? ?[root@lc-59 /tmp]# echo 123456 |sed -r 's#(.*)#<\1>#g'

? ? ? ? ? ? ? ? ? ? ? ?<123456>

? ? ? ? ? ? ? ? ? ? ? ?\1數(shù)字1代表前面兩個#之間的第一個（）及里面的內(nèi)容

I ?d不區(qū)分大小寫

awk?刪除取列取行統(tǒng)計計算

?awk ?'條件{命令}' 文件

?????????????????print顯示

?????內(nèi)置變量（類似Linux下的環(huán)境變量）

? ? ? ? ? ? ? NR? ? ?行數(shù)

? ? ? ? ? ? ? NF? ? ?最后一列

? ? ? ? ? ? ?$數(shù)字某一列 ?$3第3列

? ? ? ? ? ? ? ?$0? ? 一整行的內(nèi)容

? ? ? ? ? ? ? FS ???-F修改的內(nèi)容（修改的就是FS）（Field Separator）分隔符

? ? ? ? ? ?OFS? ? ?指awk在顯示每一列的時候每一列之間通過什么分割十兢，OFS的內(nèi)容是{print $1,$3}的趣竣，的內(nèi)容（Output Field Separator）?輸出分割符

??????參數(shù)?

???????????-F 指定分隔符

? ? ? ? ? ? ? ?awk ?-F"," ?'條件{命令}' ??文件

? ? ? ? ? ? ? ? 指定以,為分隔符

???????????????awk ?-F"[ /]" ?'條件{命令}' 文件? ?

? ? ? ? ? ? ? ? ?指定以/或空格為分隔符

? ? ? ? ? ? ? ?awk ?-F"[ /]+" ?'條件{命令}' ??文件? ? ? ?

? ? ? ? ? ? ? ? ? ?指定以/或空格或連續(xù)出現(xiàn)的空格與/為一個分隔符

? ? ? ??-v ??修改awk的內(nèi)置變量

? ? ? ? ? ? ? ? -vFS==-F

? ? ? ? ? ? ? ? -vOFS修改輸出分隔符（設(shè)置顯示的分隔符）

? ? ? ? ? ? ? ? -vOFS=”顯示的內(nèi)容”

??????取行? ? ? record記錄

????????????????awk 'NR==3' lidao.txt ??

? ? ? ? ? ? ? ? ? 取出第三行

????????????????awk '/oldboy/' lidao.txt

? ? ? ? ? ? ? ?取出包含oldboy的行

? ? ?取列field字段

? ? ? ? ? ? ? ? ? awk '{print $1}' oldboy.txt

? ? ? ? ? ? ? ? ? ? ? ?取出第一列

??????????????????awk '{print $1,$5}' oldboy.txt

? ? ? ? ? ? ? ? ? ? ? 取出第一列和第五列

??????????????????[root@lc-59 /tmp]# awk '{print $1"%%"$2"%%"$3}' oldboy.txt

??????????????????am%%oldboy%%teacher!

? ? ? ? ? ? ? ? ? ?取出第一列第二列第三列中間用%%隔開

??????????????????awk '{print $NF}' oldboy.txt

? ? ? ? ? ? ? ? ? ?取最后一列

? ? ? ? ? ? ? ? ? ?過濾awk中什么可以當(dāng)作條件

? ? ? ? ? ? ? ? ? 將第一列和最后一列交換位置

? ? ? ? ? ? ? ? ?(假定一個空位置tmp摇庙，tmp變1，1變NF期贫，NF變tmp)

????????????????awk ?‘{tmp=$1;$1=$NF;$NF=tmp;print $0}’??/oldboy

??????????比較????

????????????????[root@lc-59 ~]# awk -F":" '$3>999' /etc/passwd

? ? ? ? ? ? ? ? oldboy:x:1000:1000::/home/oldboy:/bin/bash

? ? ? ? ? ? ? ? ?找出第三列中大于999的行

? ? ? ? ? ? ? ? ?[root@lc-59 ~]# awk -F":" '$3<999 && $3>500' /etc/passwd

? ? ? ? ? ? ? ? ?chrony:x:998:996::/var/lib/chrony:/sbin/nologin

? ? ? ? ? ? ? ? ? 找出第三列中小于999并且大于500的行

? ? ? ? ? ? ? （>）（<）（>=）（<=）（==）（!=）

? ? ? ? ? ? ? ? [root@lc-59 ~]# df -h |awk '$5+0>5'

? ? ? ? ? ? ? ? /dev/sda3 ???????19G ?1.8G ??18G ?10% /

? ? ? ? ? ? ? ?/dev/sda1 ??????197M ?105M ??93M ?54% /boot

? ? ? ? ? ? ? ?[root@lc-59 ~]# df -h |awk '$5>5'

? ? ? ? ? ? ? ?Filesystem ?????Size ?Used Avail Use% Mounted on

? ? ? ? ? ? ? ? /dev/sda1 ??????197M ?105M ??93M ?54% /boot

? ? ? ? ? ? ? ?當(dāng)出現(xiàn)特殊符號時+0使其轉(zhuǎn)換為數(shù)字

??????????正則

????????????????????awk ?'/^oldboy/' /lidao.txt

? ? ? ? ? ? ? ? ? ? ?取出以oldboy開頭的行

????????????????????awk ?'$3~/oldboy/' /lidao.txt

? ? ? ? ? ? ? ? ? ? ?取出第三列中以oldboy開頭的行

?????????????????????awk ?'$3~/oldboy/{print $(NF-1)}' /lidao.txt

? ? ? ? ? ? ? ? ? ? ? ?取出第三列中以oldboy開頭的行跟匆，顯示倒數(shù)第二列

?????????????????awk中的替換 ??gsub

??????????????????????gsub(/需替換的內(nèi)容/,”被替換的內(nèi)容”)

???????????????????awk ?’{gsub(/:/,”$”);print $0}’??/oldboy/reg.txt

? ? ? ? ? ? ? ? ? ?將：替換成$（將文件所有內(nèi)容替換）

? ? ? ? ? ? ? ? ? ? print $0顯示這一行的所有內(nèi)容

????????????????????awk ?’{gsub(/:/,”$”,$NF);print $0}’??/oldboy/reg.txt

? ? ? ? ? ? ? ? ? ? ? ?替換最后一列的內(nèi)容

范圍

?????????????sed -n ‘1,5p’?oldboy.txt

?????????????== awk ‘NR==1，NR==5’?oldboy.txt

? ? ? ? ? ? ? 顯示從第一行到第五行

???????????????sed -n ‘/11:10/,/12:10/p’?access.log

?????????????==awk ‘/11:10/,/12:10/’?access.log

???????????????????awk ‘$4~/11:10/,$4~/12:10/’access.log指定列數(shù)

特殊

????????????????????BEGIN{}

? ? ? ? ? ? ? ? ? ? ?花括號里的內(nèi)容會在awk讀取文件之前運(yùn)行

? ? ? ? ? ? ? ? ? ? ?進(jìn)行測試

????????????????????END{} ? 顯示最后一個結(jié)果

? ? ? ? ? ? ? ? ? ? ? ? ?顯示計算的最后結(jié)果

??????????????????????????awk ‘/^$/{i=i+1}END{print i}’?/oldboy.txt

計算

? ? ? ? ? ? ? ? ? ? ? ?i=i+1或i++ ??進(jìn)行計數(shù)

? ? ? ? ? ? ? ? ? ? ? ?統(tǒng)計一共出現(xiàn)多少次

?????????????????????awk ‘/^$/{i=i+1;print i}’?/oldboy.txt

? ? ? ? ? ? ? ? ? ? I=i+$0統(tǒng)計總數(shù) 求和

?????????????????seq 100|awk ‘{i=i+$1}END{print i}’求1-100的總和

獲取字符長度

[oldchang@oldboy-node101 ~]$ oldchang="www.oldboyedu.com"

[oldchang@oldboy-node101 ~]$ echo ${oldchang} | awk '{print length}'

老男孩教育-sed命令執(zhí)行過程

https://www.processon.com/view/link/5bea32c5e4b0ad314e894f53

老男孩教育-awk命令執(zhí)行過程-完整

https://www.processon.com/view/link/5becee35e4b0d74dc540e690

wc -l 查看空行數(shù)

cp ?-t 將需復(fù)制的文件與被復(fù)制到的目錄交換位置

cp /oldboy.txt ?/tmp/ ==== cp -t /tmp/ /oldboy.txt

?把根下odboy.txt文件復(fù)制到/tmp目錄下

xargs -i ?{}xargs -i是讓xargs后面可以使用花括號通砍，表示管道前面find找到的文件

ip a s eth0

Ip address show eth0顯示ip地址的eth0的網(wǎng)卡信息

stat顯示文件信息

12-三劍客

12-三劍客

三劍客