命令指南

3種類型的時(shí)間戳

GUN/Linux的文件包含3種類型的時(shí)間戳

Access: 2020-01-02 20:05:17.117999915 +0800    # 文件最后被訪問(wèn)的時(shí)間
Modify: 2020-01-02 20:05:17.117999915 +0800    # 文件最后被修改的時(shí)間
Change: 2020-01-02 20:05:17.117999915 +0800    # 文件狀態(tài)最后被改變的時(shí)間

對(duì)應(yīng)ls命令,查看上述時(shí)間戳的選項(xiàng)如下

mtime:最后修改時(shí)間(ls -lt) # 修改文件內(nèi)容,文件的修改時(shí)間(modify time)會(huì)改變
ctime:狀態(tài)改變時(shí)間(ls -lc) # 修改文件內(nèi)容谤辜、移動(dòng)文件或改變文件屬性等,文件的change時(shí)間會(huì)改變
atime:最后訪問(wèn)時(shí)間(ls -lu) # 查看文件內(nèi)容時(shí),文件的訪問(wèn)時(shí)間(access time)會(huì)改變

Linux文件及目錄管理命令基礎(chǔ)

shutdown

實(shí)例

常見(jiàn)的關(guān)機(jī)、重啟、注銷命令集合

PS1變量

如需要讓PS1變量永久生效,編輯/etc/bashrc文件,定位到36行,將內(nèi)容中的大寫(xiě)的W改為小寫(xiě)的w,即可讓變量永久生效.執(zhí)行 source /etc/bashrc使得修改信息生效

PWD *****:顯示當(dāng)前所在位置的信息

cd *****:切換目錄

tree ****:以樹(shù)形結(jié)構(gòu)顯示目錄下的內(nèi)容

mkdir*****:創(chuàng)建目錄

touch*****:創(chuàng)建文件或更改文件時(shí)間戳

ls*****:顯示目錄下內(nèi)容及屬性信息的命令

cp*****:復(fù)制文件或目錄

cp覆蓋文件不提示的是否覆蓋的幾種方法

1. which cp --> usr/bin/cp file1.txt file2.txt 使用cp命令的絕對(duì)路徑屏蔽別名
2. \cp file1.txt file2.txt 使用'\'屏蔽別名
3. alias取消別名 unalias cp 系統(tǒng)重啟失效
4. cat ~/.bashrc 編輯 aliascp='cp -i',重啟后生效.'.bashrc'會(huì)在開(kāi)機(jī)時(shí)加載 不建議使用,只用于開(kāi)拓思路

快速備份文件案例

cp /etc/ssh/sshd_config /etc/ssh/sshd_config.ori
# 上面的格式中,有一部分路徑重復(fù)了,使用{}進(jìn)行快捷輸入命令,這兩種方法是等效的

cp /etc/ssh/sshd_config{,.ori}
# 這種方法的原理是bash對(duì)大括號(hào)的展開(kāi)操作,/etc/ssh/sshd_config{,.ori}展開(kāi)成/etc/ssh/sshd_config /etc/ssh/sshd_config.ori再傳給cp命令

mv*****:移動(dòng)或重命名文件

• mv dir1/file* ------>"file*"匹配所有以file開(kāi)頭的文件 將dir1/file**的文件移動(dòng)到當(dāng)前所在位置

rm:刪除文件或目錄

• 補(bǔ)充:慎用rsync --delete

  • 多數(shù)情況下,刪除數(shù)據(jù)后是可以恢復(fù)的(例如,可通過(guò)恢復(fù)工具ext3grep來(lái)實(shí)現(xiàn)),但一定會(huì)影響業(yè)務(wù),例如,造成停機(jī),或者數(shù)據(jù)丟失了較長(zhǎng)時(shí)間,用戶訪問(wèn)不了等.

Linux文件過(guò)濾及內(nèi)容編輯處理

vi/vim*****:純文本編輯器

vi是Linux命令行界面下的重要文字編輯器.vim是vi的增強(qiáng)版,例如,高亮顯示代碼、自動(dòng)縮進(jìn)等.vim與vi是兼容的,建議使用vim編輯器代替vi編輯器

用法格式

vim  [option] [file]
vim  選項(xiàng)      文件

vim分為三種模式:普通模式补君、編輯模式引几、命令模式,作用分別如下:

1. 普通模式:用vim命令打開(kāi)文件后,默認(rèn)的狀態(tài)就是普通模式.在這個(gè)模式中,不能進(jìn)行編輯輸入操作,但可以按"上下左右"鍵來(lái)移動(dòng)光標(biāo),同時(shí)還可以執(zhí)行一些操作命令進(jìn)行如刪除、賦值挽铁、粘貼等工作.
2. 編輯模式:在普通模式下不能進(jìn)行編輯輸入模式,只有按下"i,I,o,O,a,A,r,R,s,S"(其中"i"最常用)等字幕進(jìn)入編輯模式后才可以執(zhí)行錄入文字等編輯操作.確定文件是否處于編輯模式狀態(tài)有一個(gè)重要特征,那就是在窗口的左下角要有插入的標(biāo)記 "-- INSERT --"或"-- 插入 --"
3. 命令模式:在普通模式下,輸入":"或"/"或"?"時(shí),光標(biāo)會(huì)自動(dòng)定位在那一行,在這個(gè)模式中可以執(zhí)行保存伟桅、退出、搜索屿储、替換贿讹、顯示行號(hào)等相關(guān)操作

image-20200108093711473.png

vim打開(kāi)文件的其他幾種方法

echo*****:顯示輸出文本內(nèi)容

可以使用;連接兩個(gè)echo命令

[root@grape tmp]# echo -e "\033[46;31mhello,world \033[0m" 打印彩色輸出,范圍是[40-47;30-37m

cat*****:合并文件或查看文件內(nèi)容

concatenate縮寫(xiě),功能是連接多個(gè)文件并且打印到屏幕輸出,或者重定向到指定文件中.此命令常用于顯示單個(gè)文件內(nèi)容,或者將幾個(gè)文件內(nèi)容連接起來(lái)一起顯示,還可以從標(biāo)準(zhǔn)輸入中讀取內(nèi)容并顯示,生產(chǎn)環(huán)境中,常與重定向或追加符配合使用.

重定向符

echo 123 1>a.txt 2>b.txt
# 此條命令如果執(zhí)行成功,則a文件會(huì)寫(xiě)入123.執(zhí)行失敗b文件會(huì)寫(xiě)入錯(cuò)誤提示.

more****:分頁(yè)顯示文件內(nèi)容

less*****:分頁(yè)顯示文件內(nèi)容 高級(jí)的more命令

head*****:顯示頭部信息

tail*****:顯示文件內(nèi)容尾部

# 從第15行開(kāi)始顯示文件
tail -n +15 /etc/passwd   # 擴(kuò)展的用法,不常用

grep*****:文本過(guò)濾工具

# 顯示所有行的行號(hào),"."代表匹配任意單個(gè)字符,即匹配了所有的內(nèi)容
grep -n '.' /etc/passwd

tr*****:替換或刪除字符

tr 'abc' 'xyz' < test.txt  # tr命令比較特殊,需要輸入重定向符<
凡是在文本中出現(xiàn)的a全部替換為x,b替換為y,c替換為z
支持正則匹配,例:
tr '[a-z]' '[A-Z]' > test.txt  # 小寫(xiě)轉(zhuǎn)大寫(xiě)

Linux文件類型及查找命令

Linux文件屬性概述

[root@grape tmp]# ll -ih
total 420K
 67194889 -rw-r--r--. 1 root root   18 Jan  9 11:36 -
   887635 drwxr-xr-x. 2 root root   37 Dec 30 11:31 12-27
 33554508 drwxr-xr-x. 2 root root   37 Jan  5 18:18 12-27.ori
 67193827 -rw-r--r--. 1 root root    0 Jan  9 09:31 123

{9IL_$RIFMU%X544F2Q1M8M.png

文件屬性詳解

第一列:Inode索引節(jié)點(diǎn)編號(hào)(相當(dāng)于人的身份證,是唯一的);系統(tǒng)讀取文件時(shí)首先通過(guò)文件名找到Inode號(hào)碼,然后才能讀取到文件內(nèi)容

第二列和第三列:文件類型及權(quán)限.這一列共包含11個(gè)字符,其中第一個(gè)字符為文件類型,隨后的9個(gè)字符為文件的對(duì)應(yīng)權(quán)限,最后一個(gè)字符點(diǎn)號(hào)"."是與SELinux有關(guān)的一個(gè)標(biāo)識(shí)

第四列:硬鏈接個(gè)數(shù)(參考ln命令).相當(dāng)于超市的多個(gè)入口,可以從不同的文件入口進(jìn)入文件,還可以互為備份.

第五列:文件或目錄所屬的用戶(屬主).在Linux系統(tǒng)中.文件和程序的存在必須要有用戶和組滿足相應(yīng)的存在需求

第六列:文件或目錄所屬的組(屬組)

第七列:文件或目錄的大小

第八列:文件或目錄的修改時(shí)間,默認(rèn)為月、日脊僚、時(shí)相叁、分

第九列:實(shí)際的文件名或目錄名.需要注意的是,文件名不算文件的屬性

Liunx文件類型及文件擴(kuò)展名

?

文件及目錄查找命令

file****:顯示文件的類型

[root@grape tmp]# file /tmp/test1.ext /tmp /dev/vhci /dev/sda /dev/log /dev/rtc 
/tmp/test1.ext: ASCII text
/tmp:           sticky directory
/dev/vhci:      character special
/dev/sda:       block special
/dev/log:       socket
/dev/rtc:       symbolic link to `rtc0'

which*****:顯示命令的全路徑

which命令查找的范圍是PATH環(huán)境變量的路徑

whereis****:顯示命令及其相關(guān)文件全路徑

whereis命令用于定位指定命令的可執(zhí)行文件、源碼文件及man幫助文件

locale****:快速定位文件路徑

在Linux系統(tǒng)有一個(gè)名為mlocate.db的數(shù)據(jù)庫(kù)文件,這個(gè)文件包含系統(tǒng)文件的文件名及對(duì)應(yīng)的路徑信息.所以,locate命令查找文件時(shí)不用遍歷磁盤(pán),而是直接查找mlocate.db文件,這樣就可以快速給出結(jié)果.使用locate命令時(shí)先updatedb更新下mlocate.db數(shù)據(jù)庫(kù)文件.當(dāng)然,mlocate.db還會(huì)由系統(tǒng)自帶的定時(shí)任務(wù)執(zhí)行updatedb命令定期更新

• /var/lib/mlocate/mlocate.db 查找的數(shù)據(jù)庫(kù)文件

• /etc/cron.daily/mlocate.cron 系統(tǒng)自帶的定時(shí)任務(wù)腳本

• /etc/cron.daily/mlocate 系統(tǒng)自帶的定時(shí)任務(wù)腳本

updatedb***:更新mlocate數(shù)據(jù)庫(kù)

創(chuàng)建或更新locate命令使用的數(shù)據(jù)庫(kù).updatedb命令會(huì)被定時(shí)任務(wù)(每天)執(zhí)行.

find*****:查找目錄下的文件

# 1.查找指定時(shí)間內(nèi)修改的文件
find . -atime -2  # 查找當(dāng)前目錄兩天內(nèi)被訪問(wèn)的文件

# 2.利用"!"進(jìn)行反向查找
find . ! -type d

# 3.按照目錄或文件的權(quán)限查找文件
find . -perm 755  # 755是權(quán)限的數(shù)字表示方式

# 4.按大小查找文件
find . -size +1000c  # 查找當(dāng)前目錄下文件大小大于1000字節(jié)的文件

# 5.查找文件時(shí)希望忽略某個(gè)目錄
find /data -path "/data/dir1" -purne -o -print  # 參數(shù)-path用于指定路徑樣式,配合-purne參數(shù)用于排除指定目錄
# -path "/data/dir1" -purne -o -print 是 -path "/data/dir1" -a -purne -o -print的簡(jiǎn)寫(xiě),-a和-o類似于shell中的"&&"和"||",當(dāng)-path "/data/dir1"為真時(shí)執(zhí)行-prune,為假時(shí)執(zhí)行-print

# 6.忽略多個(gè)目錄
find /data \(-path /data/dir1 -o -path /data/dir2 \) -purne -o -print
# 使用圓括號(hào)可以將多個(gè)表達(dá)式結(jié)合在一起,但是圓括號(hào)在命令行中另有特殊含義,所以在此處使用"\"進(jìn)行轉(zhuǎn)義,即告訴bash不對(duì)后面的字符"()"作解析,而是留給find命令處理

# 7.使用nouser和user
chown nobody:nobody file1.txt
find . -user nobody  # 查找用戶為nobody的文件

chown 555 file1.txt  # 修改為數(shù)字555
find . -nouser  # 查找數(shù)字屬主就要使用-nouser參數(shù),查找沒(méi)有任何用戶的文件

# 8.使用group和nogroup
find . -group nobody  # 查找用戶組為nobody的文件

chown .555 file1.txt
find . -nogroup

# 9.查找某個(gè)文件新或舊的文件
find . -newer file1.txt ! -newer file2.txt  # 查找更改時(shí)間比f(wàn)ile1新但比f(wàn)ile2舊的文件

# 10.邏輯操作符
find . -maxdepth 1 -type d  # 查找一級(jí)目錄,類似于tree -L 1
find . -maxdepth 1 -type d ! -name "." -o -name "ext" # 查找除"."意外的所有目錄或文件名為ext的文件

# 11.find正則表達(dá)式的用法
語(yǔ)法 find -regextype "type" -regex "pattern"

# 12.ls -l命令放在dind命令的-exec選項(xiàng)中執(zhí)行
find . -type f -exec ls -l {} \;  # 匹配當(dāng)前目錄下的所有普通文件,并在-exec選項(xiàng)中使用ls -l列出
詳細(xì)說(shuō)明:
-exec后面跟的是command命令,最后以分號(hào)(;)作為結(jié)束標(biāo)志,考慮到各個(gè)系統(tǒng)中分號(hào)會(huì)有不同的意義,所以前面要加反斜杠對(duì)分號(hào)進(jìn)行轉(zhuǎn)義
{}的作用:指代前面find命令查找到的文件或目錄
{}前后都要有空格

# 13.在目錄中查找更改時(shí)間在n天以前的文件,并刪除它們
find . -type f -mtime +n -exec rm {} \;

# 14.-exec的安全模式-ok
在刪除或其他操作之前給出提示,這樣操作會(huì)比較安全

# 15.對(duì)查找到的文件內(nèi)容顯示屬性信息
find . -type f|xargs ls -l  # xargs是一個(gè)命令,是向其他命令傳遞參數(shù)的一個(gè)過(guò)濾器

# 16.使用xargs執(zhí)行mv命令
find . -type f -name "*.txt"|xargs -i mv {} /tmp  # -xargs的-i參數(shù),使得{}代表find查找到的文件,將這些文件以參數(shù)的形式放在mv命令后面,作為移動(dòng)的源文件,移動(dòng)到/tmp目錄下

# 17.find結(jié)合x(chóng)args的-p選項(xiàng)的示例
find dir2 -name "file*"|xargs -p rm -f  # 使用xargs的-p參數(shù)會(huì)提示讓你確認(rèn)是否執(zhí)行后面的命令

# 18.技巧性范例
find /root/data -name "test.txt"|xargs rm -f
find /root/data -name "test.txt" -exec rm -f {} \;

# 19.在oldboy目錄及其子目錄下的所有以擴(kuò)展名".sh"結(jié)尾的文件中,將包含"./hostlists.txt"的字符串替換為"../idctest_iplist"
sed -i "s#./hostlists.txt#../idctest_iplist/g" 文件名
-i:將替換結(jié)果寫(xiě)入到文件
s:s是替換模式
g:global全局替換

find /oldboy -name "*.sh" -exec sed -i "s#./hostlists.txt#../idctest_iplist/g" {} \;
find /oldboy -name "*.sh"|xargs sed -i "s#./hostlists.txt#../idctest_iplist/g"
高效處理方法,優(yōu)先處理反引號(hào)中的命令
"s#./hostlists.txt#../idctest_iplist/g" `find /oldboy -name "*.sh"`

# 20.將etc下所有的普通文件打包成壓縮
find /etc -type f -exec tar zcvf test.tar.gz {} \;
find /etc -type f|xargs tar zcvf test.tar.gz
tar zcvf test.tar.gz `find /etc -type f`

# 21.刪除一個(gè)目錄下的所有文件名單保留一個(gè)文件
touch test{1..10}.txt
find . -type f ! -name "test10.txt"|xargs rm -f (推薦方法)
find . -type f ! -name "test10.txt"|-exec rm -f {} \; (文件多時(shí)效率低)
使用rsync
mkdir /null  # 建立一個(gè)空目錄用于rsync刪除文件使用
[root @mango xx]# rsync -az --delete --exclude "test10.txt" /null /xx

# 22.保留最近7天的訪問(wèn)日志
find /app/logs -type f -mtime +7 -name "*.log"|xargs rm -f
find /app/logs -type f -mtime +7 -name "*.log" -exec rm -f {} \;
find /app/logs -type f -mtime +7 -name "*.log" -delete
CustomLog "|/usr/local/sbin/cronlog /app/logs /access_www_%w.log" combined

find命令結(jié)合x(chóng)args與-exec的區(qū)別

xargs****:將標(biāo)準(zhǔn)輸入轉(zhuǎn)換成命令行參數(shù)

xargs < test.txt # 將所有數(shù)字變成一行,注意xargs不能直接接文件,需要結(jié)合重定向符"<"
xargs -n 3 < test.txt  # 每行最多輸出3個(gè)

echo splitXsplitXsplitXsplitXsplitXsplitX -d X -n 2
split split
split split
split split

假如有個(gè)hello world.txt文件
find . -type f -name "*.txt"|xargs rm  # 報(bào)錯(cuò),xargs會(huì)誤認(rèn)為hello world.txt是兩個(gè)文件
正確語(yǔ)法
find . -type f -name "*.txt" -print0|xargs -0 rm  # 以字符null分隔輸出

tar*****:打包壓縮命令

打包軟連接文件示例
tar zcf local.tar.gz /etc/rc.local  # 不指定h參數(shù)打包之后的文件將是個(gè)軟連接文件么不是rc.local實(shí)體內(nèi)容,查看文件內(nèi)容為空

tar zcfh local.tar.gz /etc/rc.local  # 指定h參數(shù)打包,得到rc.local的實(shí)體內(nèi)容

date*****:顯示與設(shè)置系統(tǒng)時(shí)間

date +%F -d "-2day"  # 前天
date +%F -d "+2day"  # 后天
+表示未來(lái),-表示過(guò)去,day表示日,year表示年,month表示月

時(shí)間格式轉(zhuǎn)換
date -d "Sun 12 Jan 2020 06:50:03 PM CST" "+%Y-%m-%d %H:%M:%S"

date -d "Sun Jan 12 11:17:02 UTC 2020" "+%Y-%m-%d %H:%M:%Sdate -s "20200523 07:18:54"

date -s "20200523 07:18:54"

Linux文件核心屬性知識(shí)

用戶和用戶組

用戶

• UID(User Identify):用戶ID,相當(dāng)于身份證,在系統(tǒng)中是唯一的
• GID(Group Identify):組ID,相當(dāng)于家庭住址

• 生產(chǎn)環(huán)境中,一般禁止root賬號(hào)通過(guò)SSH遠(yuǎn)程連接服務(wù)器,也會(huì)更改默認(rèn)的SSH端口.
• 在企業(yè)工作中,應(yīng)該盡量在普通用戶下操作任務(wù).
• 普通用戶僅具備操作自己家目錄中的文件及目錄的權(quán)限,可以進(jìn)入或?yàn)g覽相關(guān)目錄(/etc钦勘、/var/log),但是無(wú)法創(chuàng)建、修改和刪除任何文件
• 虛擬用戶是系統(tǒng)正常運(yùn)行必不可少,主要是為了方便系統(tǒng)管理,滿足相應(yīng)的系統(tǒng)進(jìn)程對(duì)文件屬主的要求.例如,系統(tǒng)默認(rèn)的bin亚亲、adm个盆、nobody、mail用戶等

用戶組

• 具有相同特征的用戶(user)集合
• 將用戶分組是Linux系統(tǒng)中對(duì)用戶進(jìn)行管理及控制訪問(wèn)權(quán)限的一種手段

用戶和用戶組的對(duì)應(yīng)關(guān)系

• 一對(duì)一:一個(gè)用戶可以存在一個(gè)組中,也可以是組中的唯一成員(root)
• 一對(duì)多:一個(gè)用戶可以存在于多個(gè)用戶組中
• 多對(duì)一:多個(gè)用戶可以存在于一個(gè)組中,這些用戶具有與組相同的權(quán)限
• 多對(duì)多:多個(gè)用戶可以存在于多個(gè)組中,并且?guī)讉€(gè)用戶可以歸屬于相同的組

創(chuàng)建用戶及用戶組

useradd maomao  # 添加用戶maomao,會(huì)默認(rèn)創(chuàng)建一個(gè)maomao用戶組,默認(rèn)屬于與用戶同名的組

[root@grape ~]# id maomao  查看maomao用戶朵栖、組及ID信息
uid=1001(maomao) gid=1001(maomao) groups=1001(maomao)

[root@grape ~]# su - maomao  切換到maomao用戶
[maomao@grape ~]$  # 提示符變?yōu)榱?

[maomao@grape ~]$ pwd  # 當(dāng)前所在位置是在用戶家目錄
/home/maomao
[maomao@grape ~]$ touch test.txt  # 創(chuàng)建文件
[maomao@grape ~]$ ll
total 0
-rw-rw-r--. 1 maomao maomao 0 May 23 07:57 test.txt  # 目錄/文件默認(rèn)屬于創(chuàng)建它的用戶和組

文件生成一定是由用戶創(chuàng)建,因此文件也必須要屬于一個(gè)用戶及組,默認(rèn)就是屬于創(chuàng)建它的用戶和組

文件權(quán)限說(shuō)明

rwxr-xr-x root root test.txt  # 每3個(gè)字符分為一組

• 屬主權(quán)限位:rwx

• 屬組權(quán)限位:r-x

• 其他用戶權(quán)限位:r-x

• r颊亮、w、x陨溅、"-"的含義

  • r(read):可讀權(quán)限,對(duì)應(yīng)數(shù)字4
  • w(write):可寫(xiě)權(quán)限:對(duì)應(yīng)數(shù)字2
  • x(Execute):可執(zhí)行權(quán)限:對(duì)應(yīng)數(shù)字1
  • "-"沒(méi)有任何權(quán)限:對(duì)應(yīng)數(shù)字0

• 還會(huì)有一些特殊的權(quán)限位t终惑、T、s门扇、S雹有、X、x臼寄、+

索引節(jié)點(diǎn)

Linux磁盤(pán)存儲(chǔ)數(shù)據(jù)的描述

1. 磁盤(pán)要存儲(chǔ)數(shù)據(jù),相當(dāng)于蓋房子住人
2. 磁盤(pán)要分區(qū)才能存儲(chǔ)數(shù)據(jù)
3. 格式化磁盤(pán),創(chuàng)建文件系統(tǒng)存儲(chǔ)數(shù)據(jù)
4. 掛載到指定目錄(掛載點(diǎn))存放數(shù)據(jù)

索引節(jié)點(diǎn)詳細(xì)說(shuō)明

• 索引節(jié)點(diǎn)(Index node,Index)在每個(gè)Linux存儲(chǔ)設(shè)備(磁盤(pán)或硬盤(pán))或存儲(chǔ)設(shè)備的分區(qū)(此時(shí)的存儲(chǔ)設(shè)備可以是硬盤(pán)霸奕、軟盤(pán)、U盤(pán)等等)中被格式化為ext系列文件系統(tǒng)之后,都會(huì)生成兩部分內(nèi)容:第一部分是Inode(默認(rèn)大小為128或256字節(jié)),第二部分是block(默認(rèn)大小為1~4KB).由于磁盤(pán)或分區(qū)一般比較大,因此,Inode和Block都會(huì)存在很多個(gè),并且都可以存放數(shù)據(jù)信息

• Inode本質(zhì)上是一小塊具備唯一數(shù)字編號(hào)的存儲(chǔ)空間,主要用來(lái)存放文件(目錄)屬性(例如ls -l的結(jié)果)的數(shù)據(jù)信息,注意,Inode里面唯獨(dú)不包含文件名本身(文件名不算文件的屬性)

• Block成為磁盤(pán)塊,是用來(lái)存放實(shí)際數(shù)據(jù)的實(shí)體單元(ext文件系統(tǒng)一般最大為4KB),即用來(lái)存放真正的數(shù)據(jù),例如,照片吉拳、視頻等普通文件,單個(gè)的大文件需要占用多個(gè)Block塊來(lái)存儲(chǔ),特別小的單個(gè)文件如果不能占滿整個(gè)Block塊,那么剩余的空間也無(wú)法再利用

• Inode存儲(chǔ)的屬性信息(即ls -l的結(jié)果),包括但不限于文件大小,屬主(用戶)质帅、歸屬的用戶組、文件權(quán)限留攒、文件類型煤惩、"修改"時(shí)間等,還包含指向文件的實(shí)體指針等(Block的位置,即Inode節(jié)點(diǎn)與Block的對(duì)應(yīng)關(guān)系)

Inode與Block的關(guān)系

• Inode除了要記錄文件屬性的信息之外,還會(huì)為每個(gè)文件進(jìn)行信息索引,所以就有了Inode數(shù)值.操作系統(tǒng)根據(jù)指令,即可以通過(guò)Inode的值最快速地找到相對(duì)應(yīng)的文件實(shí)體

Inode與Block的特點(diǎn)

1. Inode特點(diǎn)
   • ext3/ext4文件系統(tǒng)(CentOS5.x/6.x默認(rèn)的文件系統(tǒng))下,一個(gè)非空文件有且只有一個(gè)Inode和至少一個(gè)Block
   • Inode節(jié)點(diǎn)相同的文件,互為硬鏈接文件,可以認(rèn)為是一個(gè)文件的不同入口
   • Inode在某一文件系統(tǒng)(分區(qū))內(nèi)是唯一的
2. Block特點(diǎn)
   • 磁盤(pán)讀取數(shù)據(jù)是以Block為單位進(jìn)行讀取的
   • 每讀取一個(gè)Block就會(huì)消耗一次磁盤(pán)I/O
   • 若文件比較大,那么一個(gè)文件可能占用多個(gè)Block
   • 若文件比較小,那么一個(gè)Block的剩余空間會(huì)被浪費(fèi),無(wú)論內(nèi)容有多小

查看Inode和Block

[root@grape tmp]# df -i
Filesystem                Inodes IUsed    IFree IUse% Mounted on
/dev/mapper/centos-root 26214400 84355 26130045    1% /
devtmpfs                  229861   392   229469    1% /dev
tmpfs                     232903     1   232902    1% /dev/shm
tmpfs                     232903   743   232160    1% /run
tmpfs                     232903    16   232887    1% /sys/fs/cgroup
/dev/sda1                 524288   327   523961    1% /boot
/dev/mapper/centos-home 24637440  5143 24632297    1% /home
tmpfs                     232903     1   232902    1% /run/user/0

[root@grape tmp]# df -h  # Block是存放數(shù)據(jù)的位置,數(shù)據(jù)實(shí)體
Filesystem               Size  Used Avail Use% Mounted on
/dev/mapper/centos-root   50G  2.2G   48G   5% /
devtmpfs                 898M     0  898M   0% /dev
tmpfs                    910M     0  910M   0% /dev/shm
tmpfs                    910M   18M  893M   2% /run
tmpfs                    910M     0  910M   0% /sys/fs/cgroup
/dev/sda1               1014M  146M  869M  15% /boot
/dev/mapper/centos-home   47G  303M   47G   1% /home
tmpfs                    182M     0  182M   0% /run/user/0

磁盤(pán)空間滿了故障總結(jié)

1. Block耗盡的情況:500G的磁盤(pán)存放400G+200G的視頻
   • 使用df -h查看Block使用信息
2. Inode耗盡的情況:產(chǎn)生了大量的小文件(小于1kb)
   • 使用df -i查看Inode使用信息

硬鏈接及軟鏈接數(shù)

鏈接的概念

• 在Linux系統(tǒng)中,鏈接可分為兩種:一種為硬鏈接(Hard Link),另一種為軟鏈接(Soft Link)或符號(hào)鏈接(Symbolic Link)
• 默認(rèn)不帶參數(shù)的情況下,ln命令創(chuàng)建的鏈接式硬鏈接
  • ln 原始文件 目標(biāo)文件
• 如果是ln -s創(chuàng)建的鏈接,則為軟鏈接,軟鏈接文件的文件類型為l
  • ln -s 原始文件 目標(biāo)文件(目標(biāo)文件不能事先存在)

硬鏈接

• 硬鏈接是指通過(guò)索引節(jié)點(diǎn)(Inode)進(jìn)行的鏈接.在CentOS6及以前的Linux(ext2、ext3炼邀、ext4)默認(rèn)文件系統(tǒng)中,存在于磁盤(pán)分區(qū)中的文件都會(huì)分配一個(gè)唯一的編號(hào),這個(gè)標(biāo)號(hào)就稱為索引節(jié)點(diǎn)編號(hào)(Index Inode),在Linux同一文件系統(tǒng)中該編號(hào)是唯一的
• Linux系統(tǒng)中,多個(gè)文件名指向同一個(gè)索引節(jié)點(diǎn)(Inode號(hào)相同)是正常且被允許的.這種情況下的兩個(gè)文件就稱作互為硬鏈接文件,本質(zhì)上就是相同文件的兩個(gè)名字.在同一個(gè)分區(qū)/文件系統(tǒng)中,Inode號(hào)相同的文件一定是硬鏈接文件
• 硬鏈接文件相當(dāng)于是原始文件的另一個(gè)訪問(wèn)入口.作用之一是允許一個(gè)文件擁有多個(gè)有效的文件名(多個(gè)訪問(wèn)入口,類似超市的多個(gè)入口),這樣用戶就可以建立硬鏈接到重要文件上,為避免"誤刪"源數(shù)據(jù)加一份保險(xiǎn)(快照功能)
• 文件系統(tǒng)(ext)的原理是,只要文件的索引節(jié)點(diǎn)(Inode Index)還有一個(gè)以上的硬鏈接,那么,只刪除其中的一個(gè)硬鏈接(即僅僅刪除了該文件的鏈接指向)并不會(huì)影響索引節(jié)點(diǎn)本身和其他的鏈接(即數(shù)據(jù)文件實(shí)體并未刪除),只有在文件的最后一個(gè)硬鏈接被刪除后,此時(shí)如果有新數(shù)據(jù)要存儲(chǔ)到硬盤(pán)上,或者系統(tǒng)通過(guò)類似的fsck做磁盤(pán)檢查的時(shí)候,被刪除文件的數(shù)據(jù)塊及目錄的鏈接才會(huì)被釋放,空間被新數(shù)據(jù)占用并覆蓋.數(shù)據(jù)也就無(wú)法被找回
• 也就是說(shuō),在Linux系統(tǒng)中,刪除靜態(tài)文件(沒(méi)有進(jìn)程調(diào)用的文件)的條件是與之相關(guān)的所有硬鏈接文件均被刪除.一個(gè)靜態(tài)文件被徹底刪除的條件就是該文件的硬鏈接數(shù)量為0

小結(jié):

• 具有相同Inode節(jié)點(diǎn)號(hào)的多個(gè)文件互為硬鏈接文件,本質(zhì)上是相同文件的不同文件名
• 刪除硬鏈接文件或者源文件任意之一,文件實(shí)體并未被刪除
• 只有刪除了源文件及源文件對(duì)應(yīng)的所有硬鏈接文件,文件實(shí)體才會(huì)被刪除
• 待所有的硬鏈接文件及源文件均被刪除后,再存放新的數(shù)據(jù)時(shí),新數(shù)據(jù)會(huì)占用這個(gè)文件的空間.磁盤(pán)進(jìn)行fsck檢查的時(shí)候,刪除的數(shù)據(jù)就會(huì)被系統(tǒng)回收
• 硬鏈接文件就是文件的另一個(gè)入口
• 可以通過(guò)對(duì)文件設(shè)置硬鏈接文件,來(lái)防止重要文件被誤刪
• 通過(guò)執(zhí)行命令"ln 源文件 硬鏈接文件",即可完成硬鏈接的創(chuàng)建
• 硬鏈接就是普通文件
• 對(duì)于靜態(tài)文件(沒(méi)有進(jìn)程正在調(diào)用的文件)來(lái)講,當(dāng)對(duì)應(yīng)的硬鏈接數(shù)為0(i_link)時(shí),文件就被刪除.查看方式為ls -lhi
• 創(chuàng)建硬鏈接只能針對(duì)文件,不能是目錄

image-20200113092153032.png

軟鏈接

• 軟鏈接(Soft Link)也稱為符號(hào)鏈接(Symbolic Link,symlink).Linux中的軟鏈接類似于windows系統(tǒng)中的快捷方式.軟鏈接文件實(shí)際是一個(gè)特殊的文件,文件類型用字母l表示.可以將它理解為一個(gè)文本文件,這個(gè)文件中包含有軟鏈接,其指向的是另一源文件的位置信息內(nèi)容,因此,訪問(wèn)這個(gè)"快捷方式"就可以迅速定位到軟鏈接所指向的源文件實(shí)體
• 軟鏈接創(chuàng)建的方式為:ln -s 源文件 軟鏈接文件
• 要想創(chuàng)建軟鏈接,那么目標(biāo)文件是不能存在的
• 軟鏈接文件通過(guò)自身的Inode(存放原始文件路徑信息,而不是讀取Block),讀到了軟鏈接信息,并指向了原始文件,進(jìn)而讀到原始文件名,以及原始文件的Inode,再通過(guò)原始文件的Inode讀到原始文件的內(nèi)容(Block),這就是訪問(wèn)軟鏈接文件來(lái)讀取數(shù)據(jù)的原理
• 早期的軟鏈接是讀取自己的Block以獲取原始文件的路徑信息,但是這樣的訪問(wèn)方式效率很低,對(duì)于Linux系統(tǒng)來(lái)說(shuō),有一種更好的方法,成為fastsymlinks,原理就是軟鏈接的Block不存放源文件位置了,而是直接將源文件位置存放在Inode里面,即省事又快捷

image-20200113091715319.png

[root@grape tmp]# ll -i
硬鏈接 67919040 -rw-r--r--. 2 root root    16 Jan 13 08:51 music_hard.txt
軟鏈接 67160667 lrwxrwxrwx. 1 root root     9 Jan 13 08:50 music_soft.txt -> music.txt
原始文件 67919040 -rw-r--r--. 2 root root    16 Jan 13 08:51 music.txt
 
軟鏈接文件的Inode和文件類型都是不同的,軟鏈接文件是單獨(dú)的文件
 
[root@grape tmp]# readlink music_soft.txt 查看軟鏈接文件的指向
music.txt

[root@grape tmp]# rm f music.txt  刪除原始文件
[root@grape tmp]# cat music_soft.txt 
cat: music_soft.txt: No such file or directory  直接報(bào)錯(cuò)

軟鏈接會(huì)出現(xiàn)底閃爍故障
67160667 lrwxrwxrwx. 1 root root     9 Jan 13 08:50 music_soft.txt -> music.txt

小結(jié):

• ln命令不能對(duì)目錄創(chuàng)建硬鏈接,但可以對(duì)目錄創(chuàng)建軟鏈接
• 軟鏈接類似于Windows的快捷方式(通過(guò)readlink查看其指向)
• 軟鏈接類似于一個(gè)文本文件,里面存放的是源文件的路徑,指向源文件的實(shí)體
• 刪除源文件,軟鏈接文件依然存在,但是無(wú)法訪問(wèn)指向源文件路徑的內(nèi)容
• 失效的時(shí)候一般是紅底白字閃爍
• 執(zhí)行命令"ln -s 源文件 軟鏈接文件",即可完成軟鏈接的創(chuàng)建(目標(biāo)不能存在)
• 軟鏈接和源文件是不同類型的文件,也是不同的文件,Inode號(hào)也不相同
• 軟鏈接文件的文件類型為字母(l)
• 軟鏈接不僅針對(duì)文件,還可以針對(duì)目錄

軟鏈接與硬鏈接的區(qū)別

1. 答分類:Linux系統(tǒng)中,鏈接可分為兩種,一種稱為硬鏈接(Hard Link),另一種稱為符號(hào)鏈接(Symbolic Link)或軟鏈接(Soft link)
2. 答概念:硬鏈接與源文件的Inode節(jié)點(diǎn)號(hào)相同,而軟鏈接文件則相當(dāng)于Windows下的快捷方式(Inode節(jié)點(diǎn)號(hào)與源文件不同)
3. 答創(chuàng)建:默認(rèn)不帶參數(shù)的情況下,ln命令創(chuàng)建的是硬鏈接,帶-s參數(shù)創(chuàng)建的是軟鏈接
4. 答特點(diǎn):
   • 不能對(duì)目錄創(chuàng)建硬鏈接,但可以創(chuàng)建軟鏈接
   • 軟鏈接可以跨文件系統(tǒng),硬鏈接不能跨文件系統(tǒng)
   • 刪除軟鏈接文件,對(duì)源文件以及硬鏈接文件無(wú)任何影響
   • 刪除文件的硬鏈接文件,對(duì)源文件及軟鏈接文件無(wú)任何影響
   • 刪除鏈接文件的源文件,對(duì)硬鏈接文件無(wú)影響,會(huì)導(dǎo)致其軟鏈接失效(紅底白字閃爍)
   • 同時(shí)刪除源文件及其硬鏈接文件,整個(gè)文件才會(huì)被"真正"刪除
5. 答案例:硬鏈接用處不多,可以用來(lái)對(duì)重要文件做快照以防誤刪,對(duì)目錄建立軟鏈接在工作中很常用

Linux系統(tǒng)文件刪除原理

1.從ext文件系統(tǒng)的角度

• Linux系統(tǒng)上的文件名是存儲(chǔ)在父目錄的Block里面的,并指向了這個(gè)文件的Inode節(jié)點(diǎn),這個(gè)文件的Inode節(jié)點(diǎn)再標(biāo)記指向存放這個(gè)文件的Block的數(shù)據(jù)塊.在刪除一個(gè)文件時(shí),實(shí)際上并不會(huì)清除Inode節(jié)點(diǎn)和Block的數(shù)據(jù).只是在這個(gè)文件的父目錄中的Block里,刪除這個(gè)文件的名字,從而使這個(gè)文件消失,并且無(wú)法指向這個(gè)文件的Inode節(jié)點(diǎn).當(dāng)沒(méi)有文件名指向這個(gè)Inode節(jié)點(diǎn)的時(shí)候,釋放Inode節(jié)點(diǎn)和存放這個(gè)文件數(shù)據(jù)的Block塊會(huì)同時(shí)進(jìn)行,并且會(huì)更新Inode MAP和Block MAP,以便讓這些位置用于存放其他文件數(shù)據(jù)

2.從文件引用的角度

• Linux系統(tǒng)是通過(guò)Link的數(shù)量來(lái)控制文件是否被刪除,只有當(dāng)一個(gè)文件不存在任何Link的時(shí)候,這個(gè)文件才會(huì)被刪除.一般來(lái)說(shuō),每個(gè)文件都有2個(gè)計(jì)數(shù)器,即i_count和i_nlink
• i_nlink就是文件硬鏈接的數(shù)量,i_nlink可以理解為磁盤(pán)的引用計(jì)數(shù)器;i_count就是當(dāng)前文件使用者(例如,被進(jìn)程調(diào)用)的數(shù)量,i_count可以理解為內(nèi)存的引用計(jì)數(shù)器.當(dāng)為文件創(chuàng)建硬鏈接的時(shí)候,對(duì)應(yīng)的i_nlink的數(shù)量就會(huì)增加,而當(dāng)一個(gè)文件被某一個(gè)進(jìn)程調(diào)用時(shí),對(duì)應(yīng)i_count的數(shù)量就會(huì)增加
• 通過(guò)rm刪除命令刪除文件,實(shí)際就是減少文件的磁盤(pán)引用計(jì)數(shù)i_nlink的數(shù)量
• 在用戶執(zhí)行rm操作刪除文件之后,再執(zhí)行l(wèi)s或者其他文件管理命令,將會(huì)無(wú)法再找到這個(gè)文件,但是調(diào)用這個(gè)被刪除文件的進(jìn)程卻在繼續(xù)正常執(zhí)行,依然能夠從文件中正確地讀取及寫(xiě)入內(nèi)容
• 這是因?yàn)閞m操作只是將文件的i_nlink數(shù)減少了,如果沒(méi)有其他的鏈接,i_nlink就位0;但是由于該文件依然在被進(jìn)程調(diào)用,因此,此時(shí)文件對(duì)應(yīng)的i_count并不為0,所以即使執(zhí)行了rm操作,但系統(tǒng)沒(méi)有真正刪除這個(gè)文件,因此該文件還會(huì)占用磁盤(pán)空間,只有當(dāng)i_nlink及i_count都為0的時(shí)候,這個(gè)文件才會(huì)真正被刪除.也就是說(shuō),還需要解除該進(jìn)程對(duì)該文件的調(diào)用,被刪除的文件才會(huì)真正被刪除
• 當(dāng)文件沒(méi)有被進(jìn)程調(diào)用時(shí)進(jìn)行刪除,也可以找回文件數(shù)據(jù).先是將文件名到Inode的鏈接刪除了,此時(shí),并沒(méi)有刪除文件的實(shí)體即Block數(shù)據(jù)塊,如果及時(shí)停止機(jī)器工作,數(shù)據(jù)還是可以找回的,但如果此時(shí)繼續(xù)寫(xiě)入數(shù)據(jù),那么新的數(shù)據(jù)可能就會(huì)被分配到被刪除數(shù)據(jù)的Block數(shù)據(jù)塊了,此時(shí),文件就是被真正地回收了

image-20200113112251317.png

chattr***:改變文件的擴(kuò)展屬性

chattr +a 文件名
chattr +i 文件名

lsattr***:查看文件擴(kuò)展屬性

Linux通配符與特殊符號(hào)知識(shí)

通配符符號(hào)集合

路徑和位置相關(guān)特殊符號(hào)

不同引號(hào)特殊符號(hào)

其他特殊符號(hào)

Bash中的邏輯操作符

基本正則表達(dá)式集合

擴(kuò)展正則表達(dá)式

預(yù)定義特殊中括號(hào)

元字符表達(dá)式

sed*****:流編輯器

常用參數(shù)選項(xiàng)

常用內(nèi)置命令字符

# 示例
1.輸出文件的第2-3行內(nèi)容
sed -n '2,3p' 文件名

2.過(guò)濾出含有mango的字符
sed -n '/mango/p' 文件名  # 需要用雙斜線將需要過(guò)濾的字符串包含在中間

3.刪除含有mango字符串的行
sed '/mango/d' 文件名  # 如果需要修改文件,則要用-i參數(shù)

4.刪除指定的行
sed '3d' 文件名
sed '5,8d' 文件名  # 刪除第5~8行

5.將mango字符串全部替換為apple
sed -i 's#mango#apple#g' 文件名  # s表示替換模式,g表示全局替換

6.將mango字符串全部替換為apple,同時(shí)將1替換為2
sed -e 's#mango#apple#g' -e 's#1#2#g' 文件名

7.在文件的第二行追加文本
sed -i '2a hello,world' 文件名

8.在文件的第二行插入文本
sed -i '2i hello,world' 文件名

9.在文件的第二行插入兩行文本
sed -i '2i hello,world\nhow are u' 文件名

10.1讀取ifconfig中的第二行ip地址
ifconfig |sed -n '2s#^.*inet##gp'|sed -n 's#netm.*$##gp'  # '##'表示替換為空,然后輸出剩下的字符

10.2
ifconfig -ne '2s#^.*inet##gp' -ne 's#netm.*$##gp'

10.3
ifconfig |sed -rn '2s#^.*inet (.*) netm.*$#\1#gp'  # \r表示支持?jǐn)U展的正則表達(dá)式

awk*****:Linux最強(qiáng)大的文本處理工具

awk常用功能

序號(hào)	awk命令常用參數(shù)	簡(jiǎn)要例子說(shuō)明
1	指定分隔符顯示某幾列	awk -F "GET|HTTP" '{print $2}' access.log直接獲取顯示出日志文件的url這一列
2	通過(guò)正則表達(dá)式取出想要獲取的內(nèi)容	awk '11}' /var/log/secure分析生產(chǎn)環(huán)境中的日志找出誰(shuí)在破解用戶密碼
3	顯示某個(gè)范圍內(nèi)的內(nèi)容	awk 'NR==20,NR==30' filename顯示文件的20到30行
4	通過(guò)awk進(jìn)行統(tǒng)計(jì)計(jì)算	awk '{sum+=$0}END{print sum}' ett.txt進(jìn)行總計(jì)算(高級(jí)功能)
5	awk數(shù)組計(jì)算與去重	awk '{array[$1]++}END{for (key in array) print key,array[key]}' access.log 對(duì)日志進(jìn)行統(tǒng)計(jì)與計(jì)數(shù)(高級(jí)功能)

awk命令的參數(shù)

awk常見(jiàn)變量及屬性

1.1 取test.txt文件的第2行和第3行的內(nèi)容
awk "NR==2,NR==3" test.txt

1.2 
awk "NR>1&&NR<4" test.txt

2. 過(guò)濾出含有root字符串的行
awk '/root/' test.txt

3.刪除含有root字符串的行
awk '/^[^root]/' test.txt

4.取文件的第一列谅畅、第三列和最后一列的內(nèi)容,并打印行號(hào)
awk -F ":" '{print NR,$1,$3,$NF}' test.txt

5.取出linux中執(zhí)行ifconfig的對(duì)應(yīng)ip地址
ifconfig|awk 'NR==2{print $2}'  # CentOS7
ifconfig|awk -F "[: ]+" 'NR==2{print $4}'  # CentOS6
ifconfig|awk -F "(addr:)|  (Bcast:)" 'NR==2{print$2}' # CentOS6 以括號(hào)中的內(nèi)容做分隔,|表示匹配左邊或右邊.即將左邊"addr:"或右邊"  Bcast"做分隔符

6.過(guò)濾文件中第一列的內(nèi)容所匹配的root字符串,將符合條件的最后一列輸出
awk -F ":" '/root/ {print $NF}' test.txt