命令行的藝術(shù)

• 前言
• 基礎(chǔ)
• 日常使用
• 文件及數(shù)據(jù)處理
• 系統(tǒng)調(diào)試
• 單行腳本
• 冷門但有用
• 僅限 OS X 系統(tǒng)
• 僅限 Windows 系統(tǒng)
• 更多資源
• 免責(zé)聲明

熟練使用命令行是一種常常被忽視晋控，或被認(rèn)為難以掌握的技能浅乔，但實際上倔喂，它會提高你作為工程師的靈活性以及生產(chǎn)力。本文是一份我在 Linux 上工作時靖苇，發(fā)現(xiàn)的一些命令行使用技巧的摘要席噩。有些技巧非常基礎(chǔ)贤壁，而另一些則相當(dāng)復(fù)雜悼枢，甚至晦澀難懂。這篇文章并不長脾拆，但當(dāng)你能夠熟練掌握這里列出的所有技巧時馒索，你就學(xué)會了很多關(guān)于命令行的東西了。

這篇文章是許多作者和譯者共同的成果名船。
這里的部分內(nèi)容
首次
出現(xiàn)
于 Quora绰上，
但已經(jīng)遷移到了 Github，并由眾多高手做出了許多改進(jìn)渠驼。
如果你在本文中發(fā)現(xiàn)了錯誤或者存在可以改善的地方蜈块，請貢獻(xiàn)你的一份力。

前言

涵蓋范圍：

• 這篇文章對剛接觸命令行的新手以及具有命令行使用經(jīng)驗的人都有用處。本文致力于做到覆蓋面廣（盡量包括一切重要的內(nèi)容）百揭，具體（給出最常見的具體的例子）以及簡潔（避免不必要的爽哎，或是可以在其他地方輕松查到的細(xì)枝末節(jié)）。每個技巧在特定情境下或是基本的器一，或是能顯著節(jié)約時間课锌。
• 本文為 Linux 所寫，除了僅限 OS X 系統(tǒng)和僅限 Windows 系統(tǒng)的部分祈秕。其它節(jié)中的大部分內(nèi)容都適用于其它 Unix 系統(tǒng)或 OS X渺贤，甚至 Cygwin。
• 本文關(guān)注于交互式 Bash请毛，盡管很多技巧也適用于其他 shell 或 Bash 腳本癣亚。
• 本文包括了“標(biāo)準(zhǔn)的”Unix 命令和需要安裝特定包的命令，只要它們足夠重要获印。

注意事項：

• 為了能在一頁內(nèi)展示盡量多的東西，一些具體的信息會被間接的包含在引用頁里街州。聰明機(jī)智的你如果掌握了使用 Google 搜索引擎的基本思路與命令兼丰，那么你將可以查閱到更多的詳細(xì)信息。使用 apt-get唆缴，yum鳍征，dnf，pacman面徽，pip 或 brew（以及其它合適的包管理器）來安裝新程序艳丛。
• 使用 Explainshell 去獲取相關(guān)命令、參數(shù)趟紊、管道等內(nèi)容的解釋氮双。

基礎(chǔ)

• 學(xué)習(xí) Bash 的基礎(chǔ)知識。具體來說霎匈，輸入 man bash 并至少全文瀏覽一遍; 它很簡單并且不長戴差。其他的 shell 可能很好用，但 Bash 功能強(qiáng)大且?guī)缀跛星闆r下都是可用的 （ 只學(xué)習(xí) zsh铛嘱，fish 或其他的 shell 的話暖释，在你自己的電腦上會顯得很方便，但在很多情況下會限制你墨吓，比如當(dāng)你需要在服務(wù)器上工作時）球匕。

• 學(xué)習(xí)并掌握至少一個基于文本的編輯器。通常 Vim （vi） 會是你最好的選擇帖烘，因為在終端里進(jìn)行隨機(jī)編輯 Vim 真的毫無敵手亮曹，哪怕是 Emacs、某大型 IDE 甚至?xí)r下非常流行的編輯器。

• 學(xué)會如何使用 man 命令去閱讀文檔乾忱。學(xué)會使用 apropos 去查找文檔讥珍。了解有些命令并不對應(yīng)可執(zhí)行文件，而是Bash內(nèi)置的窄瘟，可以使用 help 和 help -d 命令獲取幫助信息衷佃。

• 學(xué)會使用 > 和 < 來重定向輸出和輸入，學(xué)會使用 | 來重定向管道蹄葱。明白 > 會覆蓋了輸出文件而 >> 是在文件末添加氏义。了解標(biāo)準(zhǔn)輸出 stdout 和標(biāo)準(zhǔn)錯誤 stderr。

• 學(xué)會使用通配符 * （或許再算上 ? 和 [...]） 和引用以及引用中 ' 和 " 的區(qū)別图云。

• 熟悉 Bash 任務(wù)管理工具：&惯悠，ctrl-z，ctrl-c竣况，jobs克婶，fg，bg丹泉，kill 等情萤。

• 了解 ssh，以及學(xué)會通過使用 ssh-agent摹恨，ssh-add 等命令來實現(xiàn)基本的無密碼認(rèn)證筋岛。

• 學(xué)會基本的文件管理：ls 和 ls -l （了解 ls -l 中每一列代表的意義），less晒哄，head睁宰，tail 和 tail -f （甚至 less +F），ln 和 ln -s （了解硬鏈接與軟鏈接的區(qū)別）寝凌，chown柒傻，chmod，du （硬盤使用情況概述：du -hs *）硫兰。 關(guān)于文件系統(tǒng)的管理诅愚，學(xué)習(xí) df，mount劫映，fdisk违孝，mkfs，lsblk泳赋。知道 inode 是什么（與 ls -i 和 df -i 等命令相關(guān)）雌桑。

• 學(xué)習(xí)基本的網(wǎng)絡(luò)管理：ip 或 ifconfig，dig祖今。

• 學(xué)習(xí)并使用一種版本控制管理系統(tǒng)校坑，例如 git拣技。

• 熟悉正則表達(dá)式，以及 grep／egrep 里不同參數(shù)的作用耍目，例如 -i膏斤，-o，-v邪驮，-A莫辨，-B 和 -C，這些參數(shù)是值得學(xué)習(xí)并掌握的毅访。

• 學(xué)會使用 apt-get沮榜，yum，dnf 或 pacman （取決于你使用的 Linux 發(fā)行版）來查找或安裝軟件包喻粹。并確保你的環(huán)境中有 pip 來安裝基于 Python 的命令行工具 （接下來提到的部分程序使用 pip 來安裝會很方便）蟆融。

日常使用

• 在 Bash 中，可以使用 Tab 自動補(bǔ)全參數(shù)守呜，使用 ctrl-r 搜索命令行歷史（在按下之后型酥，鍵入便可以搜索，重復(fù)按下 ctrl-r 會在更多匹配中循環(huán)查乒，按下 Enter 會執(zhí)行找到的命令冕末，按下右方向鍵會將結(jié)果放入當(dāng)前行中，使你可以進(jìn)行編輯）侣颂。

• 在 Bash 中，可以使用 ctrl-w 刪除你鍵入的最后一個單詞枪孩，使用 ctrl-u 刪除整行憔晒，使用 alt-b 和 alt-f 以單詞為單位移動光標(biāo)，使用 ctrl-a 將光標(biāo)移至行首蔑舞，使用 ctrl-e 將光標(biāo)移至行尾拒担，使用 ctrl-k 刪除光標(biāo)至行尾的所有內(nèi)容，使用 ctrl-l 清屏攻询。鍵入 man readline 查看 Bash 中的默認(rèn)快捷鍵从撼，內(nèi)容很多。例如 alt-. 循環(huán)地移向前一個參數(shù)钧栖，以及 alt-* 展開通配符低零。

• 你喜歡的話，可以鍵入 set -o vi 來使用 vi 風(fēng)格的快捷鍵拯杠，而 set -o emacs 可以把它改回來掏婶。

• 為了方便地鍵入長命令，在設(shè)置你的編輯器后（例如 export EDITOR=vim）潭陪，鍵入 ctrl-x ctrl-e 會打開一個編輯器來編輯當(dāng)前命令雄妥。在 vi 模式下則鍵入 escape-v 實現(xiàn)相同的功能最蕾。

• 鍵入 history 查看命令行歷史記錄。其中有許多縮寫老厌，例如 !$（最后鍵入的參數(shù)）和 !!（最后鍵入的命令）瘟则，盡管通常被 ctrl-r 和 alt-. 取代。

• 要進(jìn)入家目錄可以用 cd枝秤。要訪問你的家目錄中的文件醋拧，可以使用前綴 ~（例如 ~/.bashrc）。在 sh 腳本里則用 $HOME 指代家目錄宿百。

• 回到上一個工作路徑：cd -

• 如果你輸入命令的時候改變了主意趁仙，按下 alt-# 來在行首添加 #，或者依次按下 ctrl-a垦页， #雀费， enter。這樣做的話痊焊，之后你可以很方便的利用命令行歷史回到你剛才輸入到一半的命令盏袄。

• 使用 xargs （ 或 parallel）。他們非常給力薄啥。注意到你可以控制每行參數(shù)個數(shù)（-L）和最大并行數(shù)（-P）辕羽。如果你不確定它們是否會按你想的那樣工作，先使用 xargs echo 查看一下垄惧。此外刁愿，使用 -I{} 會很方便。例如：

      find . -name '*.py' | xargs grep some_function
      cat hosts | xargs -I{} ssh root@{} hostname

• pstree -p 有助于展示進(jìn)程樹到逊。

• 使用 pgrep 和 pkill 根據(jù)名字查找進(jìn)程或發(fā)送信號（-f 參數(shù)通常有用）铣口。

• 了解你可以發(fā)往進(jìn)程的信號的種類。比如觉壶，使用 kill -STOP [pid] 停止一個進(jìn)程脑题。使用 man 7 signal 查看詳細(xì)列表。

• 使用 nohup 或 disown 使一個后臺進(jìn)程持續(xù)運行铜靶。

• 使用 netstat -lntp 或 ss -plat 檢查哪些進(jìn)程在監(jiān)聽端口（默認(rèn)是檢查 TCP 端口; 使用參數(shù) -u 檢查 UDP 端口）叔遂。

• 有關(guān)打開套接字和文件，請參閱 lsof争剿。

• 使用 uptime 或 w 來查看系統(tǒng)已經(jīng)運行多長時間已艰。

• 使用 alias 來創(chuàng)建常用命令的快捷形式。例如：alias ll='ls -latr' 創(chuàng)建了一個新的命令別名 ll蚕苇。

• 把別名旗芬、shell 選項和常用函數(shù)保存在 ~/.bashrc，然后安排登陸 shell 來讀取捆蜀。這樣你就可以在所有 shell 會話中使用你的設(shè)定疮丛。

• 把環(huán)境變量的設(shè)定以及登陸時要執(zhí)行的命令保存在 ~/.bash_profile幔嫂。對于從圖形界面啟動的，以及 cron 工作的 shell誊薄，需要單獨配置履恩。

• 要在幾臺電腦中同步你的配置文件（例如 .bashrc 和 .bash_profile）旭斥，可以用 Git叹侄。

• 當(dāng)變量和文件名中包含空格的時候要格外小心难咕。Bash 變量要用引號括起來渴丸，比如 "FOO"。盡量使用 -0 或 -print0 選項以便用空字符來分隔文件名斩郎，例如 locate -0 pattern | xargs -0 ls -al 或 find / -print0 -type d | xargs -0 ls -al悉稠。如果 for 循環(huán)中循環(huán)訪問的文件名含有空格实蓬，只需用 IFS=$'\\n' 把內(nèi)部字段分隔符設(shè)為換行符俏脊。

• 在 Bash 腳本中全谤，使用 set -x 去調(diào)試輸出，盡可能的使用嚴(yán)格模式爷贫，使用 set -e 令腳本在發(fā)生錯誤時退出而不是繼續(xù)運行认然，使用 set -u 來檢查是否使用了未賦值的變量，使用 set -o pipefail 嚴(yán)謹(jǐn)?shù)貙Υe誤（盡管問題可能很微妙）漫萄。當(dāng)牽扯到很多腳本時卷员，使用 trap。一個好的習(xí)慣是在腳本文件開頭這樣寫腾务，這會使它檢測一些錯誤毕骡，并在錯誤發(fā)生時中斷程序并輸出信息：

      set -euo pipefail
      trap "echo 'error: Script failed: see failed command above'" ERR

• 在 Bash 腳本中，子 shell（使用括號 (...)）是一種組織參數(shù)的便捷方式岩瘦。一個常見的例子是臨時地移動工作路徑挺峡，代碼如下：

      # do something in current dir
      (cd /some/other/dir && other-command)
      # continue in original dir

• 在 Bash 中，要注意其中有許多形式的擴(kuò)展担钮。檢查變量是否存在：${name:?error message}。例如尤仍，當(dāng) Bash 腳本需要一個參數(shù)時箫津，可以使用這樣的代碼 input_file=${1:?usage: $0 input_file}。數(shù)學(xué)表達(dá)式：i=$(( (i + 1) % 5 ))宰啦。序列：{1..10}苏遥。截斷字符串：${var%suffix} 和 ${var#prefix}。例如赡模，假設(shè) var=foo.pdf田炭，那么 echo ${var%.pdf}.txt 將輸出 foo.txt。

• 使用括號擴(kuò)展（{...}）來減少輸入相似文本漓柑，并自動化文本組合教硫。這在某些情況下會很有用叨吮，例如 mv foo.{txt,pdf} some-dir（同時移動兩個文件），cp somefile{,.bak}（會被擴(kuò)展成 cp somefile somefile.bak）或者 mkdir -p test-{a,b,c}/subtest-{1,2,3}（會被擴(kuò)展成所有可能的組合瞬矩，并創(chuàng)建一個目錄樹）茶鉴。

• 通過使用 <(some command) 可以將輸出視為文件。例如景用，對比本地文件 /etc/hosts 和一個遠(yuǎn)程文件：

      diff /etc/hosts <(ssh somehost cat /etc/hosts)

• 了解 Bash 中的“here documents”涵叮，例如 cat <<EOF ...。

• 在 Bash 中伞插，同時重定向標(biāo)準(zhǔn)輸出和標(biāo)準(zhǔn)錯誤割粮，some-command >logfile 2>&1。通常媚污，為了保證命令不會在標(biāo)準(zhǔn)輸入里殘留一個打開了的文件句柄導(dǎo)致你當(dāng)前所在的終端無法操作舀瓢，添加 </dev/null 是一個好習(xí)慣。

• 使用 man ascii 查看具有十六進(jìn)制和十進(jìn)制值的ASCII表杠步。man unicode氢伟，man utf-8，以及 man latin1 有助于你去了解通用的編碼信息幽歼。

• 使用 screen 或 tmux 來使用多個屏幕朵锣，當(dāng)你在使用 ssh 時（保存 session 信息）將尤為有用。另一個輕量級的解決方案是 dtach甸私。

• ssh 中诚些，了解如何使用 -L 或 -D（偶爾需要用 -R）去開啟隧道是非常有用的，例如當(dāng)你需要從一臺遠(yuǎn)程服務(wù)器上訪問 web皇型。

• 對 ssh 設(shè)置做一些小優(yōu)化可能是很有用的诬烹，例如這個 ~/.ssh/config 文件包含了防止特定環(huán)境下斷開連接、壓縮數(shù)據(jù)弃鸦、多通道等選項：

      TCPKeepAlive=yes
      ServerAliveInterval=15
      ServerAliveCountMax=6
      Compression=yes
      ControlMaster auto
      ControlPath /tmp/%r@%h:%p
      ControlPersist yes

• 部分其他的關(guān)于 ssh 的選項是安全敏感且應(yīng)當(dāng)小心啟用的绞吁。例如在可信任的網(wǎng)絡(luò)中：StrictHostKeyChecking=no，ForwardAgent=yes

• 考慮使用 mosh 作為 ssh 的替代品唬格，它使用 UDP 協(xié)議家破。

• 獲取文件的八進(jìn)制格式權(quán)限，使用類似如下的代碼：

      stat -c '%A %a %n' /etc/timezone

• 使用 percol 或者 fzf 可以交互式地從另一個命令輸出中選取值购岗。

• 使用 fpp（PathPicker）可以與基于另一個命令(例如 git）輸出的文件交互汰聋。

• 將 web 服務(wù)器上當(dāng)前目錄下所有的文件（以及子目錄）暴露給你所處網(wǎng)絡(luò)的所有用戶，使用：
  python -m SimpleHTTPServer 7777 （使用端口 7777 和 Python 2）或python -m http.server 7777 （使用端口 7777 和 Python 3）喊积。

• 以某種權(quán)限執(zhí)行命令烹困，使用sudo（root 權(quán)限）或sudo -u（其他用戶）。使用su或者sudo bash來啟動一個以對應(yīng)用戶權(quán)限運行的 shell乾吻。使用su -模擬其他用戶的登錄髓梅。

• 了解命令行的 128K 限制拟蜻。使用通配符匹配大量文件名時，常會遇到“Argument list too long”的錯誤信息女淑。（這種情況下?lián)Q用 find 或 xargs 通巢t郑？梢越鉀Q。）

• 要實現(xiàn)基本的計算器功能（或者一般地使用 Python）鸭你，可以使用 python 解釋器屈张。例如：

>>> 2+3
5

文件及數(shù)據(jù)處理

• 在當(dāng)前路徑下通過文件名定位一個文件，find . -iname '*something*'（或類似的）袱巨。在所有路徑下通過文件名查找文件阁谆，使用 locate something （但請記住 updatedb 可能沒有對最近新建的文件建立索引）。

• 使用 ag 在源代碼或數(shù)據(jù)文件里檢索（比 grep -r 更好）愉老。

• 將 HTML 轉(zhuǎn)為文本：lynx -dump -stdin

• Markdown场绿，HTML，以及所有文檔格式之間的轉(zhuǎn)換嫉入，試試 pandoc焰盗。

• 如果你不得不處理 XML，xmlstarlet 寶刀未老咒林。

• 使用 jq 處理 JSON熬拒。

• 使用 shyaml 處理 YAML。

• Excel 或 CSV 文件的處理垫竞，csvkit 提供了 in2csv澎粟，csvcut，csvjoin欢瞪，csvgrep 等工具活烙。

• 關(guān)于 Amazon S3，s3cmd 很方便而 s4cmd 更快遣鼓。Amazon 官方的 aws 以及 saws 是其他 AWS 相關(guān)工作的基礎(chǔ)啸盏。

• 了解如何使用 sort 和 uniq，包括 uniq 的 -u 參數(shù)和 -d 參數(shù)骑祟，詳見后文單行腳本節(jié)回懦。另外可以了解一下 comm。

• 了解如何使用 cut曾我，paste 和 join 來更改文件。很多人都會使用 cut健民，但幾乎都不會使用 join抒巢。

• 了解如何運用 wc 去計算新行數(shù)（-l），字符數(shù)（-m）秉犹，單詞數(shù)（-w）以及字節(jié)數(shù)（-c）蛉谜。

• 了解如何使用 tee 將標(biāo)準(zhǔn)輸入復(fù)制到文件甚至標(biāo)準(zhǔn)輸出稚晚，例如 ls -al | tee file.txt。

• 了解語言環(huán)境對許多命令行工具的微妙影響型诚，包括排序的順序和性能客燕。大多數(shù) Linux 的安裝過程會將 LANG 或其他有關(guān)的變量設(shè)置為符合本地的設(shè)置。意識到當(dāng)你改變語言環(huán)境時狰贯，排序的結(jié)果可能會改變也搓。明白國際化可能會使 sort 或其他命令運行效率下降許多倍。某些情況下（例如集合運算）你可以放心的使用 export LC_ALL=C 來忽略掉國際化并使用基于字節(jié)的順序涵紊。

• 你可以單獨指定某一條命令的環(huán)境傍妒，只需在調(diào)用時把環(huán)境變量設(shè)定放在前面，例如 TZ=Pacific/Fiji date摸柄。

• 了解 awk 和 sed 關(guān)于數(shù)據(jù)的簡單處理的用法颤练。例如，將文本文件中第三列的所有數(shù)字求和：awk '{ x += $3 } END { print x }'. 這可能比同等作用的 Python 代碼快三倍且代碼量少三倍驱负。

• 替換一個或多個文件中出現(xiàn)的字符串：

      perl -pi.bak -e 's/old-string/new-string/g' my-files-*.txt

• 使用 repren 來批量重命名嗦玖，或是在多個文件中搜索替換。（有些時候 rename 命令也可以批量重命名跃脊，但要注意宇挫，它在不同 Linux 發(fā)行版中的功能并不完全一樣。）

      # 將文件匾乓、目錄和內(nèi)容全部重命名 foo -> bar:
      repren --full --preserve-case --from foo --to bar .
      # 還原所有備份文件 whatever.bak -> whatever:
      repren --renames --from '(.*)\\.bak' --to '\\1' *.bak
      # 用 rename 實現(xiàn)上述功能（若可用）:
      rename 's/\\.bak$//' *.bak

• 根據(jù) man 頁面的描述捞稿，rsync 真的是一個快速且非常靈活的文件復(fù)制工具。它通常被用于機(jī)器間的同步拼缝，但在本地也同樣有用娱局。在安全限制允許下，用 rsync 代替 scp 可以實現(xiàn)續(xù)傳咧七，而不用重新從頭開始衰齐。它同時也是刪除大量文件的最快方法之一：

mkdir empty && rsync -r --delete empty/ some-dir && rmdir some-dir

• 使用 shuf 從一個文件中隨機(jī)選取多行。

• 了解 sort 的參數(shù)继阻。處理數(shù)字方面耻涛，使用 -n 或者 -h 來處理可讀性數(shù)字（例如 du -h 的輸出）。明白鍵的工作原理（-t 和 -k）瘟檩。例如抹缕，注意到你需要 -k1，1 來僅按第一個域來排序墨辛，而 -k1 意味著按整行排序卓研。穩(wěn)定排序（sort -s）在某些情況下很有用。例如，以第二個域為主關(guān)鍵字奏赘，第一個域為次關(guān)鍵字進(jìn)行排序寥闪，你可以使用 sort -k1，1 | sort -s -k2磨淌，2疲憋。

• 如果你想在 Bash 命令行中寫 tab 制表符，按下 ctrl-v [Tab] 或鍵入 $'\\t' （后者可能更好梁只，因為你可以復(fù)制粘貼它）缚柳。

• 標(biāo)準(zhǔn)的源代碼對比及合并工具是 diff 和 patch。使用 diffstat 查看變更總覽數(shù)據(jù)敛纲。注意到 diff -r 對整個文件夾有效喂击。使用 diff -r tree1 tree2 | diffstat 查看變更總覽數(shù)據(jù)。

• 對于二進(jìn)制文件淤翔，使用 hd 使其以十六進(jìn)制顯示以及使用 bvi 來編輯二進(jìn)制翰绊。

• 同樣對于二進(jìn)制文件，strings（包括 grep 等等）允許你查找一些文本旁壮。

• 二進(jìn)制文件對比（Delta 壓縮）监嗜，使用 xdelta3。

• 使用 iconv 更改文本編碼抡谐。而更高級的用法裁奇，可以使用 uconv，它支持一些高級的 Unicode 功能麦撵。例如刽肠，這條命令將所有元音字母轉(zhuǎn)為小寫并移除了：

      uconv -f utf-8 -t utf-8 -x '::Any-Lower; ::Any-NFD; [:Nonspacing Mark:] >; ::Any-NFC; ' < input.txt > output.txt

• 拆分文件，查看 split（按大小拆分）和 csplit（按模式拆分）免胃。

• 用 dateutils 中的 dateadd, datediff, strptime 等工具操作日期和時間表達(dá)式音五。

• 使用 zless，zmore羔沙，zcat 和 zgrep 對壓縮過的文件進(jìn)行操作躺涝。

• 文件屬性可以通過 chattr 進(jìn)行設(shè)置，它比文件權(quán)限更加底層扼雏。例如坚嗜，為了保護(hù)文件不被意外刪除，可以使用不可修改標(biāo)記：sudo chattr +i /critical/directory/or/file

• 使用 getfacl 和 setfacl 以保存和恢復(fù)文件權(quán)限诗充。例如：

   getfacl -R /some/path > permissions.txt
   setfacl --restore=permissions.txt

系統(tǒng)調(diào)試

• curl 和 curl -I 可以便捷地被應(yīng)用于 web 調(diào)試中苍蔬，它們的好兄弟 wget 也可以，或者是更潮的 httpie蝴蜓。

• 使用 iostat碟绑、netstat、top （htop 更佳）和 dstat 去獲取硬盤、cpu 和網(wǎng)絡(luò)的狀態(tài)蜈敢。熟練掌握這些工具可以使你快速的對系統(tǒng)的當(dāng)前狀態(tài)有一個大概的認(rèn)識。

• 使用 netstat 和 ss 查看網(wǎng)絡(luò)連接的細(xì)節(jié)汽抚。

• 若要對系統(tǒng)有一個深度的總體認(rèn)識抓狭，使用 glances。它在一個終端窗口中向你提供一些系統(tǒng)級的數(shù)據(jù)造烁。這對于快速的檢查各個子系統(tǒng)非常有幫助否过。

• 若要了解內(nèi)存狀態(tài)，運行并理解 free 和 vmstat 的輸出惭蟋。尤其注意“cached”的值苗桂，它指的是 Linux 內(nèi)核用來作為文件緩存的內(nèi)存大小，因此它與空閑內(nèi)存無關(guān)告组。

• Java 系統(tǒng)調(diào)試則是一件截然不同的事煤伟，一個可以用于 Oracle 的 JVM 或其他 JVM 上的調(diào)試的技巧是你可以運行 kill -3 <pid> 同時一個完整的棧軌跡和堆概述（包括 GC 的細(xì)節(jié)）會被保存到標(biāo)準(zhǔn)輸出/日志文件。JDK 中的 jps木缝，jstat便锨，jstack，jmap 很有用我碟。SJK tools 更高級.

• 使用 mtr 去跟蹤路由放案，用于確定網(wǎng)絡(luò)問題。

• 用 ncdu 來查看磁盤使用情況矫俺，它比常用的命令吱殉，如 du -sh *，更節(jié)省時間厘托。

• 查找正在使用帶寬的套接字連接或進(jìn)程友雳，使用 iftop 或 nethogs。

• ab 工具（捆綁于 Apache）可以簡單粗暴地檢查 web 服務(wù)器的性能催烘。對于更復(fù)雜的負(fù)載測試沥阱，使用 siege。

• wireshark伊群，tshark 和 ngrep 可用于復(fù)雜的網(wǎng)絡(luò)調(diào)試考杉。

• 了解 strace 和 ltrace。這倆工具在你的程序運行失敗舰始、掛起甚至崩潰崇棠，而你卻不知道為什么或你想對性能有個總體的認(rèn)識的時候是非常有用的。注意 profile 參數(shù)（-c）和附加到一個運行的進(jìn)程參數(shù) （-p）丸卷。

• 了解使用 ldd 來檢查共享庫枕稀。

• 了解如何運用 gdb 連接到一個運行著的進(jìn)程并獲取它的堆棧軌跡。

• 學(xué)會使用 /proc。它在調(diào)試正在出現(xiàn)的問題的時候有時會效果驚人萎坷。比如：/proc/cpuinfo凹联，/proc/meminfo，/proc/cmdline哆档，/proc/xxx/cwd蔽挠，/proc/xxx/exe，/proc/xxx/fd/瓜浸，/proc/xxx/smaps（這里的 xxx 表示進(jìn)程的 id 或 pid）澳淑。

• 當(dāng)調(diào)試一些之前出現(xiàn)的問題的時候，sar 非常有用插佛。它展示了 cpu杠巡、內(nèi)存以及網(wǎng)絡(luò)等的歷史數(shù)據(jù)。

• 關(guān)于更深層次的系統(tǒng)分析以及性能分析雇寇，看看 stap（SystemTap）氢拥，perf，以及sysdig锨侯。

• 查看你當(dāng)前使用的系統(tǒng)兄一，使用 uname ， uname -a （Unix／kernel 信息） 或者 lsb_release -a （Linux 發(fā)行版信息）识腿。

• 無論什么東西工作得很歡樂時試試 dmesg（可能是硬件或驅(qū)動問題）出革。

• 如果你刪除了一個文件，但通過 du 發(fā)現(xiàn)沒有釋放預(yù)期的磁盤空間渡讼，請檢查文件是否被進(jìn)程占用：
  lsof | grep deleted | grep "filename-of-my-big-file"

單行腳本

一些命令組合的例子：

• 當(dāng)你需要對文本文件做集合交骂束、并、差運算時成箫，結(jié)合使用 sort/uniq 很有幫助展箱。假設(shè) a 與 b 是兩內(nèi)容不同的文件。這種方式效率很高蹬昌，并且在小文件和上G的文件上都能運用 （sort 不被內(nèi)存大小約束混驰，盡管在 /tmp 在一個小的根分區(qū)上時你可能需要 -T 參數(shù)），參閱前文中關(guān)于 LC_ALL 和 sort 的 -u 參數(shù)的部分皂贩。

      cat a b | sort | uniq > c   # c is a union b
      cat a b | sort | uniq -d > c   # c is a intersect b
      cat a b b | sort | uniq -u > c   # c is set difference a - b

• 使用 grep . *（每行都會附上文件名）或者 head -100 *（每個文件有一個標(biāo)題）來閱讀檢查目錄下所有文件的內(nèi)容栖榨。這在檢查一個充滿配置文件的目錄（如 /sys、/proc明刷、/etc）時特別好用婴栽。

• 計算文本文件第三列中所有數(shù)的和（可能比同等作用的 Python 代碼快三倍且代碼量少三倍）：

      awk '{ x += $3 } END { print x }' myfile

• 如果你想在文件樹上查看大小/日期，這可能看起來像遞歸版的 ls -l 但比 ls -lR 更易于理解：

      find . -type f -ls

• 假設(shè)你有一個類似于 web 服務(wù)器日志文件的文本文件辈末，并且一個確定的值只會出現(xiàn)在某些行上愚争，假設(shè)一個 acct_id 參數(shù)在URI中映皆。如果你想計算出每個 acct_id 值有多少次請求，使用如下代碼：

      cat access.log | egrep -o 'acct_id=[0-9]+' | cut -d= -f2 | sort | uniq -c | sort -rn

• 要連續(xù)地監(jiān)測變化轰枝，可以使用 watch捅彻，例如檢查某個文件夾中文件的改變，可以用 watch -d -n 2 'ls -rtlh | tail'鞍陨；或者在排查 WiFi 設(shè)置故障時要監(jiān)測網(wǎng)絡(luò)設(shè)置的更改沟饥，可以用 watch -d -n 2 ifconfig。

• 運行這個函數(shù)從這篇文檔中隨機(jī)獲取一條技巧（解析 Markdown 文件并抽取項目）：

      function taocl() {
        curl -s https://raw.githubusercontent.com/jlevy/the-art-of-command-line/master/README-zh.md|
          pandoc -f markdown -t html |
          iconv -f 'utf-8' -t 'unicode' |
          xmlstarlet fo --html --dropdtd |
          xmlstarlet sel -t -v "(html/body/ul/li[count(p)>0])[$RANDOM mod last()+1]" |
          xmlstarlet unesc | fmt -80
      }

冷門但有用

• expr：計算表達(dá)式或正則匹配

• m4：簡單地宏處理器

• yes：多次打印字符串

• cal：漂亮的日歷

• env：執(zhí)行一個命令（腳本文件中很有用）

• printenv：打印環(huán)境變量（調(diào)試時或在使用腳本文件時很有用）

• look：查找以特定字符串開頭的單詞

• cut湾戳、paste 和 join：數(shù)據(jù)修改

• fmt：格式化文本段落

• pr：將文本格式化成頁/列形式

• fold：包裹文本中的幾行

• column：將文本格式化成多列或表格

• expand 和 unexpand：制表符與空格之間轉(zhuǎn)換

• nl：添加行號

• seq：打印數(shù)字

• bc：計算器

• factor：分解因數(shù)

• gpg：加密并簽名文件

• toe：terminfo entries 列表

• nc：網(wǎng)絡(luò)調(diào)試及數(shù)據(jù)傳輸

• socat：套接字代理，與 netcat 類似

• slurm：網(wǎng)絡(luò)可視化

• dd：文件或設(shè)備間傳輸數(shù)據(jù)

• file：確定文件類型

• tree：以樹的形式顯示路徑和文件广料，類似于遞歸的 ls

• stat：文件信息

• time：執(zhí)行命令砾脑，并計算執(zhí)行時間

• timeout：在指定時長范圍內(nèi)執(zhí)行命令，并在規(guī)定時間結(jié)束后停止進(jìn)程

• lockfile：使文件只能通過 rm -f 移除

• logrotate: 切換艾杏、壓縮以及發(fā)送日志文件

• watch：重復(fù)運行同一個命令韧衣，展示結(jié)果并高亮有更改的部分

• tac：反向輸出文件

• shuf：文件中隨機(jī)選取幾行

• comm：一行一行的比較排序過的文件

• pv：監(jiān)視通過管道的數(shù)據(jù)

• hd，hexdump购桑，xxd畅铭，biew 和 bvi：保存或編輯二進(jìn)制文件

• strings：從二進(jìn)制文件中抽取文本

• tr：轉(zhuǎn)換字母

• iconv 或 uconv：簡易的文件編碼

• split 和 csplit：分割文件

• sponge：在寫入前讀取所有輸入，在讀取文件后再向同一文件寫入時比較有用勃蜘，例如 grep -v something some-file | sponge some-file

• units：將一種計量單位轉(zhuǎn)換為另一種等效的計量單位（參閱 /usr/share/units/definitions.units）

• apg：隨機(jī)生成密碼

• 7z：高比例的文件壓縮

• ldd：動態(tài)庫信息

• nm：提取 obj 文件中的符號

• ab：性能分析 web 服務(wù)器

• strace：系統(tǒng)調(diào)用調(diào)試

• mtr：更好的網(wǎng)絡(luò)調(diào)試跟蹤工具

• cssh：可視化的并發(fā) shell

• rsync：通過 ssh 或本地文件系統(tǒng)同步文件和文件夾

• wireshark 和 tshark：抓包和網(wǎng)絡(luò)調(diào)試工具

• ngrep：網(wǎng)絡(luò)層的 grep

• host 和 dig：DNS 查找

• lsof：列出當(dāng)前系統(tǒng)打開文件的工具以及查看端口信息

• dstat：系統(tǒng)狀態(tài)查看

• glances：高層次的多子系統(tǒng)總覽

• iostat：硬盤使用狀態(tài)

• mpstat: CPU 使用狀態(tài)

• vmstat: 內(nèi)存使用狀態(tài)

• htop：top 的加強(qiáng)版

• last：登入記錄

• w：查看處于登錄狀態(tài)的用戶

• id：用戶/組 ID 信息

• sar：系統(tǒng)歷史數(shù)據(jù)

• iftop 或 nethogs：套接字及進(jìn)程的網(wǎng)絡(luò)利用

• ss：套接字?jǐn)?shù)據(jù)

• dmesg：引導(dǎo)及系統(tǒng)錯誤信息

• sysctl: 在內(nèi)核運行時動態(tài)地查看和修改內(nèi)核的運行參數(shù)

• hdparm：SATA/ATA 磁盤更改及性能分析

• lsblk：列出塊設(shè)備信息：以樹形展示你的磁盤以及磁盤分區(qū)信息

• lshw硕噩，lscpu，lspci缭贡，lsusb 和 dmidecode：查看硬件信息炉擅，包括 CPU、BIOS阳惹、RAID谍失、顯卡、USB設(shè)備等

• lsmod 和 modinfo：列出內(nèi)核模塊莹汤，并顯示其細(xì)節(jié)

• fortune快鱼，ddate 和 sl：額，這主要取決于你是否認(rèn)為蒸汽火車和莫名其妙的名人名言是否“有用”

僅限 OS X 系統(tǒng)

以下是僅限于 OS X 系統(tǒng)的技巧

• 用 brew （Homebrew）或者 port （MacPorts）進(jìn)行包管理纲岭。這些可以用來在 OS X 系統(tǒng)上安裝以上的大多數(shù)命令抹竹。

• 用 pbcopy 復(fù)制任何命令的輸出到桌面應(yīng)用，用 pbpaste 粘貼輸入止潮。

• 若要在 OS X 終端中將 Option 鍵視為 alt 鍵（例如在上面介紹的 alt-b, alt-f 等命令中用到）柒莉，打開 偏好設(shè)置 -> 描述文件 -> 鍵盤 并勾選“使用 Option 鍵作為 Meta 鍵”。

• 用 open 或者 open -a /Applications/Whatever.app 使用桌面應(yīng)用打開文件沽翔。

• Spotlight： 用 mdfind 搜索文件兢孝，用 mdls 列出元數(shù)據(jù)（例如照片的 EXIF 信息）窿凤。

• 注意 OS X 系統(tǒng)是基于 BSD UNIX 的，許多命令（例如 ps跨蟹，ls雳殊，tail，awk窗轩，sed）都和 Linux 中有些微的不同夯秃，這些極大的被 System V-style Unix 和 GNU 工具影響。你可以通過標(biāo)題為 "BSD General Commands Manual" 的 man 頁面發(fā)現(xiàn)這些不同痢艺。在有些情況下 GNU 版本的命令也可能被安裝（例如 gawk 和 gsed 對應(yīng) GNU 中的 awk 和 sed ）仓洼。如果要寫跨平臺的 Bash 腳本，避免使用這些命令（例如堤舒，考慮 Python 或者 perl ）或者經(jīng)過仔細(xì)的測試色建。

• 用 sw_vers 獲取 OS X 的版本信息。

僅限 Windows 系統(tǒng)

• 要在 Microsoft Windows 中使用 Unix shell舌缤，可以安裝 Cygwin箕戳。本文檔中介紹的大多數(shù)內(nèi)容都將適用。

• 通過 Cygwin 的包管理器來安裝額外的 Unix 程序国撵。

• 使用 mintty 作為你的命令行窗口陵吸。

• 要訪問 Windows 剪貼板，可以通過 /dev/clipboard介牙。

• 運行 cygstart 以通過默認(rèn)程序打開一個文件壮虫。

• 要訪問 Windows 注冊表，可以使用 regtool环础。

• 注意 Windows 驅(qū)動器路徑 C:\\ 在 Cygwin 中用 /cygdrive/c 代表旨指，而 Cygwin 的 / 在 Windows 中顯示在 C:\\cygwin。要轉(zhuǎn)換 Cygwin 和 Windows 風(fēng)格的路徑可以用 cygpath喳整。這在需要調(diào)用 Windows 程序的腳本里很有用谆构。

• 學(xué)會使用 wmic，你就可以從命令行執(zhí)行大多數(shù) Windows 系統(tǒng)管理任務(wù)框都，并編成腳本搬素。

更多資源

• awesome-shell：一份精心組織的命令行工具及資源的列表。
• awesome-osx-command-line：一份針對 OS X 命令行的更深入的指南魏保。
• Strict mode：為了編寫更好的腳本文件熬尺。
• shellcheck：一個靜態(tài) shell 腳本分析工具，本質(zhì)上是 bash／sh／zsh 的 lint谓罗。
• Filenames and Pathnames in Shell：有關(guān)如何在 shell 腳本里正確處理文件名的細(xì)枝末節(jié)粱哼。
• Data Science at the Command Line：用于數(shù)據(jù)科學(xué)的一些命令和工具，摘自同名書籍檩咱。

免責(zé)聲明

除去特別微小的任務(wù)揭措，編寫代碼是出于方便閱讀的目的胯舷。能力往往伴隨著責(zé)任。你 可以 在 Bash 中做一些事并不意味著你應(yīng)該去做绊含！;)

授權(quán)條款

Creative Commons License

本文使用授權(quán)協(xié)議 Creative Commons Attribution-ShareAlike 4.0 International License桑嘶。