pidstat

1、工具簡介
mpstat 用來查看系統(tǒng)每個 CPU 的性能指標,以及所有 CPU 的平均指標航棱。
vmstat 可以查看系統(tǒng)上下文切換、內(nèi)存萌衬。
前兩個只給出了系統(tǒng)總體的情況饮醇,要想查看每個進程的詳細情況,就需要使用 pidstat奄薇。
pidstat 用來查看具體進程的 CPU驳阎、內(nèi)存、I/O 以及上下文切換等性能指標馁蒂。
pidstat 默認顯示進程的數(shù)據(jù)呵晚,加 -t 參數(shù)可以輸出線程的數(shù)據(jù)。加 -w 參數(shù)可以輸出上下文切換情況沫屡。

2饵隙、平均負載

$ uptime
 12:49:05 up 2 days, 10:26,  2 users,  load average: 0.11, 0.08, 0.02

12:49:05 是當(dāng)前時間;
up 2 days, 10:26 是系統(tǒng)運行時間沮脖;
2 users 是正在登錄用戶數(shù)(因為我開了 2 個ssh終端金矛,所以是 2);
load average 三個值分別是過去 1勺届、5驶俊、15 分鐘的平均負載(top命令的第一行也有輸出)。平均負載是平均活躍進程數(shù)免姿,如果這三個值相差不大饼酿,說明系統(tǒng)負載很平穩(wěn)。

獲取 CPU 數(shù)量可以用命令:

$ grep 'model name' /proc/cpuinfo | wc -l
1

最理想的情況是每個 CPU 上都剛好運行著一個進程胚膊,每個 CPU 都得到了充分利用故俐。
當(dāng)平均負載比 CPU 個數(shù)大的時候,系統(tǒng)已經(jīng)出現(xiàn)了過載紊婉。
當(dāng)平均負載高于 CPU 數(shù)量 70% 的時候药版,就應(yīng)該分析排查負載高的問題了。

下面用 stress 命令模擬一個 CPU 壓力的場景喻犁,先安裝 stress

sudo apt install stress
stress --cpu 1 --timeout 600

--cpu 1是產(chǎn)生 1 個進程不停的計算隨機數(shù)的平方根, --timeout 600 是在 600 秒之后結(jié)束槽片。
在另一個終端查看 uptime 輸出何缓,平均負載很快就接近 1 了。

$ uptime
 13:07:39 up 2 days, 10:45,  2 users,  load average: 0.01, 0.01, 0.00
$ uptime 
 13:10:49 up 2 days, 10:48,  2 users,  load average: 0.94, 0.40, 0.15
$ uptime 
 13:12:33 up 2 days, 10:50,  2 users,  load average: 0.99, 0.58, 0.25

或者用 watch -d -n 1 uptime 可以自動刷新筐乳,也可以觀測到平均負載在變高歌殃。
-d 表示變化的部分可以高亮顯示乔妈,
-n 是刷新間隔蝙云,這里選每 1 秒刷新,

mpstat 也可以觀察到路召,%usr 在升高:

$ mpstat 
Linux 4.15.0-117-generic (uu)   09/14/2020  _x86_64_    (1 CPU)

01:09:57 PM  CPU    %usr   %nice    %sys %iowait    %irq   %soft  %steal  %guest  %gnice   %idle
01:09:57 PM  all    0.27    0.01    0.34    0.09    0.00    0.01    0.00    0.00    0.00   99.28
$ mpstat
Linux 4.15.0-117-generic (uu)   09/14/2020  _x86_64_    (1 CPU)

01:13:44 PM  CPU    %usr   %nice    %sys %iowait    %irq   %soft  %steal  %guest  %gnice   %idle
01:13:44 PM  all    0.38    0.01    0.34    0.09    0.00    0.01    0.00    0.00    0.00   99.17
$ mpstat
Linux 4.15.0-117-generic (uu)   09/14/2020  _x86_64_    (1 CPU)

01:14:54 PM  CPU    %usr   %nice    %sys %iowait    %irq   %soft  %steal  %guest  %gnice   %idle
01:14:54 PM  all    0.42    0.01    0.34    0.09    0.00    0.01    0.00    0.00    0.00   99.14

pidstat 可以查看具體哪個進程的 %usr 在變高勃刨。

3、上下文切換

$ vmstat 
procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 0  0    268 550080 108920 1077896    0    0  1677    26  86  127  1  1 99  0  0

指標含義:
cs(context switch)是每秒 上下文切換的次數(shù)股淡。
r(Running or Runnable)是就緒隊列的長度身隐,也就是正在運行和等待 CPU 的進程數(shù)。
in(interrupt)則是每秒 中斷的次數(shù)唯灵,可以從 /proc/interrupts 文件中讀取贾铝。

pidstat -w -t
指標含義:
cswch 表示每秒自愿上下文切換(voluntary context switches)的次數(shù),比如 I/O埠帕、內(nèi)存 等資源不足時垢揩,就會發(fā)生自愿上下文切換。
nvcswch 表示每秒非自愿上下文切換(non voluntary context switches)的次數(shù)敛瓷。比如大量進程在爭搶 CPU叁巨。

sudo apt install -y sysbench

下面用 sysbench 做實驗,模擬系統(tǒng)多線程調(diào)度呐籽,--threads=2是 2 個線程锋勺,--max-time=60是運行60秒的基準測試:

sysbench --threads=2 --max-time=60 threads run

可以看到 vmstatcs 升高了:

$ vmstat
procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
12  0    268 470996 110748 1154896    0    0  1669    26   86  128  1  1 99  0  0
$ vmstat
procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 6  0    268 469180 110756 1155052    0    0  1669    26   86  196  1  1 99  0  0

再用 pidstat -w -t 可以看到具體是 __sysbench 線程的上下文切換比較多。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末狡蝶,一起剝皮案震驚了整個濱河市庶橱,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌贪惹,老刑警劉巖苏章,帶你破解...
    沈念sama閱讀 217,084評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異馍乙,居然都是意外死亡布近,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,623評論 3 392
  • 文/潘曉璐 我一進店門丝格,熙熙樓的掌柜王于貴愁眉苦臉地迎上來撑瞧,“玉大人,你說我怎么就攤上這事显蝌≡に牛” “怎么了订咸?”我有些...
    開封第一講書人閱讀 163,450評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長酬诀。 經(jīng)常有香客問我脏嚷,道長,這世上最難降的妖魔是什么瞒御? 我笑而不...
    開封第一講書人閱讀 58,322評論 1 293
  • 正文 為了忘掉前任父叙,我火速辦了婚禮,結(jié)果婚禮上肴裙,老公的妹妹穿的比我還像新娘趾唱。我一直安慰自己,他們只是感情好蜻懦,可當(dāng)我...
    茶點故事閱讀 67,370評論 6 390
  • 文/花漫 我一把揭開白布甜癞。 她就那樣靜靜地躺著,像睡著了一般宛乃。 火紅的嫁衣襯著肌膚如雪悠咱。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,274評論 1 300
  • 那天征炼,我揣著相機與錄音析既,去河邊找鬼。 笑死柒室,一個胖子當(dāng)著我的面吹牛渡贾,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播雄右,決...
    沈念sama閱讀 40,126評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼空骚,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了擂仍?” 一聲冷哼從身側(cè)響起囤屹,我...
    開封第一講書人閱讀 38,980評論 0 275
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎逢渔,沒想到半個月后肋坚,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,414評論 1 313
  • 正文 獨居荒郊野嶺守林人離奇死亡肃廓,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,599評論 3 334
  • 正文 我和宋清朗相戀三年智厌,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片盲赊。...
    茶點故事閱讀 39,773評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡铣鹏,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出哀蘑,到底是詐尸還是另有隱情诚卸,我是刑警寧澤葵第,帶...
    沈念sama閱讀 35,470評論 5 344
  • 正文 年R本政府宣布,位于F島的核電站合溺,受9級特大地震影響卒密,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜棠赛,卻給世界環(huán)境...
    茶點故事閱讀 41,080評論 3 327
  • 文/蒙蒙 一哮奇、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧恭朗,春花似錦屏镊、人聲如沸依疼。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,713評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽律罢。三九已至膀值,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間误辑,已是汗流浹背沧踏。 一陣腳步聲響...
    開封第一講書人閱讀 32,852評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留巾钉,地道東北人翘狱。 一個月前我還...
    沈念sama閱讀 47,865評論 2 370
  • 正文 我出身青樓,卻偏偏與公主長得像砰苍,于是被迫代替她去往敵國和親潦匈。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,689評論 2 354