IP 相關統(tǒng)計
統(tǒng)計 IP 訪問量
awk '{print $1}' access.log | sort -n | uniq | wc -l
查看某一時間段的 IP 訪問量 (4-5 點)
grep "07/Apr/2017:0[4-5]" access.log | awk '{print $1}' | sort | uniq -c| sort -nr | wc -l
查看訪問最頻繁的前 100 個 IP
awk '{print $1}' access.log | sort -n |uniq -c | sort -rn | head -n 100
查看訪問 100 次以上的 IP
awk '{print
1 >100) print $0}'|sort -rn
查詢某個 IP 的詳細訪問情況激蹲，按訪問頻率排序
grep '104.217.108.66' access.log |awk '{print $7}'|sort |uniq -c |sort -rn |head -n 100
頁面訪問統(tǒng)計
查看訪問最頻的頁面 (TOP100)
awk '{print $7}' access.log | sort |uniq -c | sort -rn | head -n 100
查看訪問最頻的頁面 ([排除 php 頁面】(TOP100)
grep -v ".php" access.log | awk '{print $7}' | sort |uniq -c | sort -rn | head -n 100
查看頁面訪問次數(shù)超過 100 次的頁面
cat access.log | cut -d ' ' -f 7 | sort |uniq -c | awk '{if (
0}' | less
查看最近 1000 條記錄永淌，訪問量最高的頁面
tail -1000 access.log |awk '{print $7}'|sort|uniq -c|sort -nr|less
每秒請求量統(tǒng)計
統(tǒng)計每秒的請求數(shù)摇肌，top100 的時間點 (精確到秒)
awk '{print $4}' access.log |cut -c 14-21|sort|uniq -c|sort -nr|head -n 100
每分鐘請求量統(tǒng)計
統(tǒng)計每分鐘的請求數(shù)房官，top100 的時間點 (精確到分鐘)
awk '{print $4}' access.log |cut -c 14-18|sort|uniq -c|sort -nr|head -n 100
每小時請求量統(tǒng)計
統(tǒng)計每小時的請求數(shù)，top100 的時間點 (精確到小時)
awk '{print $4}' access.log |cut -c 14-15|sort|uniq -c|sort -nr|head -n 100
性能分析
在 nginx log 中最后一個字段加入 $request_time
列出傳輸時間超過 3 秒的頁面，顯示前 20 條
cat access.log|awk '(
7}'|sort -n|uniq -c|sort -nr|head -20
列出 php 頁面請求時間超過 3 秒的頁面，并統(tǒng)計其出現(xiàn)的次數(shù)，顯示前 100 條
cat access.log|awk '(
7~/.php/){print $7}'|sort -n|uniq -c|sort -nr|head -100
蜘蛛抓取統(tǒng)計
統(tǒng)計蜘蛛抓取次數(shù)
grep 'Baiduspider' access.log |wc -l
統(tǒng)計蜘蛛抓取 404 的次數(shù)
grep 'Baiduspider' access.log |grep '404' | wc -l
TCP 連接統(tǒng)計
查看當前 TCP 連接數(shù)
netstat -tan | grep "ESTABLISHED" | grep ":80" | wc -l
用 tcpdump 嗅探 80 端口的訪問看看誰最高
tcpdump -i eth0 -tnn dst port 80 -c 1000 | awk -F"." '{print
2"."
4}' | sort | uniq -c | sort -nr
