Unix日誌解析秘笈：6大指令讓你成為日誌分析高手

引言

各位親愛的科技寶寶們，你是否曾在面對龐大的系統日誌時感到頭昏眼花？🤯 別擔心！今天筆者要帶你們踏上一段奇妙的Unix日誌解析之旅。我們將學習6個超強指令，它們就像是你口袋裡的瑞士軍刀，能夠輕鬆應對各種日誌分析挑戰。無論你是剛入門的菜鳥還是經驗豐富的系統管理員，這篇文章都能讓你的技能再升級！準備好了嗎？Let’s go！🚀

主要內容

1. GREP：你的第一把利刃 🔍

還記得小時候玩的大家來找碴遊戲嗎？GREP就是在日誌世界中的終極找碴高手！它的全名是「Global Regular Expression Print」，聽起來很厲害對吧？沒錯，它就是那麼厲害！

GREP的絕技

指令	說明	範例
`grep -l "關鍵字" *.log`	找出包含關鍵字的檔案	`grep -l "error" *.log`
`grep -i "關鍵字" test.log`	不分大小寫搜尋	`grep -i "warning" test.log`
`grep -n "關鍵字" test.log`	顯示行號	`grep -n "critical" test.log`
`grep -v "關鍵字" test.log`	反向搜尋（排除關鍵字）	`grep -v "success" test.log`
`grep -R "關鍵字" /home`	遞迴搜尋目錄	`grep -R "password" /home`

想像一下，你正在尋找系統中的錯誤訊息。使用 grep -i "error" *.log 就像是給了你一對透視眼，讓你立刻看到所有包含「error」的日誌行，不管是大寫還是小寫！

小測驗：如果你想在所有的日誌檔案中找出不包含「success」的行，你會使用哪個GREP指令？
答案：grep -v "success" *.log

2. CUT：精準切割的藝術家 ✂️

如果說GREP是尋寶高手，那麼CUT就是精準的解剖師。它能夠幫你從日誌中切出你最想要的那部分信息，就像是在切割一塊精緻的蛋糕，每一刀都恰到好處。

CUT的絕技

指令	說明	範例
`cut -b 1-3 file.log`	切出前3個字節	`cut -b 1-3 server.log`
`cut -d" " -f 2 test.log`	以空格分隔，取第2欄	`cut -d" " -f 2 access.log`
`cut -c 1-8 test.log`	取出前8個字符	`cut -c 1-8 error.log`

想像你有一個超長的日誌行，但你只對時間戳感興趣。使用 cut -d" " -f 1 access.log 就能輕鬆切出每行的第一個欄位（假設時間戳在第一欄）。就像是在擁擠的演唱會中，CUT幫你精準地找到了你最愛的歌手！

3. SED：文本處理的魔法師 🧙‍♂️

SED（Stream Editor）就像是一個文字世界的魔法師，它不只能搜尋和替換文字，還能進行各種神奇的文本轉換。無論是修改、刪除還是插入文字，SED都能優雅地完成。

SED的絕技

指令	說明	範例
`sed 's/舊字串/新字串/g' test.log`	全局替換字串	`sed 's/error/ERROR/g' app.log`
`sed '4 s/舊字串/新字串/' test.log`	只替換第4行	`sed '4 s/warning/WARNING/' app.log`
`sed '2-4 s/舊字串/新字串/' test.log`	替換第2到4行	`sed '2-4 s/info/INFO/' app.log`
`sed '4d' test.log`	刪除第4行	`sed '4d' error.log`

想像你需要將所有的「error」改成大寫的「ERROR」，以便更容易識別。使用 sed 's/error/ERROR/g' app.log 就能瞬間完成這個任務，就像變魔術一樣神奇！

思考題：如果你想刪除日誌檔案中的前10行，該如何使用SED指令？
提示：可以使用範圍刪除的功能。

4. AWK：數據分析的瑞士軍刀 🛠️

AWK就像是你隨身攜帶的瑞士軍刀，功能強大又靈活。它不只能搜尋和處理文本，還能進行複雜的數據分析和報告生成。對於需要處理結構化數據的場景，AWK簡直就是神器！

AWK的絕技

指令	說明	範例
`awk '/關鍵字/ {print}' test.log`	打印匹配的行	`awk '/ERROR/ {print}' app.log`
`awk '{print $1, $3}' test.log`	打印第1和第3欄	`awk '{print $1, $3}' access.log`
`awk 'NR>=2 && NR<=7 {print NR, $0}' test.log`	打印第2到7行	`awk 'NR>=2 && NR<=7 {print NR, $0}' server.log`
`awk 'length($0)>10' test.log`	打印長度超過10的行	`awk 'length($0)>10' error.log`
`awk '{if($4=="ERROR") print $0;}' test.log`	條件打印	`awk '{if($4=="ERROR") print $0;}' app.log`

假設你想知道你的應用程式在每個小時產生了多少錯誤，你可以使用：

awk '/ERROR/ {split($1,a,":"); count[a[1]]++} END {for (h in count) print h, count[h]}' app.log | sort -n

這個指令會統計每小時的錯誤數，並按時間排序輸出。是不是感覺自己瞬間變成了數據分析專家？😎

5. SORT：讓混亂變有序 🔢

在日誌的海洋中，有時候我們需要一個能夠帶來秩序的力量，這就是SORT的舞台了。無論是按字母順序、數字大小，還是自定義的規則，SORT都能讓你的數據井然有序。

SORT的絕技

指令	說明	範例
`sort -o output.txt input.txt`	排序並輸出到檔案	`sort -o sorted_log.txt app.log`
`sort -r test.log`	反向排序	`sort -r error.log`
`sort -n test.log`	按數值排序	`sort -n response_time.log`
`sort -k3n test.log`	按第3欄數值排序	`sort -k3n server_load.log`
`sort -u test.log`	去除重複行	`sort -u unique_errors.log`

想像你有一個記錄了伺服器響應時間的日誌，使用 sort -n response_time.log 可以快速找出最慢和最快的響應時間。這就像是給你的數據做了一次體能測試，立刻就知道誰是健將，誰需要加強訓練！

6. UNIQ：重複說的不一定對 🔍

最後，讓我們來認識一下UNIQ這個低調但很有用的夥伴。它的專長是處理重複的行，可以幫你去除重複、統計出現次數，或者只顯示重複的內容。

UNIQ的絕技

指令	說明	範例
`uniq -c test.log`	計算重複次數	`uniq -c error_types.log`
`uniq -d test.log`	只顯示重複的行	`uniq -d duplicate_errors.log`
`uniq test.log`	去除連續重複的行	`uniq cleaned_log.log`
`uniq -i test.log`	忽略大小寫	`uniq -i case_insensitive.log`

假設你想知道哪些錯誤訊息出現得最頻繁，你可以這樣做：

sort error.log | uniq -c | sort -nr | head -n 5

這個指令會先排序日誌，然後計算每種錯誤的出現次數，再按次數從多到少排序，最後顯示前5個最常見的錯誤。這就像是給你的錯誤日誌做了一次人氣投票，立刻就知道哪些問題最需要關注！

總結

恭喜你！你現在已經掌握了Unix系統中最強大的6個日誌解析指令。讓我們來回顧一下這些超級英雄：

GREP：文本搜索的神探🕵️
CUT：精準切割的藝術家✂️
SED：文本處理的魔法師🧙‍♂️
AWK：數據分析的瑞士軍刀🛠️
SORT：混沌中帶來秩序的力量🔢
UNIQ：重複中找獨特的慧眼🔍

有了這些工具，你就像擁有了一套強大的日誌分析武器庫。無論是尋找錯誤、分析性能還是生成報告，這些指令都能幫你事半功倍。記住，熟能生巧，多加練習，你很快就能成為日誌分析的高手！

Unix日誌解析秘笈：6大指令讓你成為日誌分析高手#

引言#

主要內容#

1. GREP：你的第一把利刃 🔍#

GREP的絕技#

2. CUT：精準切割的藝術家 ✂️#

CUT的絕技#

3. SED：文本處理的魔法師 🧙‍♂️#

SED的絕技#

4. AWK：數據分析的瑞士軍刀 🛠️#

AWK的絕技#

5. SORT：讓混亂變有序 🔢#

SORT的絕技#

6. UNIQ：重複說的不一定對 🔍#

UNIQ的絕技#

總結#

延伸閱讀#