無論是日志文件分析、數據清洗，還是簡單的文本轉換，強大的文本處理工具都能極大地提高工作效率
其中，AWK 和 SED 是兩個極具代表性的工具，它們以其強大的功能和靈活的使用方式，成為 Linux 環境下文本處理的兩大“瑞士軍刀”
本文將深入探討 AWK 和 SED 的基本原理、使用方法和實際應用，展示它們在處理文本數據時的卓越能力和不可替代性
一、AWK：強大的文本分析工具 AWK 是一種編程語言，專為文本和數據提取而設計
它以其創始人的名字命名，包括 Alfred Aho、Peter Weinberger 和 Brian Kernighan
AWK 是一種解釋型語言，能夠在處理文本文件時執行復雜的模式匹配和數據處理任務
1. 基本語法 AWK 的基本語法結構如下： awk pattern {action} filename - `pattern`：指定匹配模式，可以是正則表達式或條件表達式
- `action`：在匹配到模式時執行的動作，通常是一組 AWK 語句
- `filename`：要處理的文本文件名
例如，從文件中提取第一列和第二列，并打印出來： awk {print $1, $2} filename 2. 內置變量 AWK 提供了一系列內置變量，方便處理文本數據
例如： - `$0`：整行文本
- `$1, $2, ...`：按空格分隔的字段，依次為第一列、第二列等
- `NF`：字段數量
- `NR`：當前記錄數（行號）
3. 條件語句和循環 AWK 支持條件語句和循環結構，這使得它能夠處理更復雜的文本處理任務
例如，打印文件中大于 100 的第三列： awk $3 > 100{print $3} filename 4. 實際應用 AWK 在日志分析、數據報告生成等方面有著廣泛的應用
例如，分析 Web 服務器日志，統計每個 IP 地址的訪問次數： awk {print $1} access.log | sort | uniq -c | sort -nr 這條命令首先提取日志文件中的第一列（通常是 IP 地址），然后使用`sort`排序，`uniq -c` 統計每個 IP 的出現次數，最后再次使用 `sort -nr` 按出現次數降序排列
二、SED：流編輯器 SED（Stream EDitor）是一種非交互式的流編輯器，用于對文本進行過濾和轉換
SED 以其強大的文本替換和編輯功能，在 Linux 系統中有著廣泛的應用
1. 基本語法 SED 的基本語法結構如下： sed command filename - `command`：SED 命令，可以是替換、刪除、插入等操作
- `filename`：要處理的文本文件名
例如，將文件中的 old 替換為 new： sed s/old/new/g filename 2. 常用命令 - `s/pattern/replacement/flags`：替換命令，`pattern` 是要匹配的模式，`replacement` 是替換后的文本，`flags` 是標志位，`g` 表示全局替換
- `d`：刪除命令，刪除匹配的行
- `p`：打印命令，打印匹配的行
- `itext`：在當前行之前插入文本
- `atext`：在當前行之后追加文本
3. 地址范圍 SED 支持使用地址范圍來指定要處理的行
例如，處理第 2 到第 4 行： sed 2,4s/old/new/g filename 4. 實際應用 SED 在腳本編輯、批量替換等方面有著廣泛的應用
例如，批量替換多個文件中的某個字符串： sed -i s/old/new/g file1 file2 file3 這里使用了`-i` 選項，表示直接在文件中進行
