shell脚本三剑客：grep  sed  awk

grep语法：

grep [OPTIONS] PATTERN [FILE]

常用选项

-c                       统计匹配到的行数
-i                        匹配时不区分大小写
-n                       显示匹配行所在行号
-o                       只显示匹配到的字符串
-v                       取反，反方向匹配，不匹配关键字的行
-E                      开启扩展的正则表达式
-A n                   显示匹配的所在的行及其后n行
-B n                   显示匹配的所在的行及其前n行
-C n                   显示匹配的所在的行及其前后各n行

例：查看ifconfig ens33,并选择关键字进行匹配，然后显示匹配到多少行，如果显示2行，说明有2行的内容包括这个关键字。

 显示关键字所在的行号：-n

 取反，反方向匹配，不匹配关键字的行：-v

显示匹配的所在的行及其后n行:-An

显示ifconfig ens33的结果并以192.168.100.30作为检索关键字提取所在行及后5行，后6行。

 显示匹配的所在的行及其前n行:-Bn

显示ifconfig ens33的结果并以TX errors作为检索关键字提取所在行及前5行，以RX errors作为检索关键字提取所在行及前5行,若匹配行数多于实际行数则显示匹配行及前面所有行。

 显示匹配的所在的行及其前后n行:-Cn

以RX packets为关键字，匹配关键字所在行及上下三行。

 过滤空行：grep -v '^$'

字符出现次数：

*                  前面的字符出现任意次，包括0次

\?                前面的字符出现0次或1次，\为转义符

\+                前面的字符至少出现一次

\{m\}            前面的字符出现m次，\为转义符

\{m,\}           前面的字符至少出现m次，\为转义符

\{m,n\}        前面的字符至少出现m次，至多n次，\为转义符

sed语法：

sed [OPTIONS] PATTERN [FILE]

常用选项

-e             允许多项编辑 

-i              直接修改

-f              指定sed脚本文件

-n             取消默认的输出 

常见命令

p        打印（默认在屏幕上显示出来）建议和 -n 一起使用　　　

c        替换行

i         添加  在指定行的上一行添加内容

a        添加  在指定行的下一行添加内容　　　　　　

d        删除

n N    读取/添加  模式匹配到的行的下一行内容，在对其进行操作

w       保存

s        文本内容替换

g        全部匹配

&        调用前面匹配的内容

例子：打印内容

1.打印指定行内容

打印某一行内容：sed -n 'np'

打印指定的多行内容，第x行到第y行：sed -n 'x，yp'

 2.打印关键字所在行内容：sed -n '/关键字/ p' 文件

 打印以root开头的行

 3.打印奇数行及偶数行

1~2p:以第一行为开始行，步数为2进行打印。

2~2p:以第二行为开始行，步数为2进行打印。

例子：删除内容

1.删除指定行：sed -n 'nd' 文件

 2.通过关键字删除所在行

删除包含inet的所在行

3.删除第几行到第几行

 4.删除空行

sed '/^$/d' 文件

 5.取反删除

sed '/^$/ !d' 文件

例子：修改内容

sed -i '命令 ' 文件

1.插入内容

在文本第二行后插入hello

 插入空行

sed -i '1a \ \' 文件

 2替换内容

sed -i '原内容所在行c 新内容' 文件 

 指定字符进行替换

将文本中的s替换成x

awk语法

sed [OPTIONS]  ‘模式{操作}’ 文件

内置变量

 FS ：输入字段分隔符，默认为空白字符

OFS：输出字段分隔符，默认为空白字符

 RS ：输入记录分隔符，指定输入时的换行符，原换行符仍有效

 ORS ：输出记录分隔符，输出时用指定符号代替换行符

NF ：字段数量，共有多少字段， $NF引用最后一列，$(NF-1)引用倒数第2列

NR ：行号，后可跟多个文件，第二个文件行号继续从第一个文件最后行号开始

 FNR ：各文件分别计数, 行号，后跟一个文件和NR一样，跟多个文件，第二个文件行号从1开始

 FILENAME ：当前文件名

 ARGC ：命令行参数的个数

 ARGV ：数组，保存的是命令行所给定的各参数，查看参数

例子：打印内容

awk '{print $n}'

默认以空格为分隔符，打印第n个字段，效果与awk -F" " '{print $n}'相似。

 打印倒数第二个字段

awk '{print $(NF-1)}'

打印多列内容

awk -F '{print $n,$m}'

 打印多列内容并指定分隔符

awk -F '{print $n “?” $m}'(以?为分隔符)

 打印关键字所在行

awk '/关键字/ {print}'

 利用关键字提取IP

 打印行号

awk '{print $n,NR}'

\t为制表符

 提取符合条件的字段

取已用字段中占用比大于15%的字段

df -h |awk -F" " '{print $5}' |awk -F"%" '$1>15 {print}'

 打印某行

awk 'NR==n {print}'

 提取IP

以某行某列确定IP的位置

 取偶数行

awk -F 'NR%2==0 {print}'

取奇数行

awk -F 'NR%2==1 {print}'