sed 是一种在线的、非交互式的编辑器,它一次处理一行内容。
处理时,先把当前处理的行内容存储在临时缓冲区中,称为“模式空间”(pattern space),
之后再用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容打印到屏幕。
接着处理下一行,这样不断重复,直到文件末尾。
注意:模式空间的内容和 AWK 中的 $0 是一样的,处理每行的时候,都会被重新赋值为当前行的内容
文件内容并没有改变,除非你使用重定向存储输出。
Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。
先准备一个文件
[root@e5ac44e88027 ~]# head /etc/passwd |grep -n '' > mypasswd [root@e5ac44e88027 ~]# cat mypasswd 1:root:x:0:0:root:/root:/bin/bash 2:bin:x:1:1:bin:/bin:/sbin/nologin 3:daemon:x:2:2:daemon:/sbin:/sbin/nologin 4:adm:x:3:4:adm:/var/adm:/sbin/nologin 5:lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6:sync:x:5:0:sync:/sbin:/bin/sync 7:shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown 8:halt:x:7:0:halt:/sbin:/sbin/halt 9:mail:x:8:12:mail:/var/spool/mail:/sbin/nologin 10:operator:x:11:0:operator:/root:/sbin/nologin
sed [options] '[匹配模式] sed 的内部命令' file1
sed [options] '[匹配模式] [sed 的内部命令]' file1 file2
options
选项是可选的,意思就是没有也行
匹配模式 是可选的用于在文件中每一行进行匹配到模式,模式可以是正则,也可以是文件的行号
内部的命令也是可选的,没想到吧,但是两个单引号是必须的[root@kube-master sed]# sed '' mypasswd root:x:0:0:root:/root:/bin/bash bin:x:1:1:bin:/bin:/sbin/nologin ...以下输出省略...
注:
sed和grep不一样,不管是否找到指定的模式,它的退出状态都是0
只有当命令存在语法错误时,sed的退出状态才是非0
与grep一样,sed在文件中查找模式时也可以使用正则表达式(RE)和各种元字符。正则表达式是
括在斜杠间的模式,用于查找和替换,以下是sed支持的元字符。
使用基本元字符集 ^, $, ., *, [], [^], \< \>,\(\),\{\}
使用扩展元字符集 ?, +, { }, |, ( )
使用扩展元字符的方式:
sed -r
在实际使用的时候,都会加上
-r
参数,即使没有用的扩展正则也不会有任何影响。
sed 默认会输出文件的每一行,无论这行内容是否能匹配上匹配模式,假如被匹配到的则会再输出一次。
sed -r '' mypasswd sed -r 'p' mypasswd
p
是 sed 的内部命令,是 打印(输出) 的作用
屏蔽默认输出使用 -n
选项
sed -rn 'p' mypasswd sed -rn '/root/p' mypasswd 显示root的行 ^ 匹配root 开头 ^root
sed会自动打印文件的每一行,同时查找模式匹配的行,找到后执行后面的命令,默认是
p
打印(不加-n
的情况下)
> 搜索每一行,找到有 root 的,把第一个替换为 shark sed -r 's/root/shark/' mypasswd > 搜索每一行,找到所有的 root 字符,进行全局替换为 `shark` sed -r 's/root/shark/g' mypasswd > i 是同时忽略大小写 sed -r 's/root/shark/gi' mypasswd > 找到含有 root 的进行删除 sed -r '/root/ d' mypasswd > 可以使用不同的 字符 作为界定符号,注意进行转义 sed -r '\#root#d' mypasswd
注意:
当在模式匹配中使用其他界定符号时,需要对其进行转义。
其他界定符用在s
搜索替换时不必转义。例如:sed -r 's#root#shark#' mypasswd sed -r 's%root%shark%' mypasswd sed -r 's|root|shark|' mypasswd
地址(定址)
地址用于决定对哪些行
进行编辑。地址形式可以是数字、正则表达式或二者的结合。如果没有指定地址,sed将处理输入文件中的所有行。
> 全部分删除 sed -r 'd' mypasswd > 第 3 行删除 sed -r '3 d' mypasswd > 第 1 行到第 3 行都删除 sed -r '1,3 d' mypasswd > 含有 root 字符串的行删除 sed -r '/root/ d' mypasswd > 从含有 root 字符串的行开始匹配,一直删除到 第 5 行 sed -r '/root/,5 d' mypasswd > 从含有 halt 的行开始删除,并删除此行之后的 2 行,就是总共删除 3 行 sed -r '/halt/,+2 d' mypasswd > 含有 root 的行不删除,其他都删除 sed -r '/root/ !d' mypasswd > 使用行号除以 2 ,余数是 1 的行删除 sed -r '1~2 d' mypasswd > 使用行号除以 2, 余数 是 0 的 打印出来 sed -rn '0~2 p' mypasswd > 试试下面这个, 就是 每次处理的行号是被除数,第二个数是除数,第一数是 余数 sed -rn '0~3 p' mypasswd
sed命令告诉 sed 对匹配到的行进行何种操作,包括打印、删除、修改等。
替换命令:s
sed -r 's/[0-9][0-9]/&.5/' mypasswd //&代表在查找串中匹配到的所有内容
sed -r 's/(no)login/\1不可登录/' mypasswd 部分输出为 bin:x:1:1:bin:/bin:/sbin/no不可登录
追加命令:a
sed -r '$a 1.1.1.1 www.qfedu.com' /etc/hosts # $ 符号在这里标识一个文件的最后一行, # a 是 sed 追加的命令 # a 命令后面的内容均视为 要追加的内容 # 整体意思是向文件的末尾追加一行内容
插入命令:i
# sed -r '2i\1111111111111' /etc/hosts # sed -r '2i111111111\ > 2222222222\ > 3333333333' /etc/hosts
修改(替换)命令:c
# sed -r '2c\1111111111111' /etc/hosts # sed -r '2c\111111111111\ > 22222222222\ > 33333333333' /etc/hosts
删除配置文件中 # 号注释的行 sed -ri '/^#/d' file.conf 删除开头的一个或者多个空格或者 Tab 键 加上 '#' 或者开头是 '#' 的行 sed -ri '/^[ \t]*#/d' file.conf YUM 源修改 sudo sed -ri s/^#baseurl/baseurl/g /etc/yum.repos.d/CentOS-Base.repo sudo sed -ri s/^mirrorlist/#mirrorlist/g /etc/yum.repos.d/CentOSBase.repo 删除配置文件中//号注释行 sed -ri '\#^[ \t]*//#d' file.conf 删除无内容空行 - 开头和结尾之间什么都没有的行 - 开头和结尾之间有多个空格的行 - 开头和结尾之间有多个 Tab 键的行 sed -ri '/^[ \t]*$/d' file.conf 删除注释行及空行: 以下 3 中效果一样,挑一个自己喜欢的 sed -ri '/^[ \t]*#/d; /^[ \t]*$/d' /etc/vsftpd/vsftpd.conf sed -ri '/^[ \t]*#|^[ \t]*$/d' /etc/vsftpd/vsftpd.conf sed -ri '/^[ \t]*($|#)/d' /etc/vsftpd/vsftpd.conf 修改文件: sed -ri '/^SELINUX=/cSELINUX=disabled' /etc/selinux/config sed -ri '/UseDNS/cUseDNS no' /etc/ssh/sshd_config sed -ri '/GSSAPIAuthentication/cGSSAPIAuthentication no' /etc/ssh/sshd_config 给文件行添加注释: sed -r '2,6s/^/#/' a.txt 使用小括号进行分组,可以有多个分组, 后面可以使用 \1 获取到第一个分组的内容 sed -r '2,6s/(.*)/#\1/' a.txt sed -r '2,6s/.*/#&/' a.txt &匹配前面查找的内容 sed -r '3,$ s/^#*/#/' a.txt 将行首零个或多个#换成一个# sed -r '30,50s/^[ \t]*#*/#/' /etc/nginx.conf sed -r '2,8s/^[ \t#]*/#/' /etc/nginx.conf sed中使用外部变量 var1=11111 # 无效 sed -r '3a$var1' /etc/hosts # 正确 sed -r "3a$var1" /etc/hosts # 有效 sed -r 3a$var1 /etc/hosts # 报错 sed -r "$a$var1" /etc/hosts # 有效,但是中间不能有空格 sed -r '$a'"$var1" /etc/hosts # 有效, 将第一个 $ 进行转义 sed -r "\$a $var1" /etc/hosts
[root@kube-master sed]# sed -e '1,3 d' -e 's/root/shark/' mypasswd 4:adm:x:3:4:adm:/var/adm:/sbin/nologin 5:lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6:sync:x:5:0:sync:/sbin:/bin/sync 7:shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown 8:halt:x:7:0:halt:/sbin:/sbin/halt 9:mail:x:8:12:mail:/var/spool/mail:/sbin/nologin 10:operator:x:11:0:operator:/shark:/sbin/nologin [root@kube-master sed]#
sed -e '1,3 d' -e 's/root/shark/' mypasswd
等同于
sed '1,3 d; s/root/shark/' mypasswd