sed编辑器
sed是一种流编辑器,流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
sed编辑器可以根据命令来处理数据流中的数据,这些命令要么从命令行中输入,要么存储在一个命令文本文件中。
sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。
sed的工作流程
sed的工作流程主要包括读取、执行和显示三个过程:
- 读取: sed从输入流 (文件、管道、标准输入) 中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space )。
- 执行: 默认情况下,所有的sed命令都在模式空间中顺序地执行,除非指定了行的地址,否则sed命令将会在所有的行上依次执行。
- 显示: 发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。在所有的文件内容都被处理完成之前,上述过程将重复执行, 直至所有内容被处理完。
在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
注意:默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非使用"sed -i"修改源文件、或使用重定向输出到新的文件中。
sed命令格式
命令格式:
sed -e '操作' 文件1 文件2 sed -n -e '操作' 文件1 文件2 sed -f 脚本文件 文件1 文件2 sed -i -e '操作' 文件1 文件2
执行多条命令的三种方法:
sed -n -e '操作1' -e '操作2' 文件 sed -n -e '操作1;操作2' 文件 sed -e 'n{ 操作1 操作2 ...... }' 文件1
常用选项:
选项 | 作用 |
-e 或--expression= | 表示用指定命令来处理输入的文本文件,只有一个操作命令时可省略,一般在执行多个操作命令使用 |
-f 或--file= | 表示用指定的脚本文件来处理输入的文本文件 |
-h 或--help | 显示帮助 |
-n、--quiet或--silent | 禁止sed编辑器输出,但可以与p命令一起使用完成输出 |
-i | 直接修改目标文本文件 |
常用操作:
操作 | 作用 |
s | 替换,替换指定符 |
d |
删除,删除指定的行 |
a | 增加,在当前行下方增加一行指定内容 |
i | 插入,在选定行上方插入一行指定内容 |
c | 替换,将选定行替换为指定内容 |
y | 字符转换,转换前后的字符长度必须相同 |
p | 打印行内容。如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容;如果有非打印字符,则以ASCII码输出。其通常与"-n"选项一起使用 |
= | 打印行号 |
l (小写L) | 打印数据流中的文本和不可打印的ASCII字符(比如结束符$、制表符\t |
sed的核心功能:增删改查(可配合正则表达式)
查: p 删: d 改: s(字符串替换)、c(整行替换)、y(对应字符进行替换,效果类似tr命令) 增: i(在行前插入内容)、a(在行后添加内容)、r(在行后读入文件的内容) 复制粘贴:H(复制)、d(删除)、G(粘贴到指定行下方)
sed 查找打印p
不指定行(顺序处理每一行)
1、sed编辑器默认输出行内容,-n选项可以禁止输出。如果不加-n,却使用p操作,那么每行内容会打印两次。
sed -e "p" :每行内容打印两次。
sed -n "p" :每行内容只打印一次。
[root@localhost ~]# cat 11.txt one two three four five six seven eight nine ten [root@localhost ~]# sed -e 'p' 11.txt //每行内容会打印两次 one one two two three three four four five five six six seven seven eight eight nine nine ten ten [root@localhost ~]# sed -n -e 'p' 11.txt //每行内容只打印一次 one two three four five six seven eight nine ten
2、'n' 打印行号。
sed -n '=' :只打印行号。
sed -e 'n' : 打印行号和行内容。
sed -n '=;p' :打印行号和行内容。
[root@localhost ~]# sed -n '=' 11.txt //只打印行号 1 2 3 4 5 6 7 8 9 10 [root@localhost ~]# sed -e '=' 11.txt //打印行号和行内容 1 one 2 two 3 three 4 four 5 five 6 six 7 seven 8 eight 9 nine 10 ten [root@localhost ~]# sed -n '=;p' 11.txt //打印行号和行内容 1 one 2 two 3 three 4 four 5 five 6 six 7 seven 8 eight 9 nine 10 ten
3、sed 执行多条命令的三种方法。
以打印行号和行内容为例:
#方法一 sed -n -e '=' -e 'p' file.txt #方法二 sed -n -e '=;p' file.txt #方法三:换行操作 sed -n ' = p ' file.txt
4、'l' 打印文本即隐藏字符(结束符$,制表符\t)。
[root@localhost ~]# sed -n 'l' 11.txt one$ two$ three$ four$ five$ six$ seven$ eight$ nine$ ten$
sed 对指定行进行操作
两种方法:
- 以数字形式表示行区间;
- 用文本模式(字符串)来过滤出行(一般结合正则表达式)。
以数字形式表示行区间:
使用字符串匹配出行:
以数字形式表示行区间
1、打印单行。
[root@localhost ~]# sed -n '1p' 11.txt one [root@localhost ~]# sed -n '2p' 11.txt two [root@localhost ~]# sed -n '3p' 11.txt three [root@localhost ~]# sed -n '$p' 11.txt //打印最后一行 ten [root@localhost ~]# sed -n -e '1p' -e '5p' 11.txt //打印第一行、第五行 one five
2、打印连续的行,使用逗号。
[root@localhost ~]# sed -n '1,3p' 11.txt one two three [root@localhost ~]# sed -n '6,$p' 11.txt six seven eight nine ten
3、'1,+3p',打印第1行加后面3行(即打印第1~4行)。
[root@localhost ~]# sed -n '1,+3p' 11.txt one two three four
4、打印第1~5行的三种方法:
[root@localhost ~]# sed -n '1,5p' 11.txt one two three four five [root@localhost ~]# sed -n '1,+4p' 11.txt one two three four five [root@localhost ~]# sed -e '5q' 11.txt one two three four five
5、使用sed输出奇数行或者偶数行。
'n' :next,读取下一行。
'p' :打印当前所在行。
[root@localhost ~]# sed -n 'p;n' 11.txt //打印奇数行 one three five seven nine [root@localhost ~]# sed -n 'n;p' 11.txt //打印偶数行 two four six eight ten
6、打印除了第一行以外的奇数行。
[root@localhost ~]# sed -n '2,${n;p}' 11.txt three five seven nine
小贴士:
'n' :next,读取下一行。 'p' :打印当前所在行。 # 'p;n' 处理过程: 自动读取第1行,p打印第1行,n读取第2行; 自动读取第3行,p打印第3行,n读取第4行; 自动读取第5行,p打印第5行,n读取第6行; ...... # 'n;p' 处理过程: 自动读取第1行,n读取第2行,p打印第2行; 自动读取第3行,n读取第4行,p打印第4行; 自动读取第5行,n读取第6行,p打印第6行; ...... # 'p;n;p' 处理过程: 自动读取第1行,p打印第1行,n读取第2行,p打印第2行; 自动读取第3行,p打印第3行,n读取第4行,p打印第4行; 自动读取第5行,p打印第5行,n读取第6行,p打印第6行; ...... # 'n;p;n' 处理过程: 自动读取第1行,n读取第2行,p打印第2行,n读取第3行; 自动读取第4行,n读取第5行,p打印第5行,n读取第6行; 自动读取第7行,n读取第8行,p打印第8行,n读取第9行; ...... 以此类推。
4.2.3 使用正则表达式,匹配行内容
注意:sed 使用扩展正则表达式时,要加 -r 。
示例1:
先将/etc/passwd 文件复制到家目录下并改名为pass.txt,方便演示。
[root@localhost ~]# cp /etc/passwd pass.txt [root@localhost ~]# sed -n '/root/p' pass.txt root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin [root@localhost ~]# sed -n '/^root/p' pass.txt root:x:0:0:root:/root:/bin/bash
示例2:
[root@localhost ~]# sed -n '6,/root/p' pass.txt sync:x:5:0:sync:/sbin:/bin/sync shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown halt:x:7:0:halt:/sbin:/sbin/halt mail:x:8:12:mail:/var/spool/mail:/sbin/nologin operator:x:11:0:operator:/root:/sbin/nologin [root@localhost ~]# sed -n '6,/root/=' pass.txt 6 7 8 9 10
sed 删除d
示例1:
以数字形式表示行区间。
[root@localhost ~]# cat 11.txt one two three four five six seven eight nine ten [root@localhost ~]# sed '3d' 11.txt //删除第3行 one two four five six seven eight nine ten [root@localhost ~]# sed '5,8d' 11.txt //删除第5~8行 one two three four nine ten [root@localhost ~]# sed '$d' 11.txt //删除最后一行 one two three four five six seven eight nine [root@localhost ~]# sed 'd' 11.txt //删除所有行 [root@localhost ~]# sed '1,+3d' 11.txt //删除第1行及后面3行(即删除第1~4行) five six seven eight nine ten [root@localhost ~]# sed '6,$d' 11.txt //删除第6行到最后一行 one two three four five [root@localhost ~]# sed '6!d' 11.txt //除了第6行,其他都删除 six [root@localhost ~]# sed '6,$!d' 11.txt //除了第6行到最后一行,其他都删除 six seven eight nine ten
示例2:
通过字符串匹配出想要的行。
[root@localhost ~]# sed '/e$/d' 11.txt //删除以e结尾的行 two four six seven eight ten [root@localhost ~]# sed '/e$/!d' 11.txt //除了以e结尾的行,其他行都删除 one three five nine
示例3:
- '/字符串1/,/字符串2/d' :从第一个匹配的位置打开删除功能,到第二个匹配的位置删完后关闭删除功能。之后继续按这个规则向下查找删除。
[root@localhost ~]# cat 2.txt 111 222 333 444 555 111 222 333 444 555 [root@localhost ~]# sed '/2/,/4/d' 2.txt 111 555 111 555 [root@localhost ~]# sed '/1/,/3/d' 2.txt 444 555 444 555