Linux Shell工具篇 - 内容处理工具sed
介绍
sed
(stream editor, 流编辑器) 是Linux下一款功能强大的非交互流式文本编辑器(vim是交互式文本编辑器),可以对文本文件的每一行数据匹配查询之后进行增、删、改、查等操作,支持按行、按字段、按正则匹配文本内容,灵活方便,特别适合于大文件的编辑。
sed是一种流编辑器,它一次处理一行内容,将这行放入缓存(存区空间称为:模式空间),然后才对这行进行处理,处理完后,将缓存区的内容发送到终端。
语法
sed会读取每一行数据到模式空间中,之后判断当前行是否符合模式匹配要求,符合要求就会执行sed程序命令,否则不会执行sed程序命令;如果不写匹配模式,那么每一行都会执行sed程序命令。
1 |
|
选项参数说明:
选项参数 | 功能 |
---|---|
-e | 直接在指令列模式上进行sed的动作编辑。它告诉sed将下一个参数解释为一个sed指令,只有当命令行上给出多个sed指令时才需要使用-e 选项;一行命令语句可以执行多条sed命令。 |
-i | 直接对内容进行修改,不加-i 时默认只是预览,不会对文件做实际修改。 |
-f | 后跟保存了sed指令的文件。 |
-n | 取消默认输出,sed默认会输出所有文本内容,使用-n 参数后只显示处理过的行。 |
-r ruguler | 使用扩展正则表达式,默认情况sed只识别基本正则表达式 * 。 |
sed程序命令功能描述:
命令 | 功能描述 |
---|---|
a |
add新增,a的后面可以接字串,在下一行出现。 |
c |
change更改,更改匹配行的内容。 |
d |
delete删除,删除匹配的内容。 |
i |
insert插入,向匹配行前插入内容。 |
p |
print打印,打印出匹配的内容,通常与-n 选项合用。 |
s |
substitute替换,替换掉匹配的内容。 |
= |
用来打印被匹配的行的行号。 |
n |
读取下一行,遇到n时会自动跳入下一行。 |
特殊符号:
命令 | 功能描述 |
---|---|
! |
就像一个sed命令,放在限制条件后面,对指定行以外的所有行应用命令(取反)。 |
{sed命令1;sed命令2} | 多个命令操作同一个的行。 |
演示
准备测试文件sed.txt内容:
1 |
|
1.向文件中添加数据
1.1 指定行号的前或后面添加数据
向第三行后面添加hello:
1 |
|
运行效果
向第三行前面添加hello:
1 |
|
运行效果
1.2 指定内容前或后面添加数据
向内容 itheima
后面添加 hello
,如果文件中有多行包括 itheima
,则每一行后面都会添加:
1 |
|
运行效果
向内容 itheima
前面添加 hello
,如果文件中有多行包括 `itheima
`,则每一行前面都会添加:
1 |
|
运行效果
1.3 在最后一行前或后添加数据
在最后一行后面添加hello
:
1 |
|
运行效果
在最后一行前面添加hello
1 |
|
运行效果
2.删除文件中的数据
2.1 删除目标行
删除第2行数据:
1 |
|
运行效果
删除第1行和第4行数据:
1 |
|
运行效果
2.2 删除奇数行
从第一行开始删除,每隔2行就删掉一行:
1 |
|
运行效果
2.3 删除指定范围的多行数据
删除从第1行到第3行的数据:
1 |
|
运行效果
2.4 删除指定范围取反的多行数据
删除从第1行到第3行取反的数据:
1 |
|
运行效果
2.5 删除最后一行
1 |
|
运行效果
2.6 删除匹配字符串的行
1 |
|
运行效果
2.7 删除匹配行到最后一行
删除匹配itheima的行一直到最后一行:
1 |
|
运行效果
2.8 删除匹配行及其后面一行
删除匹配itheima行及其后面一行
1 |
|
运行效果
2.9 删除不匹配的行
删除不匹配 itheima
或 itcast
的行
1 |
|
运行效果
3.更改文件中的数据
3.1 将文件的第一行修改为hello
1 |
|
运行效果
3.2 将包含指定字符串的行修改为hello
1 |
|
运行效果
3.3 将最后一行修改为hello
1 |
|
运行效果
3.4 将文件中的指定字符替换为hello
将文件中的itheima替换为hello,默认只替换每行第一个itheima:
1 |
|
运行效果
注意
's/itheima/hello/'
最后一个/
不可少
将文本中所有的itheima都替换为hello,全局替换:
1 |
|
3.5 将每行中第二个匹配替换
将每行中第二个匹配的itheima替换为hello:
1 |
|
运行效果
3.6 替换后的内容写入文件
将每行中第二个匹配的itheima替换为hello , 将替换后的内容写入到sed2.txt文件中
1 |
|
运行效果
3.7 正则表达式匹配替换
匹配有 i
的行,替换匹配行中 t
后的所有内容为空字符串:
1 |
|
运行效果
3.8 每行末尾拼接test
1 |
|
运行效果
3.9 每行行首添加注释#
1 |
|
运行效果
4.查询文件或管道中的数据
4.1 查询含有指定字符串的行数据
1 |
|
运行效果
4.2 管道过滤查询
管道查询所有进程中含有sshd
的进程信息:
1 |
|
运行效果
5.多个sed程序命令执行
将sed.txt文件中的第1行删除并将 itheima
替换为 itcast
1 |
|
运行效果
6.高级用法: 缓存区数据交换
模式空间与暂存空间:
sed处理文件是逐行处理的,即读取一行处理一行,输出一行;
sed把文件读出来每一行存放的空间叫模式空间,会在该空间中对读到的内容做相应处理;
此外sed还有一个额外的空间即暂存空间,暂存空间刚开始里边只有个空行;
sed可使用相应的命令从模式空间往暂存空间放入内容或从暂存空间取内容放入模式空间;
缓存区sed程序命令:
命令 | 含义 |
---|---|
h | 将模式空间里面的内容复制到暂存空间缓存区(覆盖方式) |
H | 将模式空间里面的内容复制到暂存空间缓存区(追加方式) |
g | 将暂存空间里面的内容复制到模式空间缓存区(覆盖方式) |
G | 将暂存空间里面的内容复制到模式空间缓存区(追加方式) |
x | 交换2个空间的内容 |
6.1 第一行粘贴到最后一行
将模式空间第一行复制到暂存空间(覆盖方式),并将暂存空间的内容复制到模式空间中的最后一行(追加方式)
1 |
|
运行效果
6.2 第一行删除后粘贴到最后一行
将模式空间第一行复制到暂存空间(覆盖方式)并删除,最后将暂存空间的内容复制到模式空间中的最后一行(追加方式)
1 |
|
运行效果
6.3 第一行数据复制粘贴替换其他行数据
将模式空间第一行复制到暂存空间(覆盖方式),最后将暂存空间的内容复制到模式空间中替换从第2行开始到最后一行的每一行数据(覆盖方式)
1 |
|
运行命令
6.4 将前三行数据数据复制粘贴到最后一行
将前3行数据复制到暂存空间(追加方式),之后将暂存空间的所有内容复制粘贴到模式空间最后一行(追加方式)
1 |
|
运行效果
6.5 给每一行添加空行
插入空行
1 |
|
运行效果
6.6 删除所有的空行
1 |
|
运行效果