文本处理三剑客之sed高级应用

已于 2022-08-09 08:46:57 修改
阅读量140 收藏
点赞数
文章标签： java linux servlet
于 2022-08-08 19:29:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_59324730/article/details/126234144
版权
本文介绍了sed工具在处理多行模式时的高级应用，包括多行模式空间的创建、追加下一行、多行删除及多行打印等操作。通过具体的脚本示例，展示了如何使用sed进行文本处理，如合并跨越两行的特定短语、减少连续空行等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

多行模式空间

在前面正则表达式的讨论中，我们强调模式匹配是面向行的。像grep这样的程序尝试在单个输入行上匹配一个模式。这就使它很难匹配一个在一行的结尾处开始。并在下一行的开始处结束的短语。其他一些模式只有当在多行上重复时才有意义。（比如有的句子太长了，在跨行中使用）
sed能查看模式空间的多个行。这就是允许匹配模式扩展到多行上。在本节中，我们将来看一下创建多行模式空间并处理它的内容的命令。这里的3个多行命令(N、D、P)对应于上一章出现的小写字母的基本命令(n、d、p）。例如，删除命令(D）是删除命令(d）的多行形式。区别是:d删除模式空间的内容，D只删除多行模式空间的第一行。
 

追加下一行

多行Next(N)）命令通过读取新的输入行，并将它添加到模式空间的现有内容之后来创建多行模式空间。模式空间最初的内容和新的输入行之间用换行符分隔。在模式空间中嵌入的换行符可以利用转义序列“\n”来匹配。在多行模式空间中，元字符“^”匹配空间中的第一个字条，而不匹配换行符后面的字符。同样，“$”只匹配模式空间中最后的换行符，而不匹配任何嵌入的换行符。在执行next命令之后，控制将被传递给脚本中的后续命令。
Next命令与next命令不同，next输出模式空间的内容，然后读取新的输入行。next命令不创建多行模式空间。
 

#实例1
//文档
[root@localhost ~]# cat abc
Consult Section 3.1 in the Owner and Operator
Guide for a description of the tape drives
available on your system.


//改变
[root@localhost ~]# sed '/Operator$/{N;s/Owner and Operator\nGuide/installation Guide/g}' abc
Consult Section 3.1 in the installation Guide for a description of the tape drives
available on your system.

//拆解
[root@localhost ~]# sed -n '/Operator$/{N;p}' abc  //匹配以Operator结尾的行 N和匹配行的下一行 p打印
Consult Section 3.1 in the Owner and Operator
Guide for a description of the tape drives


[root@localhost ~]# sed -n '/Operator$/{N;s/Owner and Operator\nGuide/installation Guide/g ;p}' abc   //将Owner and Operator\nGuide 变成 installation Guide   因为替换包括了\n（转行）  所以打印时会将两条显示为一条
Consult Section 3.1 in the installation Guide for a description of the tape drives  


#实例2
//文档
[root@localhost ~]# cat abc
Consult Section 3.1 in the Owner and Operator
Guide for a description of the tape drives
available on your system.
Look in the Owner and Operator Guide shipped with your system.
Two manuals are provided inc luding the Owner and
Operator Guide and the User Gui de.
The Owner and Operator Guide is shipped with your system.

//改变
[root@localhost ~]# sed 's/Owner and Operator Guide/installation Guide/g;/Owner/{N;s/ *\n/ /g;s/Owner and Operator Guide */installation Guide\n/g}' abc
Consult Section 3.1 in the installation Guide
for a description of the tape drives
available on your system.
Look in the installation Guide shipped with your system.
Two manuals are provided inc luding the installation Guide
and the User Gui de.
The installation Guide is shipped with your system.




//拆解
[root@localhost ~]# sed 's/Owner and Operator Guide/installation Guide/g' abc   //将Owner and Operator Guide替换为installation Guide
Consult Section 3.1 in the Owner and Operator
Guide for a description of the tape drives
available on your system.
Look in the installation Guide shipped with your system.
Two manuals are provided inc luding the Owner and
Operator Guide and the User Gui de.
The installation Guide is shipped with your system.


[root@localhost ~]# sed -n 's/Owner and Operator Guide/installation Guide/g;/Owner/p' abc   //匹配带有Owner的行（此时只有两行）
Consult Section 3.1 in the Owner and Operator
Two manuals are provided inc luding the Owner and


[root@localhost ~]# sed -n 's/Owner and Operator Guide/installation Guide/g;/Owner/{N;p}' abc  //将匹配行的下一行追加到模式空间
Consult Section 3.1 in the Owner and Operator
Guide for a description of the tape drives
Two manuals are provided inc luding the Owner and
Operator Guide and the User Gui de.


[root@localhost ~]# sed -n 's/Owner and Operator Guide/installation Guide/g;/Owner/{N;s/ *\n/ /g;p}' abc  //将 *\n替换为空格 就变成了两行合并为一行
Consult Section 3.1 in the Owner and Operator Guide for a description of the tape drives
Two manuals are provided inc luding the Owner and Operator Guide and the User Gui de.

[root@localhost ~]# sed -n 's/Owner and Operator Guide/installation Guide/g;/Owner/{N;s/ *\n/ /g;s/Owner and Operator Guide */installation Guide\n/g;p}' abc  //将Owner and Operator Guide * 替换为installation Guide\n 改变了Owner and Operator Guide然后后面的换行
Consult Section 3.1 in the installation Guide
for a description of the tape drives
Two manuals are provided inc luding the installation Guide
and the User Gui de.

多行删除

删除命令（d)删除模式空间的所有内容并导致读入新的输入行，从而在脚本的顶端重新使用编辑方法。删除命令(D)稍微有些不同:它删除模式空间中第一行的内容，它不会导致读入新的输入行，相反，它返回到脚本的顶端，将这些指令应用于模式空间剩余的内容，我们可以编写一个实现查找一系列空行并输出单个空行的脚本，以看看它们之间的区别。下面的语句使用了删除命令(d):
#将多个空行减少到一行，利用d命令的版本

/- $/{
N
/-\n$/d

}
当遇到一个空行时，下一行就追加到模式空间中。然后试着匹配嵌入的换行符。注意定位元字符^和$分别匹配模式空间的开始处和结束处。
 

#实例1
//文档
[root@localhost ~]# cat abc
This line is followed by 1 blank line.

This line is followed by 2 blank lines.


This line is followed by 3 blank lines.



This line is followed by 4 b lank lines.




This is the end.


//改变
[root@localhost ~]# sed  '/^$/{N;/^\n$/d}' abc
This line is followed by 1 blank line.

This line is followed by 2 blank lines.
This line is followed by 3 blank lines.

This line is followed by 4 b lank lines.
This is the end.


//拆解
[root@localhost ~]# sed -n '/^$/{N;p}' abc  //匹配空行将匹配行的下一行追加到模式空间

This line is followed by 2 blank lines.





This line is followed by 4 b lank lines.




[root@localhost ~]# sed -n '/^$/{N;/^\n$/d;p}' abc  //以换行符开头或结尾的删除（空格偶数删除）

This line is followed by 2 blank lines.

This line is followed by 4 b lank lines.

多行打印

多行打印（Print）命令与小写字母的print命令稍有不同。该命令输出多行模式空间的第一部分，直到第一个嵌入的换行符为止。在执行完脚本的最后一个命令之后，模式空间的内容自动输出(-n选项或#n抑制这个默认的动作)。因此，当默认的输出被抑制或者脚本中的控制流更改，以至不能到达脚本的底部时，需要使用打印命令(P或p） .Print命令经常出现在Next命令之后和Delete命令之前。这3个命令能建立一个输入/输出循环，用来维护两行的模式空间，但是一次只输出一行。这个循环的目的是只输出模式空间的第一行，然后返回到脚本的顶端将所有的命令应用于模式空间的第二行。没有这个循环，当执行脚本中的最后一个命令时，模式空间中的这两行都将被输出。创建多行模式空间以匹配第一行结尾处的“UNIX”和第二行开始处的“System”。如果发现“UNIX System”跨越两行，那么我们将它变成“UNIX OperatingSystem”。建立这个循环以返回到脚本的顶端，并寻找第二行结尾处的
Next命令将一个新的输入行追加到模式空间的当前行。在替换命令应用于多行模式空间之后，模式空间的第一部分被Print命令输出，然后被Delete命令删除。这意味着当前被输出并且新的行成为当前行。Delete命令阻止脚本到达底部，这将输出两行并清除模式空间的内容。Delete命令让我们保护了模式空间的第二部分，并将控制转移动脚本的顶端，在顶端所有的编辑命令都可以被应用于一行。这些命令中有一个是Next命令，它将另一个新行读入模式空间。
下面的脚本实现了同样的循环:
/UNIX$/{
N
/\nSystem/ {
s// 0perating &/

p

D

}

}

替换命令匹配“\nSystem”,并且用“Operating\nSystem”取代它。保留换行是很重要的，否则模式空间中就有只一行。注意Print和Delete命令的顺序。
 

#实例1
//文件
[root@localhost ~]# cat abc
Here are examples of the UNIX
System. Where UNIX
System appears，it should be the UNIX
Operating System.


//改变
[root@localhost ~]# sed '/UNIX$/{N;/\nSystem/{s// Operating &/g;P;D}}' abc
Here are examples of the UNIX Operating 
System. Where UNIX Operating 
System appears，it should be the UNIX
Operating System.


//拆解
[root@localhost ~]# sed -n '/UNIX$/{N;p}' abc  //匹配UNIX结尾的行 将匹配到行的下一行添加到模式空间
Here are examples of the UNIX
System. Where UNIX
System appears，it should be the UNIX
Operating System.


[root@localhost ~]# sed -n '/UNIX$/{N;/\nSystem/{p}}' abc  //  /\nSystem/  在匹配转行后为System的行
Here are examples of the UNIX
System. Where UNIX

[root@localhost ~]# sed -n '/UNIX$/{N;/\nSystem/{s// Operating &/g;p}}' abc  //添加Operating
Here are examples of the UNIX Operating 
System. Where UNIX


[root@localhost ~]# sed -n '/UNIX$/{N;/\nSystem/{s// Operating &/g;P}}' abc  //P打印模式空间第一行
Here are examples of the UNIX Operating 

[root@localhost ~]# sed -n '/UNIX$/{N;/\nSystem/{s// Operating &/g;P;D}}' abc  //删除模式空间的第一行
Here are examples of the UNIX Operating 
System. Where UNIX Operating

包含那一行

模式空间是容纳当前输入行的缓冲区。还有一个称为保持空间(hold space)的顶留(set-aside）缓冲区。模式空间的内容可以复制到保持空间，而且保持空间的内容也可以复制到模式空间。有一组命令用于在保持空间和模式空间之间移动数据。保持空间用于临时存储。单独的命令不能寻址保持空间或者更改它的内容。
保持空间最常的用途是，当改变模式空间中的原始内容时，用于保留当前输入行的副本。影响模式空间的命令有:

 这些命令中的每一条都可以利用一个地址来指定一行或行范围。Hole(h,H)命令将数据移至保持空间、而get (g.G）命令将保持空间的数据移回到模式空间。同一命令的小写字母和大写字母之间的差别是，小字字母命令改写目的缓存区的内容，而大写字母命令追加缓存区的现有内容。
Hold 命令用模式空间的内容取代保持空间的内容。get命令用保持空间的内容取代模式空间的内容。
Hole命令在保持空间的内容之后放置一个换行符，且后面跟随模式空间的内容（即使保持空间是空的，换行符也被追加到保持空间中）。Get命令模式空问的内容之后放置一个换行符，且后面跟随保持空间的内容。
交换命令交换两个缓存区的内容，对两个缓存区没有副作用。

#实例1
//文件
[root@localhost ~]# cat abc
1
2
11
22
111
222

//变化
[root@localhost ~]# sed -n '/1/{h;d};/2/{G};p' abc
2
1
22
11
222
111

[root@localhost ~]# sed -n '/1/{h;d};p' abc   //将模式空间的1追加到保持空间 并删除模式空间的1
2
22
222

是LJ的
关注
【linux】Shell脚本三剑客之sed命令的详细用法攻略
景天科技苑
07-23 1万+
在Shell编程中，对文本进行处理和转换是一项常见的任务。`sed`（Stream Editor）作为一种强大的流式文本编辑器，提供了丰富的文本处理能力，通过简单的命令即可实现复杂的文本操作。掌握`sed`命令的基本用法，可以极大地提高文本处理的效率和灵活性。本文将从`sed`命令的基本概念和语法开始介绍，然后通过丰富的实例演示其常见用法，帮助读者快速上手并灵活运用`sed`命令。
Linux 命令 | 每日一学，文本处理三剑客之awk命令实践
WeiyiGeek 唯一极客IT知识分享
11-16 1070
描述：前面作者已经介绍了文本处理三剑客中的 grep 与 sed 文本处理工具，今天将介绍其最后一个且非常强大的 awk 文本处理输出工具，它可以非常方便我们读取文件内容或者将命令执行内容，根据脚本进行自定义格式化美化输出。Linux中的awk工具以其强大的文本处理能力而闻名，它是一种专门用于模式扫描和处理的编程语言。本章节将深入探讨awk的语法结构，并提供一份简明易懂的学习指南。
sed的应用
weixin_44221035的博客
12-14 580
sed基本用法 2.2 方案 sed文本处理工具的用法： 用法1：前置命令 | sed [选项] '条件指令' 用法2：sed [选项] '条件指令' 文件.. .. 相关说明如下： 条件可以是行号或者/正则/ 没有条件时，默认为所有条件 指令可以是增、删、改、查等指令 默认sed会将所有输出的内容都打印出来，可以使用-n屏蔽默认输出 选项中可以使用-r选项，让sed支持扩展正则 认识sed工具的...
sed应用
mushuangpanny的博客
08-02 326
sed应用
sed命令的应用
DTY9999的博客
05-13 756
简单学习sed用法的使用
Linux文本处理三剑客：grep、sed、awk的综合应用
[Linux文本处理三剑客：grep、sed、awk的综合应用](https://segmentfault.com/img/bVdcVUy?spec=cover) # 摘要 本文详细介绍了Linux系统中文本处理的核心工具——grep、sed和awk，即通常所说的“文本处理三剑客”。...
掌握Linux三剑客：awk、sed、grep文本处理指南
Linux三大工具指的是awk、sed和grep，它们是Linux系统中用于文本处理的三种强大工具，经常一起被称为“文本处理三剑客”。这三个工具各自具备独特的功能，通常用于文本和数据流的搜索、提取、匹配、格式化和过滤等...
linux 文本处理 三剑客
04-26
嗯，用户想了解Linux下的文本处理三剑客awk、sed和grep的使用方法。我需要先回忆这三个工具的基本功能和常见用例。首先，grep主要用于搜索文本，sed用于流编辑，而awk则更擅长处理结构化文本和生成报告。 用户可能...
sed应用详解
12-24 443
命令格式 命令详解 原地编辑
sed应用举例
wsclinux的专栏
03-13 855
1,sed '3d' test.txt   : 把test.txt中的第三行删除 2,sed ‘3a hello world’ test.txt : 在test.txt的第三行后面添加"hello world"这一行 3,sed ‘3i hello world’ test.txt : 在test.txt的第三行前面面添加"hello world"这一行 4,sed ‘3,5c hel
sed命令详解
weixin_30690833的博客
09-17 1188
转载：http://blog.chinaunix.net/u/22677/showart_1076318.html 1.简介 sed是非交互式的编辑器。它不会修改文件，除非使用shell重定向来保存结果。默认情况下，所有的输出行都被打印到屏幕上。 sed编辑器逐行处理文件（或输入），并将结果发送到屏幕。具体过程如下：首先sed把当前正在处理的行保存在一个临时缓存区中（也称为模式空间），...
sed基本用法 sed文本块处理 、 sed高级应用
jackjack博客
09-05 2577
NSD SHELL DAY05 案例1：sed基本用法 案例2：使用sed修改系统配置 案例3：sed多行文本处理 案例4：sed综合脚本应用 1 案例1：sed基本用法 1.1 问题 本案例要求熟悉sed命令的p、d、s等常见操作，并结合正则表达式，完成以下任务： 删除文件中每行的第二个、最后一个字符 将文件中每行的第一个、第二个字符互换 删除文件中所有的数字 为文件中每个...
SHELL05 - sed基本用法 sed文本块处理、sed高级应用
李俊的博客
05-03 1869
NSD SHELL DAY05案例1：sed基本用法案例2：使用sed修改系统配置案例3：sed多行文本处理案例4：sed综合脚本应用1 案例1：sed基本用法1.1 问题本案例要求熟悉sed命令的p、d、s等常见操作，并结合正则表达式，完成以下任务：删除文件中每行的第二个、最后一个字符将文件中每行的第一个、第二个字符互换删除文件中所有的数字为文件中每个大写字母添加括号1.2 方案sed文本处理工...
shell学习之-sed用法解析
热门推荐
zg_hover的专栏
09-28 7万+
 通过例子学习sed的用法1,sed介绍    sed可删除(delete)、改变(change)、添加(append)、插入(insert)、合、交换文件中的资料行,或读入其它档的资料到文>件中,也可替换(substuite)它们其中的字串、或转换(tranfer)其中的字母等等。例如将文件中的连续空白行删成一行、"local"字串替换成"remote"、"t"字母转换成"T"、将第10行资料与
Redis击穿，穿透和雪崩详解以及解决方案
最新发布
hqxstudying的博客
05-28 1146
在 Java 开发中，Redis 作为常用的缓存中间件，可能会面临这三类经典问题。
【Netty系列】Netty 框架介绍
技术改变世界
05-28 903
Netty是一个基于 Java NIO（Non-blocking I/O）的异步事件驱动网络应用框架，旨在快速开发高性能、高可靠性的网络服务器和客户端。它简化了 TCP/UDP 等协议的编程，并提供了高度可定制的组件，适用于高并发场景（如游戏服务器、即时通讯、分布式系统等）。
SpringBoot实战：高效获取视频资源
阿Q的小窝
05-28 2万+
在短视频行业高速发展的背景下，海量内容数据日益增长，每天都有新的视频、评论、点赞、分享等数据涌现。如何高效、精准地获取并处理这些庞大的数据，已成为各大平台和开发者面临的核心挑战。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值