【shell】sed命令

释放双眼,带上耳机,听听看~!

希望各位不要白piao,点个赞或者刷个评论再走,还有【禁止转载】,抄袭转载必究,谢谢合作。

本篇文章主要讲了以下几个部分,如果会了可以忽略本文章,省下时间去学习别的知识~
———————-文章概述———————-

1.sed简介

2.sed的基本格式与参数

3.sed的正则应用

4.工作中基本的sed应用

5.sed的高级应用

6.sed实例分析


纯干货所有总结应用在文章后半部分,有基础的跳至4,5,6!!!
纯干货所有总结应用在文章后半部分,有基础的跳至4,5,6!!!
纯干货所有总结应用在文章后半部分,有基础的跳至4,5,6!!!

sed简介

sed意为流编辑器(Stream Editor),在Shell脚本和Makefile中作为过滤器使用非常普遍,也就是把前一个程序的输出引入sed的输入,经过一系列编辑命令转换为另一种格式输出。sed和vi都源于早期UNIX的ed工具,所以很多sed命令和vi的末行命令是相同的。

sed的基本格式与参数

sed命令行的基本格式为
sed option 'script' file1 file2 …
sed option -f scriptfile file1 file2 …
选项含义:

–version
显示sed版本。
–help
显示帮助文档。
-n,–quiet,–silent
静默输出,默认情况下,sed程序在所有的脚本指令执行完毕后,将自动打印模式空间中的内容,这些选项可以屏蔽自动打印。
-e
script 允许多个脚本指令被执行。
-f
script-file,
–file=script-file
从文件中读取脚本指令,对编写自动脚本程序来说很棒!
-i,–in-place
直接修改源文件,经过脚本指令处理后的内容将被输出至源文件(源文件被修改)慎用!
-l N, –line-length=N
该选项指定l指令可以输出的行长度,l指令用于输出非打印字符。
–posix
禁用GNU sed扩展功能。
-r, –regexp-extended
在脚本指令中使用扩展正则表达式
-s, –separate
默认情况下,sed将把命令行指定的多个文件名作为一个长的连续的输入流。而GNU sed则允许把他们当作单独的文件,这样如正则表达式则不进行跨文件匹配。
-u, –unbuffered
最低限度的缓存输入与输出。

sed的正则应用

sed处理的文件既可以由标准输入重定向得到,也可以当命令行参数传入,命令行参数可以一次传入多个文件,sed会依次处理。sed的编辑命令可以直接当命令行参数传入,也可以写成一个脚本文件然后用-f参数指定,编辑命令的格式为:
/pattern/action
其中pattern是正则表达式,action是编辑操作。sed程序一行一行读出待处理文件,如果某一行与pattern匹配,则执行相应的action,如果一条命令没有pattern而只有action,这个action将作用于待处理文件的每一行。
【shell】sed命令

工作中基本的sed应用

在工作中我们经常用shell进行文本的处理,说到文本处理,无非就是我们所说的crud(增删改查),如下几种是我们经常用到的4个参数:

a,append
追加
i,insert
插入
d,delete
删除
s,substitution
替换

Case1:在输出testfile内容的第二行后添加"itcast"
sed "2a itcast" ./testfile
Case2:删除testfile的第2行到第5行
sed "2,5d" testfile
基本理解上面的概念之后让我们进行实战中的各种sed应用:

【shell】sed命令
【shell】sed命令
【shell】sed命令
【shell】sed命令

sed的高级应用

【shell】sed命令

sed实例分析

使用p命令需要注意,sed是把待处理文件的内容连同处理结果一起输出到标准输出的,因此p命令表示除了把文件内容打印出来之外还额外打印一遍匹配pattern的行。比如一个文件testfile的内容是
123
abc
456
Case1:打印其中包含abc的行
sed '/abc/p' testfile
Result:


1
2
3
4
5
6
1123
2abc
3abc
4456
5
6

Case2:sed作为文件是如何被调用的,首先来看script.sed里面的东西都有什么:
$cat script.sed


1
2
3
4
5
1s/brown/green/
2s/fox/elephant/
3s/dog/cat/
4
5

以上是我存在文件中的一些命令,现在我们通过-f来调用其中的命令
sed -f script.sed data.txt
这样执行之后我们就会对data.txt执行我们相关的命令

Case3:要想只输出处理结果,怎么办?
sed -n '/abc/p' testfile
Result:


1
2
3
1abc
2
3

Case4:使用d命令就不需要-n参数了,比如删除含有abc的行
sed '/abc/d' testfile
Result:


1
2
3
4
1123
2456
3
4

重要的事情要说三遍:
注意,sed命令不会修改原文件,删除命令只表示某些行不打印输出,而不是从原文件中删去。
注意,sed命令不会修改原文件,删除命令只表示某些行不打印输出,而不是从原文件中删去。
注意,sed命令不会修改原文件,删除命令只表示某些行不打印输出,而不是从原文件中删去。

Case4:使用查找替换命令时,可以把匹配pattern1的字符串复制到pattern2中,
sed 's/bc/-&-/' testfile
Result:


1
2
3
4
5
1123
2a-bc-
3456
4
5

pattern2中的&表示原文件的当前行中与pattern1相匹配的字符串
再比如:
sed 's/([0-9])([0-9])/-\1-\2/' testfile
Result:


1
2
3
4
5
1-1-~2~3
2abc
3-4-~5~6
4
5

详细解释:
pattern2中的\1表示与pattern1的第一个()括号相匹配的内容,\2表示与pattern1的第二个()括号相匹配的内容。sed默认使用Basic正则表达式规范,如果指定了-r选项则使用Extended规范,那么()括号就不必转义了

Case5:如何在一个sed中使用多个命令?
sed 's/yes/no/;s/static/dhcp/' ./testfile
注意:使用分号隔开指令
sed -e 's/yes/no/' -e 's/static/dhcp/' testfile
注意:使用-e选项。

Case6:如何去除掉HTML的标签?
如果testfile的内容是


1
2
3
4
1<html><head><title>Hello World</title></head>
2<body>Welcome to the world of regexp!</body></html>
3
4

现在要去掉所有的HTML标签,一定有人这么写的
sed 's/<.*>//g' testfile
结果是两个空行,把所有字符都过滤掉了。这是因为,正则表达式中的数量限定符会匹配尽可能长的字符串,这称为贪心的(Greedy)。比如sed在处理第一行时,<.*>匹配的并不是或这样的标签,而是


1
2
3
1&lt;html&gt;&lt;head&gt;&lt;title&gt;Hello World&lt;/title&gt;
2
3

【shell】sed命令

给TA打赏
共{{data.count}}人
人已打赏
安全技术安全运维

Windows服务器如何发现被黑

2018-5-20 12:24:31

安全技术

详解Node.js API系列 Http模块(2) CNodejs爬虫实现

2021-12-21 16:36:11

个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索