Linux-sed文本处理流编辑器

举报
小工匠 发表于 2021/09/11 00:20:41 2021/09/11
【摘要】 概述 Linux sed命令是利用script来处理文本文件。 sed可依照script的指令,来处理、编辑文本文件。 Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。 ...

概述

Linux sed命令是利用script来处理文本文件。

sed可依照script的指令,来处理、编辑文本文件。

Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。


语法

sed [-hnV][-e<script>][-f<script文件>][文本文件]
  
 
  • 1

参数说明:

  • -e<script>或–expression=<script> 以选项中指定的script来处理输入的文本文件。
  • -f<script文件>或–file=<script文件> 以选项中指定的script文件来处理输入的文本文件。
  • -h或–help 显示帮助。
  • -n或–quiet或–silent 仅显示script处理后的结果。
  • -V或–version 显示版本信息。

动作说明:

  • a :新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~
  • c :取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行!
  • d :删除,因为是删除,所以 d 后面通常不接任何内容;
  • i :插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行);
  • p :列印,亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行~
  • s :取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g 就是了!

栗子

[root@entel2 ~]# cat sedTest.txt 
xiao gong  jiang1 
xiao gong  jiang2 
xiao gong  jiang3 
xiao gong  jiang4 
xiao gong  jiang5 
xiao gong  jiang6 
xiao gong  jiang7 
xiao gong  jiang8 
xiao gong  jiang9 
xiao gong  jiang10 
xiao gong  jiang11 
xiao gong  jiang12 
xiao gong  jiang13 
xiao gong  jiang14 
xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16

以下例子中的数据均已上述sedTest.txt为准

在文件的第四行后添加一行,并将结果输出到标准输出

[root@entel2 ~]# sed -e 4a\Line4 sedTest.txt 
xiao gong  jiang1 
xiao gong  jiang2 
xiao gong  jiang3 
xiao gong  jiang4 
Line4
xiao gong  jiang5 
xiao gong  jiang6 
xiao gong  jiang7 
xiao gong  jiang8 
xiao gong  jiang9 
xiao gong  jiang10 
xiao gong  jiang11 
xiao gong  jiang12 
xiao gong  jiang13 
xiao gong  jiang14 
xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17

并不会修改源文件


以行为单位的新增/删除

删除第二行到第五行

[root@entel2 ~]# cat -b sedTest.txt | sed  '2,5d'
     1  xiao gong  jiang1 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 


[root@entel2 ~]# nl sedTest.txt |sed '2,5d'
     1  xiao gong  jiang1 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26

sed 的动作为 ‘2,5d’ ,那个 d 就是删除!
因为 2-5 行给他删除了,所以显示的数据就没有 2-5 行罗~

另外,注意一下,原本应该是要下达 sed -e 才对,没有 -e 也可以!

[root@entel2 ~]# nl sedTest.txt | sed -e '2,9d'
     1  xiao gong  jiang1 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8

同时也要注意的是, sed 后面接的动作,推荐使用 ” 两个单引号括住!

只删除某一行

比如第二行

 [root@entel2 ~]# nl sedTest.txt | sed '2d'
     1  xiao gong  jiang1 
     3  xiao gong  jiang3 
     4  xiao gong  jiang4 
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15

删除第 3 到最后一行

[root@entel2 ~]# nl sedTest.txt | sed -e '3,$d'
     1  xiao gong  jiang1 
     2  xiao gong  jiang2 
  
 
  • 1
  • 2
  • 3

$ 标识最后一行

在第二行后(亦即是加在第三行)增加内容

[root@entel2 ~]# nl sedTest.txt | sed '2a this is added by sed'
     1  xiao gong  jiang1 
     2  xiao gong  jiang2 
this is added by sed
     3  xiao gong  jiang3 
     4  xiao gong  jiang4 
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17

在第二行前(亦即是加在第二行)增加内容

[root@entel2 ~]# nl sedTest.txt | sed '2i this is added by sed'
     1  xiao gong  jiang1 
this is added by sed
     2  xiao gong  jiang2 
     3  xiao gong  jiang3 
     4  xiao gong  jiang4 
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17

增加两行以上,在第二行后面加入两行字

[root@entel2 ~]# nl sedTest.txt | sed '2i this is added by sed \n and I am the sencond line '
     1  xiao gong  jiang1 
this is added by sed 
 and I am the sencond line 
     2  xiao gong  jiang2 
     3  xiao gong  jiang3 
     4  xiao gong  jiang4 
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18

或者

[root@entel2 ~]# nl sedTest.txt | sed '2a run or \
> walk '
     1  xiao gong  jiang1 
     2  xiao gong  jiang2 
run or 
walk 
     3  xiao gong  jiang3 
     4  xiao gong  jiang4 
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19

每一行之间都必须要以反斜杠『 \ 』来进行新行的添加。


以行为单位的替换与显示

将第2-5行的内容取代成为『a』

[root@entel2 ~]# nl sedTest.txt |sed  '2,5c a'
     1  xiao gong  jiang1 
a
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
[root@entel2 ~]# nl sedTest.txt |sed -e '2,5c a'
     1  xiao gong  jiang1 
a
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
    10  xiao gong  jiang10 
    11  xiao gong  jiang11 
    12  xiao gong  jiang12 
    13  xiao gong  jiang13 
    14  xiao gong  jiang14 
    15  xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26

通过这个方法可以取代整行。

仅列出文件内的第 5-7 行

[root@entel2 ~]# nl sedTest.txt | sed -n '5,7p'
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
  
 
  • 1
  • 2
  • 3
  • 4

p :列印,亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行~

-n或–quiet或–silent 仅显示script处理后的结果。如果不加 -n ,会把所有行和匹配行都输出。

数据的搜寻并显示

搜索jiang1关键字的行

[root@entel2 ~]# sed  -n '/jiang1/p' sedTest.txt 
xiao gong  jiang1 
xiao gong  jiang10 
xiao gong  jiang11 
xiao gong  jiang12 
xiao gong  jiang13 
xiao gong  jiang14 
xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8

关键字需要用 /关键字/

p :列印,亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行~

如果jiang1找到,除了输出所有行,还会输出匹配行。
使用-n的时候将只打印包含模板的行。

如果不指定 -n ,如下:

[root@entel2 ~]# sed '/jiang1/p' sedTest.txt 
xiao gong  jiang1 
xiao gong  jiang1 
xiao gong  jiang2 
xiao gong  jiang3 
xiao gong  jiang4 
xiao gong  jiang5 
xiao gong  jiang6 
xiao gong  jiang7 
xiao gong  jiang8 
xiao gong  jiang9 
xiao gong  jiang10 
xiao gong  jiang10 
xiao gong  jiang11 
xiao gong  jiang11 
xiao gong  jiang12 
xiao gong  jiang12 
xiao gong  jiang13 
xiao gong  jiang13 
xiao gong  jiang14 
xiao gong  jiang14 
xiao gong  jiang15 
xiao gong  jiang15 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23

数据的搜寻并删除

删除所有包含jiang1的行,其他行输出

[root@entel2 ~]# nl sedTest.txt|sed '/jiang1/d'  
     2  xiao gong  jiang2 
     3  xiao gong  jiang3 
     4  xiao gong  jiang4 
     5  xiao gong  jiang5 
     6  xiao gong  jiang6 
     7  xiao gong  jiang7 
     8  xiao gong  jiang8 
     9  xiao gong  jiang9 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9

数据的搜寻并执行命令

改造下数据:

将/etc/passwd root开头的打印出来 追加到 sedTest.txt文本中。

[root@entel2 ~]# sed -n '/^root/p' /etc/passwd >> sedTest.txt 
[root@entel2 ~]# cat sedTest.txt 
xiao gong  jiang1 
xiao gong  jiang2 
xiao gong  jiang3 
xiao gong  jiang4 
xiao gong  jiang5 
xiao gong  jiang6 
xiao gong  jiang7 
xiao gong  jiang8 
xiao gong  jiang9 
xiao gong  jiang10 
xiao gong  jiang11 
xiao gong  jiang12 
xiao gong  jiang13 
xiao gong  jiang14 
xiao gong  jiang15 
root:x:0:0:root:/root:/bin/bash
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18

把 bash 改成 xiaogongjiang

[root@entel2 ~]# sed -n '/root/{s/bash/xiaogongjiang/;p}' sedTest.txt 
root:x:0:0:root:/root:/bin/xiaogongjiang
  
 
  • 1
  • 2

数据的搜寻并替换

除了整行的处理模式之外, sed 还可以用行为单位进行部分数据的搜寻并取代。基本上 sed 的搜寻与替代的与 vi 相当的类似!他有点像这样:

sed 's/要被取代的字串/新的字串/g'
  
 
  • 1

字符g代表每行出现的字符全部替换,如果想在特定字符处添加,g就有用了,否则只会替换每行第一个,而不继续往后找了.

这里写图片描述

栗子

获取etho0的网址信息

[root@entel2 ~]# ifconfig eth0 | grep "inet addr"
          inet addr:10.45.7.122  Bcast:10.45.17.255  Mask:255.255.252.0
  
 
  • 1
  • 2

利用正则去掉ip前面的部分

[root@entel2 ~]# ifconfig eth0 | grep "inet addr" | sed 's/^.*addr://g'
10.45.7.122  Bcast:10.45.17.255  Mask:255.255.252.0
  
 
  • 1
  • 2

去掉ip后面部分

[root@entel2 ~]# ifconfig eth0 | grep "inet addr" | sed 's/^.*addr://g' | sed 's/Bcast.*$//g'
10.45.7.122  
  
 
  • 1
  • 2

讲解:

^ 匹配行首 例如 ^hello 会匹配以hello开头的行
. 匹配除了换行符外任意一个字符
* 前一个字符匹配0次或任意多次
$ 匹配行尾 例如 hello$ 会匹配以hello结尾的行
  
 
  • 1
  • 2
  • 3
  • 4

  
 
  • 1

多点编辑

一条sed命令,删除/etc/passwd第三行到末尾的数据,并把bash替换为blueshell

[root@entel2 ~]# nl /etc/passwd | sed -e '3,$d' -e 's/bash/blueshell/g'
     1  root:x:0:0:root:/root:/bin/blueshell
     2  bin:x:1:1:bin:/bin:/sbin/nologin
  
 
  • 1
  • 2
  • 3

-e表示多点编辑,第一个编辑命令删除/etc/passwd第三行到末尾的数据,第二条命令搜索bash替换为blueshell。


直接修改文件内容(危险动作)

sed 可以直接修改文件的内容,不必使用管道命令或数据流重导向! 不过,由於这个动作会直接修改到原始的文件,所以请你千万不要随便拿系统配置来测试!

我们还是使用我们的 sedTest.txt来测试吧

利用 sed 直接在 sedTest.txt 最后一行加入『# This is a test』

[root@entel2 ~]# sed -i '$a This is for test '  sedTest.txt 
[root@entel2 ~]# cat sedTest.txt 
xiao gong  jiang1 
xiao gong  jiang2 
xiao gong  jiang3 
xiao gong  jiang4 
xiao gong  jiang5 
xiao gong  jiang6 
xiao gong  jiang7 
xiao gong  jiang8 
xiao gong  jiang9 
xiao gong  jiang10 
xiao gong  jiang11 
xiao gong  jiang12 
xiao gong  jiang13 
xiao gong  jiang14 
xiao gong  jiang15 
root:x:0:0:root:/root:/bin/bash
This is for test 
  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19

由於 $ 代表的是最后一行,而 a 的动作是新增,因此该文件最后新增『# This is a test』!

每一行结尾若为 . 则换成 !

sed -i 's/\.$/\!/g' regular_express.txt
  
 
  • 1

在每行的头添加字符,比如”HEAD”

sed 's/^/HEAD&/g' test.file
  
 
  • 1

在每行的行尾添加字符,比如“TAIL”

sed 's/$/&TAIL/g' test.file
  
 
  • 1

如果想导出文件,就利用重定向;如果想在原文件上更改,添加选项”-i”。

sed 的『 -i 』选项可以直接修改文件内容,这功能非常有帮助!举例来说,如果你有一个 100 万行的文件,你要在第 100 行加某些文字,此时使用 vim 可能会疯掉!因为文件太大了!那怎办?就利用 sed 啊!透过 sed 直接修改/取代的功能,你甚至不需要使用 vim 去修订!

文章来源: artisan.blog.csdn.net,作者:小小工匠,版权归原作者所有,如需转载,请联系作者。

原文链接:artisan.blog.csdn.net/article/details/52632150

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。