Shell三剑客之sed命令详解

目录

一、sed命令的常见用法

         选项

         操作

二、用法示例

2.1、输出符合条件的文本(p表示正常输出)

2.2、sed结合正则表达式输出指定行

2.3、删除符合条件的文本

 2.4、插入符合条件的行

三、替换符合条件的文本

3.1、字符串替换

3.2、先备份再修改数据

四、迁移符合条件的文本

五、使用脚本编辑文件

注意:以上除了查看固定多少行的内容,其他所有的操作加上"-i"选项,才能真正的对文本进行编辑,不然只能看到操作后的结果,并不能直接对文本能让修改。

 总结


        sed是一个强大而简单的文件解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除、替换、添加、移动等),最后输出所有行或者仅输出处理的某些行。sed也可以再无交互的情况下实现相当复杂的文本处理操作

一、sed命令的常见用法

        通常情况下调用sed命令有两种格式,如下所示。其中“参数”是指操作的目标文件,当存在多个操作对象时用,文件之间用逗号“,”分隔;而scriptfile表示脚本文件,需要用-f选项指定,表示通过指定的脚本文件来处理输入的目标文件。

sed  [选项]   '操作'   参数

sed  [选项]  -f scriptfile 参数

         选项

常见的sed命令选项包含以下几种:
-e或-expression=:表示用指定命令或者脚本来处理输入的文本文件
-f或-file-:表示用指定的脚本文件来处理输入的文件文件
-h或--help:显示帮助
-n、-quite或silent:表示仅表示处理后的结果
-i:直接编辑文本文件

         操作

        “操作”用于只当对文件操作的动作行为,也就是sed的命令。通常情况下是采用“[n1[n2]]”操作参数的格式。n1、n2是可选的,代表选择进行操作的行数,如操作需要在5~20行之间进行,则表示为“5,20动作行为”。常见的操作包括以下几种。

a:增加,在当前行下面增加一行指定内容。
c:替换,讲选定行替换为指定内容。
d:删除,删除选定的行。
i:插入,在选定行上面插入一行指定内容。
p:打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容,如果又非打印字符,则以ASCLL码输出。通常与“-n”选项一起使用。
s:替换,替换指定字符
y:字符转换

二、用法示例

我们复制一个网卡文件,然后用它来进行演示

d34216764ba44d3a93d65264570f4054.png

2.1、输出符合条件的文本(p表示正常输出)

sed -n '3p'  ens33  #输出第三行内容

90e7080b1015480c91d988844774f0d5.png

sed -n '3,5p' ens33  #输出3-5行内容

 142766bb24bc49ababf2098a98fac847.png

sed -n '3p;5p' ens33  #输出第三和第五行

51466d0c0041438c952c58f80fb7ba2a.png

sed -n 'p;n'  ens33  #输出所有奇数行     sed -n '1~2p' ens33也可以实现

26614c38a73349bab5e48a9bb4bb87bc.png

 sed -n 'n;p'  ens33  #输出所有偶数行  sed -n '2~2p' ens33也可以实现

604b4884bf664c8885b052b1b38f96c9.png

 sed -n '1,5{p;n}'  ens33  #输出1-5行的奇数行

2e5c56e4c19f4a46bfdb6e70249732bd.png

sed -n '1,5{1~2p}' ens33   #输出1-5的奇数行

sed -n '1,5{2~2p}' ens33   #输出1-5的偶数行

8b8a5628e50b46f58b9cab68577f8c82.png

sed -n  '7,${n;p}'  ens33  #输出7行以后的偶数行

 4007c5cd63fa432294829eb4225da10e.png

sed -n '3,+5p' ens33  #从第3行开始,连续进行输出即输出3-8行的内容

42f6b3a04b6744848a9902df533eeb84.png

2.2、sed结合正则表达式输出指定行

sed 命令结合正则表达式时,格式略有不同,正则表达式以“/”包围。
:如果遇到特殊符号的情况,扩展正则还需要转义字符“\”。

准备一个文本文件

fc4a56f5947348cfb2bd25464604d8bc.png

sed -n '/the/p' test.txt  #输出包含the的行 

88a0be4d3d124e58844770ed9f73a4f5.png

sed -n '4,/the/p' test.txt #输出从第四行开始包含the的行

86dec058af704fce9d686106ab646e58.png

sed -n '/the/=' test.txt  #输出包含the的行所在的行号,用(=)来输出行号

2570305bf817472ba73f00a829f1bab3.png

sed -n '/^PI/p' test.txt  #输出PI开头的行

e6e718ba46b74dccb081a00de7c7d02b.png

sed -n '/[0-9]$/p' test.txt  #输出以数字0-9为结尾的行

 8df90bd6e19340c88f17b1db1a296675.png

注意:在查看以什么结尾时,要注意结尾的空字符

sed -n '/\<wood\>/p' test.txt  #输出包含单词wood的行,\<    \>代表单词边界

ec2b0ccb3f69454d8a763db44db0a6eb.png

2.3、删除符合条件的文本

        还是用上面的test.txt文件,但是我们需要做个备份,用于删除后可以复原

        下面命令中 nl 命令用于计算文件的行数,结合该命令可以更加直观地查看到命令执行的结果。我们也可以利用-i或者不加选项来显示,但是区别就是-i是直接对文本进行操作,不加参数是只显示结果,不对文本进行操作。

 ba7f09f3df824626a15ae2e0c4472852.png

nl test.txt | sed '3d'     或者     sed  '3d'  test.txt   或者sed -i '3d' test.txt

#-i会对文本直接进行修改

#删除第三行

为了更好的可视化所以用nl

350912bc4b4e4cddaa2e5de6e1489117.png

nl test.txt | sed '3,5d' #删除3-5行内容

845eef4ed79b438d8ba745badd30b2a9.png

nl test.txt | sed '/the/d'  #删除带有the字符的行,带!符号表示取反,就是删除不带the的行

b8a958f278aa4feb87f61396753d9694.png

        带"!"的取反操作 

73d03cb8fb2148f9bb70cf63ccbfd771.png

sed '/^[a-z]/d' test.txt #删除以a-z开头的行

c78ea1f277b94dd383820f874a015990.png

sed '/\.$/d' test.txt  #删除以.结尾的行

026cb43d7dd144968eac49d5ed8f25ad.png

 sed '/^$/d' test.txt    #删除空行

63ac5ee061c8439696ae68dcbf376829.png

        注 意 : 若 是 删 除 重 复 的 空 行 , 即 连 续 的 空 行 只 保 留 一 个 , 执 行 “sed -e ‘/^$/{n;/^$/d}’ test.txt”命令即可实现。其效果与“cat -s test.txt”相同,n 表示读下一行数据。 

 2.4、插入符合条件的行

 sed '3i 我是谁' test.txt   #在第三行的上一行添加我是谁

1a082527aaa24c1488f3bba95a2b9a8d.png

sed '/the/i 我是谁' test.txt  #在含有the的行的上一行添加我谁

4d798d64a21d44898db298f29d3562c5.png

sed '/the/a 我是谁' test.txt  #在含有the的行的下一行添加我谁

924332def28743af80b3eca0cdaf9e99.png

 sed '3c ##########' test.txt    #将第三行替换为##########

2d3d0e9b18c54e8f9984f1f95d1b7d63.png

三、替换符合条件的文本

3.1、字符串替换

sed 's/the/THE' test.txt #将每行中的第一个the替换为THE

db50036cb22645e08a419e879172cf0d.png

sed ‘s/l/L/2’ #将每行的第二个l替换为L

b3509b3f8d1a42bbb6616eb64b1c6c23.png

sed 's/l/L/g' test.txt  #将文件中所有的l都替换为L

2f9cde32d75e48f4ba281576cc33c927.png

sed 's/o/ /g' test.txt    #将所有的o都替换为空字符

a08c47010f5e47db92b83e425f760b2c.png

 sed 's/^/#/' test.txt  #将所有行前面都加个#

055821a06735427d88e8c4b92f9ce6c9.png

sed '/the/s/^/#/' test.txt    #将包含the的行前面加个#

abf6337cc70c490e948cc8044f175c4b.png

 sed '3,5s/the/THE/g' test.txt   #将3-5行中的the替换为THE

71b5a0289c4340a6b6d149c372f44682.png

 sed '/the/s/o/O/g' text.txt    #将包含the的行中的o替换为O

875d669be0624124936f93fb40b7f781.png

3.2、先备份再修改数据

sed -i.bak 's/SELINUX=disable/SELINUX=enfocing/' /etc/selinux/config

d358fe725fc7401888e89f16cc698402.png

四、迁移符合条件的文本

迁移文本的参数

H:复制到剪贴板;
g、G:将剪贴板中的数据覆盖/追加至指定行;
w:保存为文件;
r:读取指定文件;
a:追加指定内容。具体操作方法如下所示。
I,i   忽略大小写

sed '/the/{H;d};$G'  test.txt  #包含the的行迁移至文件末尾,{;}用于多个操作

0a57e4c799f5448bb31ecd92b97ab56b.png

sed '1,5/{H;d};14G' test.txt  #将1-5行内容追加到14行后

88fa6556b84f4601968e3faf6c1d7e19.png

 sed '/the/w out.file' text.txt   #将包含the 的行另存为文件 out.file

b8f8fbe095ed4ff88e2330c2c831a232.png

 sed '/the/r /etc/hostname' text.txt  #将文件/etc/hostname 的内容添加到包含 the 的每行以后

6299ef7d5aaf460f8a865398e80e9c98.png

sed '3a #####' text.txt #在第 3 行后插入一个新行,内容为##### 如果是参数i就是在第三行上

dc3b052ba2c940ee980198c11cb181fe.png

sed '/the/a #####' text.txt   #在包含the 的每行后插入一个新行,内容为 New

24f83edf0d484f45bc8d2d05f568d3b6.png

 sed '3a #####\n ######' text.txt //在第 3 行后插入多行内容,中间的\n 表示换行

cddf37d3c79c4f1d8496a0abdad7f9e1.png

五、使用脚本编辑文件

使用 sed 脚本将多个编辑指令存放到文件中(每行一条编辑指令),通过“-f”选项来调用。

6eb13abbb2e34ab2bae642ab2106f3a5.png
例如执行以下命令即可将第 1~5 行内容转移至第 14 行后,等同于sed ‘1,5{H;d};14G’ text.txt

181b533da31a4503b96887fbfb767c64.png

注意:以上除了查看固定多少行的内容,其他所有的操作加上"-i"选项,才能真正的对文本进行编辑,不然只能看到操作后的结果,并不能直接对文本能让修改。

就比如上面这个对文本内容的修改

我们进行完操作再看内容

93c78523cd5f4d6492748d4c20494548.png

是不变的

我们加上-i

 sed -f  sed.sh -i test.txt   

830dc61bf7294dcda2d63e8cffe73666.png

 总结

        sed是非常好用的一个文本编辑命令,可以让用户在写shell脚本时免交互,去对文本进行编辑操作,大大减少了人的操作量。需要好好学习

猜你喜欢

转载自blog.csdn.net/qq_57377057/article/details/126216920