Shell sed命令

时间:2022-07-24
本文章向大家介绍Shell sed命令,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

选项

 -e :直接在命令行模式上进行sed动作编辑,此为默认选项;
 -f :将sed的动作写在一个文件内,用–f filename 执行filename内的sed动作;
 -i :直接修改文件内容;
 -n :只打印模式匹配的行;
 -r :支持扩展表达式;
 -h或--help:显示帮助;
 -V或--version:显示版本信息。

sed常用命令

sed常用命令

a    在当前行下面插入文本
i    在当前行上面插入文本
c    把选定的行改为新的文本
d    删除,删除选择的行
D    删除模板块的第一行
s    替换指定字符
h    拷贝模板块的内容到内存中的缓冲区
H    追加模板块的内容到内存中的缓冲区
g    获得内存缓冲区的内容,并替代当前模板块中的文本
G    获得内存缓冲区的内容,并追加到当前模板块文本的后面
l    列表不能打印字符的清单
n    读取下一个输入行,用下一个命令处理新的行而不是用第一个命令
N    追加下一个输入行到模板块后面并在二者间嵌入一个新行,改变当前行号码
p    打印模板块的行。 P(大写) 打印模板块的第一行
q    退出Sed
b    lable 分支到脚本中带有标记的地方,如果分支不存在则分支到脚本的末尾
r    file 从file中读行
t    label if分支,从最后一行开始,条件一旦满足或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾
T    label 错误分支,从最后一行开始,一旦发生错误或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾
w     file 写并追加模板块到file末尾
W    file 写并追加模板块的第一行到file末尾
!    表示后面的命令对所有没有被选定的行发生作用
=    打印当前行号
#    把注释扩展到下一个换行符以前

sed替换标记

sed替换标记

g    表示行内全面替换
p    表示打印行
w    表示把行写入一个文件
x    表示互换模板块中的文本和缓冲区中的文本
y    表示把一个字符翻译为另外的字符(但是不用于正则表达式)
1    子串匹配标记
&    已匹配字符串标记

sed命令对文件进行增删改查操作

打印文件内容

[root@linux /]# cat xxx.txt
123456
654321
aaaaaa
bbbbbb
[root@linux /]# sed -n '1p' xxx.txt   #打印第1行
123456
[root@linux /]# sed -n '1,2p' xxx.txt   #打印第1 2行
123456
654321
[root@linux /]# sed -n '$p' xxx.txt  #打印最后1行
bbbbbb

增加文件内容 i 地址定位的上面插入 a 下面插入

[root@linux /]# cat xxx.txt|sed '1iaaaaa' xxx.txt   #文件第1行上一行增加内容
aaaaa
123456
654321
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed 'iccc' xxx.txt   #文件每行上一行增加内容
ccc
123456
ccc
654321
ccc
aaaaaa
ccc
bbbbbb
    
[root@linux /]# cat xxx.txt|sed 'axxx' xxx.txt   #文件每行下面增加内容
123456  
xxx
654321
xxx
aaaaaa
xxx
bbbbbb
xxx

[root@linux /]# cat xxx.txt|sed '$i22222' xxx.txt  #文件最后一行上一行增加内容
123456
654321
aaaaaa
22222
bbbbbb

修改文件内容 c 替换指定的整行内容

[root@linux /]# cat xxx.txt|sed '1c22222'  #替换文件第1行内容
22222
654321
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed 'c22222'  #替换文件所有内容
22222
22222
22222
22222
    
[root@linux /]# cat xxx.txt|sed '/^123456/c22222'  #替换以123456开头的行
22222
654321
aaaaaa
bbbbbb

删除文件内容

[root@linux /]# cat xxx.txt 
123456
654321
    
aaaaaa
bbbbbb
[root@linux /]# cat xxx.txt|sed '/^$/d'   #删除空白行
123456
654321
aaaaaa
bbbbbb

[root@linux /]# cat xxx.txt|sed '2,$d' #删除文件的第2行到末尾所有行
123456

[root@linux /]# cat xxx.txt|sed '1d'  #删除文件第一行
654321
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed '1,2d' #删除文件1到2行
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed '$d'  #删除文件最后一行
123456
654321
aaaaaa

对文件进行搜索替换操作

语法:sed 选项 's/搜索的内容/替换的内容/动作' 需要处理的文件 动作一般是打印p和全局替换g

[root@linux /]# cat xxx.txt 
123456123456
123456123456
454545454545
454545454545

[root@linux /]# cat xxx.txt|sed 's/123456/654321/'  #把123456替换成654321
654321123456
654321123456
454545454545
454545454545

替换所有 使用后缀 /g 标记会替换每一行中的所有匹配

[root@linux /]# cat xxx.txt|sed  's/123456/654321/g' 
654321654321
654321654321
454545454545
454545454545

当需要从第N处匹配开始替换时,可以使用 /Ng

[root@linux /]# cat xxx.txt|sed 's/aa/AA/2g'
aaAAAAAA
[root@linux /]# cat xxx.txt|sed 's/aa/AA/3g'
aaaaAAAA
[root@linux /]# cat xxx.txt|sed 's/aa/AA/4g'
aaaaaaAA

注释掉文件的1-5行内容

[root@linux /]# cat xxx.txt|sed -n '1,5s/^/#/p' 
#123456123456
#123456123456
#454545454545
#454545454545

定界符

以下命令中字符 / 在sed中作为定界符使用,也可以使用任意的定界符

sed 's:test:TEXT:g' 
sed 's|test|TEXT|g' 
sed 's#test#TEXT#g'

例子:

[root@linux /]# echo testtesttest|sed 's:test:TEXT:2g' 
testTEXTTEXT

定界符出现在样式内部时,需要进行转义

[root@linux /]# cat xxx.txt
/usr/local/
[root@linux /]# sed 's//usr/local///usr/bin//' xxx.txt 
/usr/bin/

使用sed用定界符分割字符串 : 用作分隔符进行分割

[root@linux /]# cat xxx.txt 
He:llo:wor:ld
[root@linux /]# cat He:llo:wor:ld|sed 's/:/n/g'
He
llo
wor
ld

已匹配字符串标记&

正则表达 w+ 匹配每一个单词,使用 [&] 替换它,& 对应于之前所匹配到的单词 命令中 digit 7,被替换成了 7。样式匹配到的子串是 7,(..) 用于匹配子串,对于匹配到的第一个子串就标记为 1,依此类推匹配到的第二个结果就是 2,例如

[root@linux /]# echo he llo wo rld|sed 's/w+/[&]/g'
[he] [llo] [wo] [rld]

所有以192.168.0.1开头的行都会被替换成它自已加localhost

[root@linux /]# cat xxx.txt 
192.168.0.1
192.168.0.1
192.168.0.0 
[root@linux /]# sed 's/^192.168.0.1/& localhost/' xxx.txt 
192.168.0.1 localhost
192.168.0.1 localhost
192.168.0.0 

子串匹配标记1

匹配给定样式的其中一部分

[root@linux /]# echo hello 2 world root|sed 's/hello ([0-9])/1/'
2 world root

命令中的hello,被替换成了2,样式匹配到的子串是2,(..) 用于匹配子串,对于匹配到的第一个子串就标记为1,依此类推匹配到的第二个结果就是2 例如:

[root@linux /]# echo AAA bbb|sed 's/([A-Z]+) ([a-z]+)/2 1/'
bbb AAA

Hello被标记为1,所有HelloAA会被替换成Hellobb,并打印出来:

[root@linux /]# cat xxx.txt 
HelloAA
HelloAA
[root@linux /]# sed -n 's/(Hello)AA/1bb/p' xxx.txt 
Hellobb
Hellobb

选定行的范围:,逗号

所有在test和TEST所确定的范围内的行都被打印

[root@linux /]# cat xxx.txt 
0000
test
1111
2222
TEST
[root@linux /]# sed -n '/test/,/TEST/p' xxx.txt 
test
1111
2222
TEST

打印从第2行开始到第一个包含以test开始的行之间的所有行:

[root@linux /]# sed -n '2,/^2222/p' xxx.txt 
test
1111
2222

多点编辑:e命令

-e选项允许在同一行里执行多条命令 命令的执行顺序对结果有影响

[root@linux /]# cat xxx.txt 
11111
22222
33333
44444
test
[root@linux /]# sed -e '1,2d' -e 's/test/TEST/' xxx.txt 
33333
44444
TEST

和 -e 等价的命令是 --expression

[root@linux /]# sed --expression='1,2d' --expression='s/test/TEST/' xxx.txt 
33333
44444
TEST

从文件读入:r命令

[root@linux /]# cat xxx.txt
#######
[root@linux /]# cat xx.txt 
22222
[root@linux /]# sed '/22222/r xxx.txt' xx.txt 
22222
#######

写入文件:w命令

[root@linux /]# cat xx.txt 
test123
222
test456
222
[root@linux /]# sed -n '/test/w xxx.txt' /xx.txt 
[root@linux /]# cat xxx.txt 
test123
test456

追加 行下:a命令

将Hello world追加到 以test开头的行后面

[root@linux /]# cat xxx.txt 
test123
2222222
[root@linux /]# sed '/^test/aHello world' xxx.txt 
test123
Hello world
2222222

在第1行之后插入hello world

[root@linux /]# sed -i '1ahello world' xxx.txt 
[root@linux /]# cat xxx.txt 
test123
hello world
2222222

追加 行上: i命令

将TEST追加到以test开头的行前面

[root@linux /]# sed '/^test/iTEST' xxx.txt 
TEST
test123
2222222

在第5行之前插入TEST

[root@linux /]# sed '2iTEST' xxx.txt 
test123
TEST
2222222

下一个:n命令

如果test被匹配,则移动到匹配行的下一行,替换这一行的aa,变为bb,并打印该行,然后继续

[root@linux /]# cat xxx.txt 
test
aa
222
[root@linux /]# sed '/test/{ n; s/aa/bb/; }' xxx.txt 
test
bb
222

变形:y命令

把1-10行内所有abcde转变为大写

[root@linux /]# cat xxx.txt 
abcde
22222
abcde
[root@linux /]# sed '1,10y/abcde/ABCDE/' xxx.txt 
ABCDE
22222
ABCDE

打印奇数行或偶数行

方法1:

sed -n 'p;n' xxx.txt  #奇数行 
sed -n 'n;p' xxx.txt  #偶数行 

方法2:

sed -n '1~2p' xxx.txt  #奇数行 
sed -n '2~2p' xxx.txt  #偶数行 

打印匹配字符串的下一行

grep -A 1 test xxx.txt   #grep方法
sed -n '/test/{n;p}' xxx.txt   #sed方法
awk '/test/{getline; print}' xxx.txt   #awk方法

综合练习

删除文件里面所有注释的行及空行
[root@linux /]# sed -e '/^#/d' -e '/^$/d' /etc/selinux/config
[root@linux /]# sed -r '/^#|^$/d' /etc/selinux/config
[root@linux /]# sed '/^#/d;/^$/d' /etc/selinux/config

文件注释
[root@linux /]# sed -n 's/^root/#&/p' /etc/passwd  #注释掉以root开头的行
[root@linux /]# sed -n 's/^#//p' /etc/passwd   #取消注释
[root@linux /]# sed -n '1,5s/^/#/p' /etc/passwd     #注释1~5行
[root@linux /]# sed -n -r 's/^root|^mysql/#&/p' /etc/passwd  #注释掉以root开头或者以mysql开头的行

获取网卡信息
[root@linux /]# ifconfig eth0|sed -n 's/.*inet (.*)netmask.*/1/p'  #获取eth0网卡IP
[root@linux /]# ifconfig eth0|sed -n 's/.*inet (.*)netmask (.*)broadcast (.*)/1n2n3/p' #获取ip地址.广播地址.子网掩码