文章/答案/技术大牛

发布

社区首页 >专栏 >Shell sed命令

Shell sed命令

剧终

发布于 2020-08-26 15:15:14

1.5K00

代码可运行

文章被收录于专栏：Linux学习日志Linux学习日志

运行总次数：0

代码可运行

选项

 -e ：直接在命令行模式上进行sed动作编辑，此为默认选项;
 -f ：将sed的动作写在一个文件内，用–f filename 执行filename内的sed动作;
 -i ：直接修改文件内容;
 -n ：只打印模式匹配的行；
 -r ：支持扩展表达式;
 -h或--help：显示帮助；
 -V或--version：显示版本信息。

sed常用命令

a\    在当前行下面插入文本
i\    在当前行上面插入文本
c\    把选定的行改为新的文本
d    删除，删除选择的行
D    删除模板块的第一行
s    替换指定字符
h    拷贝模板块的内容到内存中的缓冲区
H    追加模板块的内容到内存中的缓冲区
g    获得内存缓冲区的内容，并替代当前模板块中的文本
G    获得内存缓冲区的内容，并追加到当前模板块文本的后面
l    列表不能打印字符的清单
n    读取下一个输入行，用下一个命令处理新的行而不是用第一个命令
N    追加下一个输入行到模板块后面并在二者间嵌入一个新行，改变当前行号码
p    打印模板块的行。 P(大写) 打印模板块的第一行
q    退出Sed
b    lable 分支到脚本中带有标记的地方，如果分支不存在则分支到脚本的末尾
r    file 从file中读行
t    label if分支，从最后一行开始，条件一旦满足或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾
T    label 错误分支，从最后一行开始，一旦发生错误或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾
w     file 写并追加模板块到file末尾
W    file 写并追加模板块的第一行到file末尾
!    表示后面的命令对所有没有被选定的行发生作用
=    打印当前行号
#    把注释扩展到下一个换行符以前

sed替换标记

g    表示行内全面替换
p    表示打印行
w    表示把行写入一个文件
x    表示互换模板块中的文本和缓冲区中的文本
y    表示把一个字符翻译为另外的字符（但是不用于正则表达式）
\1    子串匹配标记
&    已匹配字符串标记

sed命令对文件进行增删改查操作

打印文件内容

[root@linux /]# cat xxx.txt
123456
654321
aaaaaa
bbbbbb
[root@linux /]# sed -n '1p' xxx.txt   #打印第1行
123456
[root@linux /]# sed -n '1,2p' xxx.txt   #打印第1 2行
123456
654321
[root@linux /]# sed -n '$p' xxx.txt  #打印最后1行
bbbbbb

增加文件内容 i 地址定位的上面插入 a 下面插入

[root@linux /]# cat xxx.txt|sed '1iaaaaa' xxx.txt   #文件第1行上一行增加内容
aaaaa
123456
654321
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed 'iccc' xxx.txt   #文件每行上一行增加内容
ccc
123456
ccc
654321
ccc
aaaaaa
ccc
bbbbbb
    
[root@linux /]# cat xxx.txt|sed 'axxx' xxx.txt   #文件每行下面增加内容
123456  
xxx
654321
xxx
aaaaaa
xxx
bbbbbb
xxx

[root@linux /]# cat xxx.txt|sed '$i22222' xxx.txt  #文件最后一行上一行增加内容
123456
654321
aaaaaa
22222
bbbbbb

修改文件内容 c 替换指定的整行内容

[root@linux /]# cat xxx.txt|sed '1c22222'  #替换文件第1行内容
22222
654321
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed 'c22222'  #替换文件所有内容
22222
22222
22222
22222
    
[root@linux /]# cat xxx.txt|sed '/^123456/c22222'  #替换以123456开头的行
22222
654321
aaaaaa
bbbbbb

删除文件内容

[root@linux /]# cat xxx.txt 
123456
654321
    
aaaaaa
bbbbbb
[root@linux /]# cat xxx.txt|sed '/^$/d'   #删除空白行
123456
654321
aaaaaa
bbbbbb

[root@linux /]# cat xxx.txt|sed '2,$d' #删除文件的第2行到末尾所有行
123456

[root@linux /]# cat xxx.txt|sed '1d'  #删除文件第一行
654321
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed '1,2d' #删除文件1到2行
aaaaaa
bbbbbb
    
[root@linux /]# cat xxx.txt|sed '$d'  #删除文件最后一行
123456
654321
aaaaaa

对文件进行搜索替换操作

语法：sed 选项 's/搜索的内容/替换的内容/动作' 需要处理的文件动作一般是打印p和全局替换g

[root@linux /]# cat xxx.txt 
123456123456
123456123456
454545454545
454545454545

[root@linux /]# cat xxx.txt|sed 's/123456/654321/'  #把123456替换成654321
654321123456
654321123456
454545454545
454545454545

替换所有 使用后缀 /g 标记会替换每一行中的所有匹配

[root@linux /]# cat xxx.txt|sed  's/123456/654321/g' 
654321654321
654321654321
454545454545
454545454545

当需要从第N处匹配开始替换时，可以使用 /Ng

[root@linux /]# cat xxx.txt|sed 's/aa/AA/2g'
aaAAAAAA
[root@linux /]# cat xxx.txt|sed 's/aa/AA/3g'
aaaaAAAA
[root@linux /]# cat xxx.txt|sed 's/aa/AA/4g'
aaaaaaAA

注释掉文件的1-5行内容

[root@linux /]# cat xxx.txt|sed -n '1,5s/^/#/p' 
#123456123456
#123456123456
#454545454545
#454545454545

定界符

以下命令中字符 / 在sed中作为定界符使用，也可以使用任意的定界符

sed 's:test:TEXT:g' 
sed 's|test|TEXT|g' 
sed 's#test#TEXT#g'

例子:

[root@linux /]# echo testtesttest|sed 's:test:TEXT:2g' 
testTEXTTEXT

定界符出现在样式内部时，需要进行转义

[root@linux /]# cat xxx.txt
/usr/local/
[root@linux /]# sed 's/\/usr\/local\//\/usr\/bin\//' xxx.txt 
/usr/bin/

使用sed用定界符分割字符串 : 用作分隔符进行分割

[root@linux /]# cat xxx.txt 
He:llo:wor:ld
[root@linux /]# cat He:llo:wor:ld|sed 's/:/\n/g'
He
llo
wor
ld

已匹配字符串标记&

正则表达 w+ 匹配每一个单词，使用 [&] 替换它，& 对应于之前所匹配到的单词命令中 digit 7，被替换成了 7。样式匹配到的子串是 7，(..) 用于匹配子串，对于匹配到的第一个子串就标记为 1，依此类推匹配到的第二个结果就是 2，例如

[root@linux /]# echo he llo wo rld|sed 's/\w\+/[&]/g'
[he] [llo] [wo] [rld]

所有以192.168.0.1开头的行都会被替换成它自已加localhost

[root@linux /]# cat xxx.txt 
192.168.0.1
192.168.0.1
192.168.0.0 
[root@linux /]# sed 's/^192.168.0.1/& localhost/' xxx.txt 
192.168.0.1 localhost
192.168.0.1 localhost
192.168.0.0

子串匹配标记\1

匹配给定样式的其中一部分

[root@linux /]# echo hello 2 world root|sed 's/hello \([0-9]\)/\1/'
2 world root

命令中的hello，被替换成了2,样式匹配到的子串是2,\(..\) 用于匹配子串,对于匹配到的第一个子串就标记为\1，依此类推匹配到的第二个结果就是\2 例如：

[root@linux /]# echo AAA bbb|sed 's/\([A-Z]\+\) \([a-z]\+\)/\2 \1/'
bbb AAA

Hello被标记为1，所有HelloAA会被替换成Hellobb，并打印出来：

[root@linux /]# cat xxx.txt 
HelloAA
HelloAA
[root@linux /]# sed -n 's/\(Hello\)AA/\1bb/p' xxx.txt 
Hellobb
Hellobb

选定行的范围：,逗号

所有在test和TEST所确定的范围内的行都被打印

[root@linux /]# cat xxx.txt 
0000
test
1111
2222
TEST
[root@linux /]# sed -n '/test/,/TEST/p' xxx.txt 
test
1111
2222
TEST

打印从第2行开始到第一个包含以test开始的行之间的所有行：

[root@linux /]# sed -n '2,/^2222/p' xxx.txt 
test
1111
2222

多点编辑：e命令

-e选项允许在同一行里执行多条命令命令的执行顺序对结果有影响

[root@linux /]# cat xxx.txt 
11111
22222
33333
44444
test
[root@linux /]# sed -e '1,2d' -e 's/test/TEST/' xxx.txt 
33333
44444
TEST

和 -e 等价的命令是 --expression

[root@linux /]# sed --expression='1,2d' --expression='s/test/TEST/' xxx.txt 
33333
44444
TEST

从文件读入：r命令

[root@linux /]# cat xxx.txt
#######
[root@linux /]# cat xx.txt 
22222
[root@linux /]# sed '/22222/r xxx.txt' xx.txt 
22222
#######

写入文件：w命令

[root@linux /]# cat xx.txt 
test123
222
test456
222
[root@linux /]# sed -n '/test/w xxx.txt' /xx.txt 
[root@linux /]# cat xxx.txt 
test123
test456

追加行下：a\命令

将Hello world追加到以test开头的行后面

[root@linux /]# cat xxx.txt 
test123
2222222
[root@linux /]# sed '/^test/a\Hello world' xxx.txt 
test123
Hello world
2222222

在第1行之后插入hello world

[root@linux /]# sed -i '1a\hello world' xxx.txt 
[root@linux /]# cat xxx.txt 
test123
hello world
2222222

追加行上: i\命令

将TEST追加到以test开头的行前面

[root@linux /]# sed '/^test/i\TEST' xxx.txt 
TEST
test123
2222222

在第5行之前插入TEST

[root@linux /]# sed '2i\TEST' xxx.txt 
test123
TEST
2222222

下一个：n命令

如果test被匹配，则移动到匹配行的下一行，替换这一行的aa，变为bb，并打印该行，然后继续

[root@linux /]# cat xxx.txt 
test
aa
222
[root@linux /]# sed '/test/{ n; s/aa/bb/; }' xxx.txt 
test
bb
222

变形：y命令

把1-10行内所有abcde转变为大写

[root@linux /]# cat xxx.txt 
abcde
22222
abcde
[root@linux /]# sed '1,10y/abcde/ABCDE/' xxx.txt 
ABCDE
22222
ABCDE

打印奇数行或偶数行

方法1：

sed -n 'p;n' xxx.txt  #奇数行 
sed -n 'n;p' xxx.txt  #偶数行

方法2：

sed -n '1~2p' xxx.txt  #奇数行 
sed -n '2~2p' xxx.txt  #偶数行

打印匹配字符串的下一行

grep -A 1 test xxx.txt   #grep方法
sed -n '/test/{n;p}' xxx.txt   #sed方法
awk '/test/{getline; print}' xxx.txt   #awk方法

综合练习

删除文件里面所有注释的行及空行
[root@linux /]# sed -e '/^#/d' -e '/^$/d' /etc/selinux/config
[root@linux /]# sed -r '/^#|^$/d' /etc/selinux/config
[root@linux /]# sed '/^#/d;/^$/d' /etc/selinux/config

文件注释
[root@linux /]# sed -n 's/^root/#&/p' /etc/passwd  #注释掉以root开头的行
[root@linux /]# sed -n 's/^#//p' /etc/passwd   #取消注释
[root@linux /]# sed -n '1,5s/^/#/p' /etc/passwd     #注释1~5行
[root@linux /]# sed -n -r 's/^root|^mysql/#&/p' /etc/passwd  #注释掉以root开头或者以mysql开头的行

获取网卡信息
[root@linux /]# ifconfig eth0|sed -n 's/.*inet \(.*\)netmask.*/\1/p'  #获取eth0网卡IP
[root@linux /]# ifconfig eth0|sed -n 's/.*inet \(.*\)netmask \(.*\)broadcast \(.*\)/\1\n\2\n\3/p' #获取ip地址.广播地址.子网掩码