Linux-sed命令详解
Linux sed命令详解
sed是⼀种流编辑器,它是⽂本处理中⾮常好的⼯具,能够完美的配合正则表达式使⽤,功能不同凡响。处理时,把当前处理的⾏存储在临时缓冲区中,称为“模式空间”(pattern space),接着⽤sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下⼀⾏,这样不断重复,直到⽂件末尾。⽂件内容并没有改变,除⾮你使⽤重定向存储输出。Sed主要⽤来⾃动编辑⼀个或多个⽂件,可以将数据⾏进⾏替换、删除、新增、选取等特定⼯作,简化对⽂件的反复操作,编写转换程序等。
sed的选项、命令、替换标记
命令格式
sed的命令格式:sed [options] 'command' file(s);
正则匹配多行sed的脚本格式:sed [options] -f scriptfile file(s);
选项
-e :直接在命令⾏模式上进⾏sed动作编辑,此为默认选项;
-f :将sed的动作写在⼀个⽂件内,⽤–f filename 执⾏filename内的sed动作;
-i :直接修改⽂件内容;
-n :只打印模式匹配的⾏;
-r :⽀持扩展表达式;
-h或--help:显⽰帮助;
-V或--version:显⽰版本信息。
参数
⽂件:指定待处理的⽂本⽂件列表。
sed常⽤命令
命令说明
a\在当前⾏下⾯插⼊⽂本;
i\在当前⾏上⾯插⼊⽂本;
c\把选定的⾏改为新的⽂本;
d删除,删除选择的⾏;
D删除模板块的第⼀⾏;
s替换指定字符;
h拷贝模板块的内容到内存中的缓冲区;
H追加模板块的内容到内存中的缓冲区;
g获得内存缓冲区的内容,并替代当前模板块中的⽂本;
G获得内存缓冲区的内容,并追加到当前模板块⽂本的后⾯;
l列表不能打印字符的清单;
n读取下⼀个输⼊⾏,⽤下⼀个命令处理新的⾏⽽不是⽤第⼀个命令;
N追加下⼀个输⼊⾏到模板块后⾯并在⼆者间嵌⼊⼀个新⾏,改变当前⾏号码;
p打印模板块的⾏。 P(⼤写) 打印模板块的第⼀⾏;
q退出Sed;
b lable 分⽀到脚本中带有标记的地⽅,如果分⽀不存在则分⽀到脚本的末尾;
r file 从file中读⾏;
t label if分⽀,从最后⼀⾏开始,条件⼀旦满⾜或者T,t命令,将导致分⽀到带有标号的命令处,或者到脚本的末尾;
T label 错误分⽀,从最后⼀⾏开始,⼀旦发⽣错误或者T,t命令,将导致分⽀到带有标号的命令处,或者到脚本的末尾;
w file 写并追加模板块到file末尾;
W file 写并追加模板块的第⼀⾏到file末尾;
!表⽰后⾯的命令对所有没有被选定的⾏发⽣作⽤;
=打印当前⾏号;
#把注释扩展到下⼀个换⾏符以前;
sed替换标记
命令说明
g表⽰⾏内全⾯替换;
p表⽰打印⾏;
w表⽰把⾏写⼊⼀个⽂件;
w表⽰把⾏写⼊⼀个⽂件;
x表⽰互换模板块中的⽂本和缓冲区中的⽂本;
y表⽰把⼀个字符翻译为另外的字符(但是不⽤于正则表达式);
\1⼦串匹配标记;
&已匹配字符串标记;
sed元字符集
字符集说明
^匹配⾏开始,如:/^sed/匹配所有以sed开头的⾏;
$匹配⾏结束,如:/sed$/匹配所有以sed结尾的⾏;
.匹配⼀个⾮换⾏符的任意字符,如:/s.d/匹配s后接⼀个任意字符,最后是d;
*匹配0个或多个字符,如:/*sed/匹配所有模板是⼀个或多个空格后紧跟sed的⾏;
[]匹配⼀个指定范围内的字符,如/[ss]ed/匹配sed和Sed;
[^]匹配⼀个不在指定范围内的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的⼀个字母开头,紧跟ed的⾏; \(..\)匹配⼦串,保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers;
&保存搜索字符⽤来替换其他字符,如s/love/**&**/,love这成**love**;
\<;匹配单词的开始,如:/\
\>匹配单词的结束,如/love\>/匹配包含以love结尾的单词的⾏;
x\{m\}重复字符x,m次,如:/0\{5\}/匹配包含5个0的⾏;
x\{m,\}重复字符x,⾄少m次,如:/0\{5,\}/匹配⾄少有5个0的⾏;
x\{m,n\}重复字符x,⾄少m次,不多于n次,如:/0\{5,10\}/匹配5~10个0的⾏;
sed实例
替换操作:S命令
替换⽂本中的字符串
sed 's/book/books/' file
-n选项和p命令⼀起使⽤表⽰只打印那些发⽣替换的⾏
sed -n 's/test/TEST/p' file
直接编辑⽂件选项-i,会匹配file⽂件中每⼀⾏的第⼀个book替换为books
sed -i 's/book/books/g' file
全⾯替换标记g
使⽤后缀 /g 标记会替换每⼀⾏中的所有匹配
sed 's/book/books/g' file
当需要从第N处匹配开始替换时,可以使⽤ /Ng
echo sksksksksksk | sed 's/sk/SK/2g'
skSKSKSKSKSK
echo sksksksksksk | sed 's/sk/SK/3g'
skskSKSKSKSK
echo sksksksksksk | sed 's/sk/SK/4g'
skskskSKSKSK
定界符
以上命令中字符 / 在sed中作为定界符使⽤,也可以使⽤任意的定界符
sed 's:test:TEXT:g'
sed 's|test|TEXT|g'
sed 's#test#TEXT#g'
定界符出现在样式内部时,需要进⾏转义
sed 's/\/bin/\/usr\/local\/bin/g'
删除操作:d命令
删除空⽩⾏
sed '/^$/d' file
删除⽂件的第2⾏
sed '2d' file
删除⽂件的第2⾏到末尾所有⾏
sed '2,$d' file
删除⽂件最后⼀⾏
sed '$d' file
删除⽂件中所有开头是test的⾏
sed '/^test/'d file
已匹配字符串标记&
正则表达式 \w\+ 匹配每⼀个单词,使⽤ [&] 替换它,& 对应于之前所匹配到的单词
echo this is a test line | sed 's/\w\+/[&]/g'
[this] [is] [a] [test] [line]
所有以192.168.0.1开头的⾏都会被替换成它⾃已加localhost
sed 's/^192.168.0.1/&localhost/' file 192.168.0.1localhost
⼦串匹配标记\1
匹配给定样式的其中⼀部分
echo this is digit 7 in a number | sed 's/digit \([0-9]\)/\1/'
this is 7 in a number
命令中 digit 7,被替换成了 7。样式匹配到的⼦串是 7,\(..\) ⽤于匹配⼦串,对于匹配到的第⼀个⼦串就标记为 \1,依此类推匹配到的第⼆个结果就是 \2,例如:
echo aaa BBB | sed 's/\([a-z]\+\) \([A-Z]\+\)/\2 \1/'
BBB aaa
love被标记为1,所有loveable会被替换成lovers,并打印出来:
sed -n 's/\(love\)able/\1rs/p' file
组合多个表达式
sed '表达式' | sed '表达式'  等价于:
sed '表达式; 表达式'
引⽤
sed表达式可以使⽤单引号来引⽤,但是如果表达式内部包含变量字符串,就需要使⽤双引号
test=hello
echo hello WORLD | sed "s/$test/HELLO"
HELLO WORLD
选定⾏的范围:,(逗号)
所有在模板test和check所确定的范围内的⾏都被打印:
sed -n '/test/,/check/p' file
打印从第5⾏开始到第⼀个包含以test开始的⾏之间的所有⾏:
sed -n '5,/^test/p' file
对于模板test和west之间的⾏,每⾏的末尾⽤字符串aaa bbb替换:
sed '/test/,/west/s/$/aaa bbb/' file
多点编辑:e命令
-e选项允许在同⼀⾏⾥执⾏多条命令
sed -e '1,5d' -e 's/test/check/' file
上⾯sed表达式的第⼀条命令删除1⾄5⾏,第⼆条命令⽤check替换test。命令的执⾏顺序对结果有影响。如果两个命令都是替换命令,那么第⼀个替换命令将影响第⼆个替换命令的结果。
和 -e 等价的命令是 --expression
sed --expression='s/test/check/' --expression='/love/d' file
从⽂件读⼊:r命令
file⾥的内容被读进来,显⽰在与test匹配的⾏后⾯,如果匹配多⾏,则file的内容将显⽰在所有匹配⾏的下⾯
sed '/test/r file' filename
写⼊⽂件:w命令
在example中所有包含test的⾏都被写⼊file⾥
sed -n '/test/w file' example
追加(⾏下):a\命令
将 this is a test line 追加到以test 开头的⾏后⾯
sed '/^test/a\this is a test line' file
在 f ⽂件第2⾏之后插⼊ this is a test line
sed -i '2a\this is a test line' f
插⼊(⾏上)
i\命令将 this is a test line 追加到以test开头的⾏前⾯
sed '/^test/i\this is a test line' file
在f⽂件第5⾏之前插⼊this is a test line
sed -i '5i\this is a test line' f
下⼀个:n命令
如果test被匹配,则移动到匹配⾏的下⼀⾏,替换这⼀⾏的aa,变为bb,并打印该⾏,然后继续
sed '/test/{ n; s/aa/bb/; }' file
变形:y命令
把1~10⾏内所有abcde转变为⼤写,注意,正则表达式元字符不能使⽤这个命令
sed '1,10y/abcde/ABCDE/' file
退出:q命令
打印完第10⾏后,退出sed sed '10q' file 保持和获取:h命令和G命令在sed处理⽂件的时候,每⼀⾏都被保存在⼀个叫模
式空间的临时缓冲区中,除⾮⾏被删除或者输出被取消,否则所有被处理的⾏都将打印在屏幕上。接着模式空间被清空,并存⼊新的⼀⾏等待处理。
sed -e '/test/h' -e '$G' file
在这个例⼦⾥,匹配test的⾏被到后,将存⼊模式空间,h命令将其复制并存⼊⼀个称为保持缓存区的特殊缓冲区内。第⼆条语句的意思是,当到达最后⼀⾏后,G命令取出保持缓冲区的⾏,然后把它放回模式空间中,且追加到现在已经存在于模式空间中的⾏的末尾。在这个例⼦中就是追加到最后⼀⾏。简单来说,任何包含test的⾏都被复制并追加到该⽂件的末尾
保持和互换:h命令和x命令
互换模式空间和保持缓冲区的内容。也就是把包含test与check的⾏互换
sed -e '/test/h' -e '/check/x' file
脚本scriptfile
sed脚本是⼀个sed的命令清单,启动Sed时以-f选项引导脚本⽂件名。Sed对于脚本中输⼊的命令⾮常挑剔,在命令的末尾不能有任何空⽩或⽂本,如果在⼀⾏中有多个命令,要⽤分号分隔。以#开头的⾏为注释⾏,且不能跨⾏。
sed [options] -f scriptfile file(s)
打印奇数⾏或偶数⾏
⽅法1:
sed -n 'p;n'   #奇数⾏
sed -n 'n;p'   #偶数⾏
⽅法2:
sed -n '1~2p'   #奇数⾏
sed -n '2~2p'   #偶数⾏
打印匹配字符串的下⼀⾏
grep -A 1   // grep⽅法
sed -n '/I/{n;p}'   // sed⽅法
awk '/Is/{getline; print}'   // awk⽅法
综合练习
综合练习
copy⼀份/etc/passwd⽂件练习
[root@centos7-1 ~]# cp /etc/passwd ./
[root@centos7-1 ~]# sed -n 's/^root/#&/p' passwd          // 注释掉以root开头的⾏
[root@centos7-1 ~]# sed -n -r 's/^root|^ntp/#&/p' passwd  // 注释掉以root开头或者以ntp开头的⾏
[root@centos7-1 ~]# sed -n '1,5s/^[a-z].*/#&/p' passwd    // 注释掉1~5⾏中以任意⼩写字母开头的⾏
[root@centos7-1 ~]# sed -n '1,5s/^/#/p' passwd            // 注释1~5⾏
[root@centos7-1 ~]# sed -n 's/^/#/p' passwd              // 快速注释⼀个⽂件
[root@centos7-1 ~]# sed -n 's/^#//p' passwd              // 快速取消注释
[root@centos7-1 ~]# sed -n '1,5s/[0-9:/]//gp' passwd      // 去掉⽂件1-5⾏中的数字、冒号、斜杠
或者:
[root@centos7-1 ~]# sed -n '1,5s/[^a-Z]//gp' passwd
[root@centos7-1 ~]# sed -n 's/[0-9]/#/pg' passwd          // 打印匹配将任意数字替换#
[root@centos7-1 ~]# sed -n 's/[0-9]/\t/pg' passwd        // 打印匹配将任意数字替换成制表符
# 删除f配置⽂件⾥⾯所有注释的⾏及空⾏
[root@centos7-1 ~]# sed -e '/^#/d' -e '/^$/d' /etc/f
或者:
[root@centos7-1 ~]# sed -r '/^#|^$/d' /etc/f
或者:
[root@centos7-1 ~]# sed '/^#/d;/^$/d' /etc/f
# 使⽤sed命令截取ip地址
centos7系统
[root@centos7-1 ~]# ifconfig eth0 |sed -n 's#.*inet \(.*\)netmask.*#\1#p'              // ⽅法⼀
[root@centos7-1 ~]# ifconfig eth0 |sed -n '2p' |sed -n 's/.*inet \(.*\)netmask.*/\1/p' // ⽅法⼆
centos6系统
[root@centos6-1 ~]# ifconfig em1 |sed -n 's#.*addr:\(.*\)Bcast.*#\1#p'                // ⽅法⼀
[root@centos6-1 ~]# ifconfig em1 |sed -n '2p' |sed -n 's/.*addr:\(.*\)Bcast.*/\1/p'    // ⽅法⼆
# 使⽤sed命令⼀次性截取ip地址、⼴播地址、⼦⽹掩码
[root@centos7-1 ~]# ifconfig eth0 |sed -n 's#.*inet \(.*\)netmask \(.*\)broadcast \(.*\)#\1\n\2\n\3#p'
[root@centos7-1 ~]# ifconfig eth0 |sed -n 's#.*inet \(.*\)netmask \(.*\)broadcast \(.*\)#IP地址:\1\n⼴播地址:\2\n⼦⽹掩码:\3#p' [root@centos6-1 ~]# ifconfig em1 |sed -n 's#.*addr:\(.*\)Bcast:\(.*\)Mask:\(.*\)#\1\n\2\n\3#p'

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。