Linux流编辑器之sed详解

23312

流编辑器:

功能:作为文本编辑三剑客来说，sed的优势主要在文本的替换。

格式：sed [OPTION]...  'script'  [input-file] ...
    script：地址定界编辑命令
[注意]：默认情况下输出模式空间的内容到屏幕
常用选项：
[事例文件]

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20

[iyunv@linus ~]#cp /etc/fstab ./ [iyunv@linus ~]# cat fstab # # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   /dev/shm                tmpfs   defaults        0 0 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 sysfs                   /sys                    sysfs   defaults        0 0 proc                    /proc                   proc    defaults        0 0 [iyunv@linus ~]#

    -n, --quiet, --silent：不输出模式空间中的内容至屏幕；

1 2	[iyunv@linus ~]# sed -n '1,2d' fstab [iyunv@linus ~]#

    -e script, --expression=script：添加"脚本"到程序的运行列表

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17

[iyunv@linus ~]# sed -e '1,2d' fstab # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   /dev/shm                tmpfs   defaults        0 0 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 sysfs                   /sys                    sysfs   defaults        0 0 proc                    /proc                   proc    defaults        0 0 [iyunv@linus ~]#

    -f --file=script-file添加"脚本文件"到程序的运行列表，每行一个编辑命令；
    -r, --regexp-extended：支持使用扩展正则表达式；

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16

[iyunv@linus ~]# sed -r '1,$' -e '/^\/dev/d' fstab sed: can't read 1,$: No such file or directory # # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 tmpfs                   /dev/shm                tmpfs   defaults        0 0 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 sysfs                   /sys                    sysfs   defaults        0 0 proc                    /proc                   proc    defaults        0 0 [iyunv@linus ~]#

    -i[SUFFIX], --in-place[=SUFFIX]：直接编辑原文件(如果指定扩展名就备份文件)；

1 2 3 4 5 6 7 8 9 10 11 12 13 14

[iyunv@linus ~]# sed -i '2a \\n这是一个新行' fstab [iyunv@linus ~]# cat fstab # 这是一个新行 # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2

    --follow-symlinks:直接修改文件时跟随软链接
地址定界：
(1) 空地址：对全文进行处理；

1 2 3 4 5 6 7 8

[iyunv@linus ~]# sed -r '/[[:space:]]/d' fstab # 这是一个新行 # # [iyunv@linus ~]#

(2) 单地址：
        #：指定行；

1 2 3 4 5 6 7

[iyunv@linus ~]# sed '1a \niahao' fstab niahao # 这是一个新行 # /etc/fstab

        /pattern/：被此模式所匹配到的每一行；

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28

[iyunv@linus ~]# sed '/\dev\//a \这是匹配的行' fstab # 这是一个新行 # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # # Accessible filesystems, by reference, are maintained under '/dev/disk' 这是匹配的行 # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 这是匹配的行 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 这是匹配的行 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 这是匹配的行 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 这是匹配的行 tmpfs                   /dev/shm                tmpfs   defaults        0 0 这是匹配的行 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 这是匹配的行 sysfs                   /sys                    sysfs   defaults        0 0 proc                    /proc                   proc    defaults        0 0 [iyunv@linus ~]#

(3) 地址范围

#,#1：表示的是第#行到第#1行

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15

[iyunv@linus ~]# sed '4,6d' fstab # # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   /dev/shm                tmpfs   defaults        0 0 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0

#,+num：表示的是第#行到#行后几行

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16

[iyunv@linus ~]# sed '2,+4d' fstab # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   /dev/shm                tmpfs   defaults        0 0 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 sysfs                   /sys                    sysfs   defaults        0 0 proc                    /proc                   proc    defaults        0 0 [iyunv@linus ~]#

#，/pat1/：表示的是第#行到匹配到part1的那一行

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23

[iyunv@linus ~]# sed '18,/\/dev$/a \nihao' fstab # 这是一个新行 # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   /dev/shm                tmpfs   defaults        0 0 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 sysfs                   /sys                    sysfs   defaults        0 0 nihao proc                    /proc                   proc    defaults        0 0 nihao [iyunv@linus ~]#

/pat1/,/pat2/：表示的是匹配到part1的行开始到匹配到part2的那一行

$:表示的是最后一行，可以认为是最大行，比如：$-1代表的是倒数第二行

1 2 3

[iyunv@linus ~]# sed '2,$d' fstab [iyunv@linus ~]#

(4) 步进：~
    1~2：所有奇数行

1	[iyunv@linus ~]# sed '1~2a \niahp' fstab

    2~2：所有偶数行

1	[iyunv@linus ~]# sed '2~2a \niahp' fstab

编辑命令：
d：删除；
p：显示模式空间中的内容；

1 2 3 4 5 6 7 8 9

[iyunv@linus ~]# sed -n 's/\/dev\//#/p' fstab # Accessible filesystems, by reference, are maintained under '#disk' #mapper/vg0-root    /                       ext4    defaults        1 1 #mapper/vg0-usr     /usr                    ext4    defaults        1 2 #mapper/vg0-var     /var                    ext4    defaults        1 2 #mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   #shm                tmpfs   defaults        0 0 devpts                  #pts                devpts  gid=5,mode=620  0 0 [iyunv@linus ~]#

a  \text：在行后面追加文本“text”，支持使用\n实现多行追加；
i  \text：在行前面插入文本“text”，支持使用\n实现多行插入；
c  \text：把匹配到的行替换为此处指定的文本“text”；
w /PATH/TO/SOMEFILE：保存模式空间匹配到的行至指定的文件中；

1 2 3 4 5 6 7 8 9 10

[iyunv@linus ~]# sed -n 's/\/dev\//#/w ./save.txt' fstab [iyunv@linus ~]# cat save.txt # Accessible filesystems, by reference, are maintained under '#disk' #mapper/vg0-root    /                       ext4    defaults        1 1 #mapper/vg0-usr     /usr                    ext4    defaults        1 2 #mapper/vg0-var     /var                    ext4    defaults        1 2 #mapper/vg0-swap    swap                    swap    defaults        0 0 tmpfs                   #shm                tmpfs   defaults        0 0 devpts                  #pts                devpts  gid=5,mode=620  0 0 [iyunv@linus ~]#

r  /PATH/FROM/SOMEFILE：读取指定文件的内容至当前文件被模式匹配到的行后面；文件合并；

1 2 3 4 5 6 7 8 9

[iyunv@linus ~]# sed '2r /etc/passwd' fstab # root:x:0:0:root:/root:/bin/bash bin:x:1:1:bin:/bin:/sbin/nologin daemon:x:2:2:daemon:/sbin:/sbin/nologin adm:x:3:4:adm:/var/adm:/sbin/nologin lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin sync:x:5:0:sync:/sbin:/bin/sync

=：为模式匹配到的行打印行号；

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28

[iyunv@linus ~]# sed '/\/dev\//=' fstab # 这是一个新行 # /etc/fstab # Created by anaconda on Thu Mar 17 14:20:12 2016 # 8 # Accessible filesystems, by reference, are maintained under '/dev/disk' # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info # 11 /dev/mapper/vg0-root    /                       ext4    defaults        1 1 UUID=cf3f9685-b32c-4ef2-8bf7-c1b5f612c874 /boot                   ext4    defaults        1 2 13 /dev/mapper/vg0-usr     /usr                    ext4    defaults        1 2 14 /dev/mapper/vg0-var     /var                    ext4    defaults        1 2 15 /dev/mapper/vg0-swap    swap                    swap    defaults        0 0 16 tmpfs                   /dev/shm                tmpfs   defaults        0 0 17 devpts                  /dev/pts                devpts  gid=5,mode=620  0 0 sysfs                   /sys                    sysfs   defaults        0 0 proc                    /proc                   proc    defaults        0 0 [iyunv@linus ~]#

!：条件取反；
地址定界!编辑命令；
s///：查找替换，其分隔符可自行指定，常用的有s@@@, s###等；
替换标记：
g：全局替换；
p：显示替换成功的行；
练习01：把/etc/passwd文件中的xiaozhu替换成yixuan,只替换一次

1 2 3

[iyunv@linus ~]# sed 's@xiaozhu@yixuan@' /etc/passwd | grep yixuan yixuan:x:500:500::/home/yixuan:/bin/bash [iyunv@linus ~]#

练习02：把/etc/passwd文件中的root全部替换成yixuan

1 2 3 4 5

[iyunv@linus ~]# sed 's@root@yixuan@g' /etc/passwd | grep yixuan yixuan:x:0:0:yixuan:/yixuan:/bin/bash operator:x:11:0:operator:/yixuan:/sbin/nologin yixuan:x:500:500::/home/yixuan:/bin/bash [iyunv@linus ~]#

练习03：显示出那些部分替换变化的行

1 2 3 4

[iyunv@linus ~]# sed -n 's@root@yixuan@p' /etc/passwd yixuan:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/yixuan:/sbin/nologin [iyunv@linus ~]#

练习04：显示那些全部替换变化的行

1 2 3 4

[iyunv@linus ~]# sed -n 's@root@yixuan@pg' /etc/passwd yixuan:x:0:0:yixuan:/yixuan:/bin/bash operator:x:11:0:operator:/yixuan:/sbin/nologin [iyunv@linus ~]#

练习5：删除/boot/grub/grub2.cfg文件中所有以空白字符开头的行的行首的所有空白字符；
~]# sed  's@^[[:space:]]\+@@' /etc/grub2.cfg
练习6：删除/etc/fstab文件中所有以#开头的行的行首的#号及#后面的所有空白字符；
~]# sed  's@^#[[:space:]]*@@'  /etc/fstab
练习7：输出一个绝对路径给sed命令，取出其目录，其行为类似于dirname；
~]# echo "/var/log/messages/" | sed 's@[^/]\+/\?$@@'
~]# echo "/var/log/messages" | sed -r 's@[^/]+/?$@@'
下面是一些高级命令
高级编辑命令：
h：把模式空间中的内容覆盖至保持空间中；
H：把模式空间中的内容追加至保持空间中；
g：把保持空间中的内容覆盖至模式空间中；
G：把保持空间中的内容追加至模式空间中；
x：把模式空间中的内容与保持空间中的内容互换；
n：覆盖读取匹配到的行的下一行至模式空间中；
N：追加读取匹配到的行的下一行至模式空间中；
d：删除模式空间中的行；
D：删除多行模式空间中的所有行；
示例：

sed  -n  'n;p'  FILE：显示偶数行；
sed  '1!G;h;$!d'  FILE：逆序显示文件的内容；
sed  ’$!d'  FILE：取出最后一行；
sed  '$!N;$!D' FILE：取出文件后两行；
sed '/^$/d;G' FILE：删除原有的所有空白行，而后为所有的非空白行后添加一个空白行；
sed  'n;d'  FILE：显示奇数行；
sed 'G' FILE：在原有的每行后方添加一个空白行；