设为首页 收藏本站
查看: 626|回复: 0

[经验分享] OS + Linux Shell Sed / Linux Sed / linux Sed / Linux sed / linux sed / sed

[复制链接]

尚未签到

发表于 2016-1-14 08:22:06 | 显示全部楼层 |阅读模式
  linux shell 之 sed
  [ftpuser@b2cbbstest ~]$ whereis sed
sed: /bin/sed /usr/share/man/man1p/sed.1p.gz /usr/share/man/man1/sed.1.gz
[ftpuser@b2cbbstest ~]$ which sed
/bin/sed
  [ftpuser@b2cbbstest ~]$ sed --version
GNU sed version 4.1.5
Copyright (C) 2003 Free Software Foundation, Inc.
This is free software; see the source for copying conditions.  There is NO
warranty; not even for MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE,
to the extent permitted by law.
  [ftpuser@b2cbbstest ~]$ sed --help
Usage: sed [OPTION]... {script-only-if-no-other-script} [input-file]...

  -n, --quiet, --silent
                 suppress automatic printing of pattern space
  -e script, --expression=script
                 add the script to the commands to be executed
  -f script-file, --file=script-file
                 add the contents of script-file to the commands to be executed
  -i[SUFFIX], --in-place[=SUFFIX]
                 edit files in place (makes backup if extension supplied)
  -c, --copy
                 use copy instead of rename when shuffling files in -i mode
         (avoids change of input file ownership)
  -l N, --line-length=N
                 specify the desired line-wrap length for the `l' command
  --posix
                 disable all GNU extensions.
  -r, --regexp-extended
                 use extended regular expressions in the script.
  -s, --separate
                 consider files as separate rather than as a single continuous
                 long stream.
  -u, --unbuffered
                 load minimal amounts of data from the input files and flush
                 the output buffers more often
      --help     display this help and exit
      --version  output version information and exit

If no -e, --expression, -f, or --file option is given, then the first
non-option argument is taken as the sed script to interpret.  All
remaining arguments are names of input files; if no input files are
specified, then the standard input is read.

E-mail bug reports to: bonzini@gnu.org .
Be sure to include the word ``sed'' somewhere in the ``Subject:'' field.
  
  sed对于段落的处理.
  http://www.linuxsir.org/bbs/thread165324.html
  test.txt

a~1234
xxxxx
bbbbb
ooooo
DONE
a~5678
xxxxxx
ffffffff
kkkkkkk
mmmmmmm
NONDONE
a~112334
kdjfiels
dfjldkdeee
dkccke
skdjfieiw
11
DONE
a~11234
pppooeif
kkkdekde
gnome
helloworld
hihihihi
ohohohoh
DONE
a~!3324
ksdjofe-
lskdjfi,skddjie
killid
NONDONE
a~3325
knoppix
gnoppix
santa fa
quake3d
goodgood
successful!!!
DONE
  要求:输出结果: 只显示"NONDONE"的段落块或"DONE"的段落块.

[ftpuser@b2cbbstest ~]$sed -n '/\<DONE\>/{n;h;b};/\<NONDONE\>/{H;x;p;n;x;b};H'   test.txt
  

// 这个将输出有NODONE的字段
[ftpuser@b2cbbstest ~]$ sed ':a;N;/DONE$/!ba;/\nDONE/d'   test.txt
//  这个将输出只有DONE的字段
[ftpuser@b2cbbstest ~]$ sed ':a;N;/DONE$/!ba;/\nNONDONE/d' test.txt
  
  
  http://hnsswjjxy-163-com.iyunv.com/blog/910018
  sed编辑器逐行处理输入,然后把结果发送到屏幕。
  
  
  sed命令和选项:
  

a\在当前行后添加一行或多行
c\用新文本替换当前行中的文本
d删除行
i\在当前行之前插入文本
h把模式空间的内容复制到暂存缓冲区
H把模式空间的内容添加到缓冲区
g取出暂存缓冲区的内容,将其复制到模式缓冲区
G取出暂存缓冲区的内容,将其追加到模式缓冲区
l列出非打印字符
p打印行
n读入下一行输入,并从下一条而不是第一条命令对其处理
q结束或退出sed
r从文件中读取输入行
!对所选行以外的行应用所有命令
s用一个字符串替换另外一个字符串
  
  
  
  替换标志:
  

g在行内进行全局替换
p打印行
w将行写入文件
x交换暂存缓冲区和模式空间的内容
y将字符转换成另外一个字符
  
  
  sed例子:
  
  打印:p命令
  

sed ‘/abc/p’ file  打印file中包含abc的行。默认情况sed把所有行都打印到屏幕,如果某行匹配到模式,则把该行另外再打印一遍

sed  -n ‘/abc/p’ file和上面一样,只是去掉了sed的默认行为,只会打印匹配的行
  
  
  删除:d命令
  

sed ‘3,$d’ file   删除从第3行到最后一行的内容。
sed ‘$d’ file删除最后一行的内容
sed ‘/abc/d’删除包含abc的行。
sed ‘3d’ file删除第三行的内容
  
  
  替换:s命令
  

sed  ‘s/abc/def/g’ file把行内的所有abc替换成def,如果没有g,则只替换行内的第一个abc
sed  -n ‘s/abc/def/p’ file只打印发生替换的那些行
sed  ‘s/abc/&def/’ file在所有的abc后面添加def(&表示匹配的内容)
sed  -n ‘s/abc/def/gp’ file把所有的abc替换成def,并打印发生替换的那些行
sed  ‘s#abc#def#g’ file把所有的abc替换成def,跟在替换s后面的字符就是查找串和
替换串之间的分割字符,本例中试#
  
  
  指定行的范围:逗号
  

sed  -n ‘/abc/,/def/p’ file打印模式abc到def的行
sed  -n ‘5/,/def/p’ file打印从第五行到包含def行之间的行。
sed /abd/,/def/s/aaa/bbb/g修改从模式abc到模式def之间的行,把aaa替换成def
  
  
  多重编辑-e
  

sed  -e ‘1,3d’ -e ‘s/abc/def/g’ file删除1-3行,然后把其余行的abc替换成def
  
  
  读文件:r命令
  

sed  ‘/abc/r newfile’ file在包含abc的行后读入newfile的内容
  
  
  写文件:w命令   
  

sed  ‘/abc/w newfile’ file在包含abc的行写入newfile
  
  
  追加:a命令      
  

sed  ‘/abc/a\def’ file在包含abc的行后新起一行,写入def
  
  
  插入:i命令      
  

sed  ‘/abc/i\def’ file在包含abc的行前新起一行,写入def
  
  
  修改:c命令    
  

sed  ‘/abc/c\def’ file在包含abc的行替换成def,旧文本被覆盖
  
  
  读取下一行:n命令   
  

sed  ‘/abc/{n ; s/aaa/bbb/g;}’ file读取包含abc的行的下一行,替换aaa为bbb
  
  
  转换:y命令        
  

sed  ‘y/abc/ABC’ file将a替换成A,b替换成B,c替换成C(正则表达式元字符不起作用)
  
  
  退出:q命令    
  

sed  ‘/abc/{ s/aaa/bbb/ ;q; }’ file在某行包含了abc,把aaa替换成bbb,然后退出sed。
  
  
  暂存和取用:h命令(把模式行存储到暂存缓冲区)和g(取出暂存缓冲区的行并覆盖模式缓冲区)G(取出临时缓冲区的行)命令  
  
  h和g是复制行为(覆盖),H和G表示追加。    

sed  -e ‘/abc/h’  -e ‘$G’ file包含abc的行通过h命令保存到暂存缓冲区,在第二条命令汇中,sed读到最后一行$时,G命令从暂存缓冲区中读取一行,追加到模式缓冲区的后面。即所有包含abc的行的最后一行被复制到文件末尾。
sed -e ‘/abc/{h; d;}’
      -e  ‘/def/{g; }’ file
包含abc的行会移到包含def的行上,并进行覆盖。
  
  
  暂存和互换:h和x命令     
  

sed  -e ‘/abc/h’ 
-e ‘/def/x’ file
包含abc的行会被换成def的行。
  
  
  -i选项:直接作用源文件,源文件将被修改。
  
  文件:test.txt  要求用sed方法,过滤单个文件里的所有空白行
  http://zhidao.baidu.com/question/82721866.html?fr=qrl&index=0
  内容:

crosoft Windows [???? 6.1.7601]
???????? (c) 2009 Microsoft Corporation????????????????
C:\Users\Administrator>cd D:\soft\UnxUtils\bin
C:\Users\Administrator>d:
D:\soft\UnxUtils\bin>ls
sh.exe
D:\soft\UnxUtils\bin>sh.exe
$P$G?
zsh: no matches found: ?
$P$Ghelp
abnormal program termination
zsh: fork failed: no such file or directory
$P$G

tt

  解决方法1:
  [iyunv@localhost ~]# sed '/^$/d'  test.txt  > test2.txt
  或
  [iyunv@localhost ~]# sed “/^$/d”  test.txt  > test2.txt
  解决方法2:
UltraEdit-32  删除单个文件所有空白行、空行,使文字紧凑排版
解决:
http://zhidao.baidu.com/question/48144939.html
Ctrl + R 输入:^p^p 替换为^p 即可
如是UNIX格式,替换 ^n^n为^n 
如是DOS格式,替换^r^n^r^n为^r^n 可多次替换达到最终效果。 
尝试^r^n^p的多种组合,将两个序列替换成一个序列。
  
  
  # 在每一行后面增加一空行
sed G
# 将原来的所有空行删除并在每一行后面增加一空行。
# 这样在输出的文本中每一行后面将有且只有一空行。
sed '/^$/d;G'
# 在每一行后面增加两行空行
sed 'G;G'
# 将第一个脚本所产生的所有空行删除(即删除所有偶数行)
sed 'n;d'
# 在匹配式样“regex”的行之前插入一空行
sed '/regex/{x;p;x;}'
# 在匹配式样“regex”的行之后插入一空行
sed '/regex/G'
# 在匹配式样“regex”的行之前和之后各插入一空行
sed '/regex/{x;p;x;G;}'
  
  

批量修改当前文件夹下所有html文件里的特定字符串"111"为"one" 字符串
[iyunv@localhost webapps]# sed -i 's/one/111/' *.html
批量修改当前文件夹下和子文件夹下所有html文件里的特定字符串"111"为"one"字符串
[iyunv@localhost webapps]# grep -r -l 111 * | xargs sed -i 's/111/one/g'

[iyunv@localhost webapps]# grep -r -l one */*.html | xargs sed -i 's/111/one/g'


批量修改当前文件夹下和子文件夹下所有html文件里的特定字符串"111"为"one"字符串,

包含带特殊字符转义的写法如下:

[iyunv@localhost webapps]# grep -r -l "href=\"http:\/\/www.shopxx.net\" target=\"_blank\">SHOP<span>++<\/span> V2.0" * | xargs -I {} sed -i 's/href=\"http:\/\/www.shopxx.net\" target=\"_blank\">SHOP<span>++<\/span> V2.0/href=\"http:\/\/Lindows.ITeye.Com\" target=\"_blank\">Lindows<span>++<\/span> V2.0/g' {}



[iyunv@localhost admin]# grep -r -l 'Lindows.ITeye.Com' *
admin_js.ftl
page_header.ftl
page_index.ftl

[iyunv@localhost webapps]# grep -r -l "www.shopxx.com" *|xargs -I {} sed -i 's/www.shopxx.com/Lindows.ITeye.Com/g' {}


end

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-164092-1-1.html 上篇帖子: Linux && bash简介 下篇帖子: samba服务
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表