linux 正则表达式与实践

qqwe

　　正则表达式基础
　　
　　准备
　　(1)alias grep='grep --color=auto' 易于显示
　　(2)LC_ALL=C，字符集，设置环境变量，字符顺序
　　
　　基础正则
　　1)^word  匹配以Word开头的内容 vi/vim 里^代表一行的开头
　　2)word$  匹配以Word结尾的内容 vi/vim 里$代表一行的结尾
　　3)^$    表示空行
　　#过滤空行，并显示行号
　　[iyunv@wen data]# grep -n "^$" lrs.txt
　　2:
　　4:
　　6:
　　8:
　　#过滤掉所有空行不显示
　　[iyunv@wen data]# grep -v "^$" lrs.txt
　　You're in a battle with
　　A bulletproof heart
　　You really got me, got me
　　A bulletproof heart.
　　
　　4). 代表且只能代表任意一个字符
　　5)\ 转义符号，让特殊字符显示其原型 \$ \.
　　6)* 重复0个或多个前面一个字符，例 o* 匹配 没有o 有一个或多个 oo  oooooo……
　　7).* 匹配所有字符 延伸 ^.*以任意多个字符开头  .*$以任意多个字符结尾
　　点(.)含义总结
　　1.当前目录
　　2.使得文件生效 相当于source
　　3.隐藏文件
　　4.任意一个字符（grep正则）
　　#只显示匹配到的内容
　　[iyunv@wen data]# grep -on "you" lrs.txt
　　9:you
　　12:you
　　
　　8).[abc] 匹配字符集合内的任意一个字符[a-zA-Z],[0-9]
　　9).[~abc]  匹配不包含~后的任意一个字符的内容
　　                          ~为去反，注意和中括号外面以……开头区别
　　                          [iyunv@wen data]# grep "[~ot]" lrs.txt
　　        
　　10.a\{n,m\} 重复n到m次，前一个重复的字符 如果用egrep/sed -r 可以去掉斜线
　　         a\{n,\}  重复至少n次，前一个重复字符 如果用egrep或sed -r 可以去掉斜线
　　         a\{n\}  重复n次，前一个重复字符  如果用egrep/sed -r 可以去掉斜线
　　         a\{,m\}  重复最多m次
　　扩展
　　         11. +  表示 重复一个或一个以上 前面的字符（*是0或多个）
　　         [iyunv@wen data]# grep -E "on+" lrs.txt
　　         So if you don't know how to
　　         I'm not gonna break your fall.
　　         12. ？  表示 0或一个 前面的字符（.是有且只有一个）
　　         13. |  表示同时过滤多个字符串
　　         root@wen data]# grep -E "3306|1521" /etc/services
　　         mysql 3306/tcp # MySQL
　　         mysql 3306/udp # MySQL
　　         ncube-lm 1521/tcp # nCube License Manager
　　         ncube-lm 1521/udp # nCube License Manager
　　14.（） 分组过滤，后向引用
　　         [iyunv@wen data]# grep -E "g(la|oo)d" lrs.txt
　　         glad
　　         good
　　
　　        
　　#POSIX字符类（了解）
　　[:lower:] 匹配小写（麻烦，直接用下面的例子）
　　         root@wen data]# grep -E "[a-z]" lrs.txt
　　         You're in a battle with
　　         A bulletproof heart
　　         You really got me, got me
　　         A bulletproof heart.
　　
　　
　　#元字符
　　\b 单词边界 只过滤单词
　　         [iyunv@wen data]# grep -E "\byou\b" lrs.txt
　　         So if you don't know how to
　　         [iyunv@wen data]# grep -E "you" lrs.txt
　　         So if you don't know how to
　　         I'm not gonna break your fall.
　　
　　#三剑客grep总结
　　         -a 在二进制文件中，以文本文件的方式搜索数据
　　         -c 计算找到“搜索字符串”的次数
　　         -o 仅显示出匹配grep的内容（用于统计出现在文中的次数）
　　         -i 忽略大小写的不同，所有大小写视为相同
　　         -n  匹配的内容在其行首显示行号
　　         -v  反向选择，即显示没有“搜索字符串”内容的那一行
　　         -E  扩展的grep ，即egrep
　　         --color=auto  以特定颜色高亮显示匹配关键字
　　         -C #除了显示匹配行外，显示该行前后的num行
　　         -B #除了显示匹配行外，显示该行之前的num行
　　         -A #除了显示匹配行外，显示该行之后的num行   
　　正则表达式实战
　　一，将第一列与最后一列交换位置
　　[iyunv@wen data]# tail /etc/passwd
　　vcsa:x:69:69:virtual console memory owner:/dev:/sbin/nologin
　　abrt:x:173:173::/etc/abrt:/sbin/nologin
　　haldaemon:x:68:68:HAL daemon:/:/sbin/nologin
　　ntp:x:38:38::/etc/ntp:/sbin/nologin
　　saslauth:x:499:76:Saslauthd user:/var/empty/saslauth:/sbin/nologin
　　postfix:x:89:89::/var/spool/postfix:/sbin/nologin
　　sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
　　tcpdump:x:72:72::/:/sbin/nologin
　　mygirl:x:500:500::/home/mygirl:/bin/bash
　　fadewalk:x:501:501::/home/fadewalk:/bin/bash
　　
　　
　　[iyunv@wen data]# tail /etc/passwd |sed -nr 's#([^:]+)(:.*:)(/.*$)#\3\2\1#gp'  #第一个（[^:]）取非：开头的
　　/sbin/nologin:x:69:69:virtual console memory owner:/dev:vcsa
　　/sbin/nologin:x:173:173::/etc/abrt:abrt
　　/sbin/nologin:x:68:68:HAL daemon:/:haldaemon
　　/sbin/nologin:x:38:38::/etc/ntp:ntp
　　/sbin/nologin:x:499:76:Saslauthd user:/var/empty/saslauth:saslauth
　　/sbin/nologin:x:89:89::/var/spool/postfix:postfix
　　/sbin/nologin:x:74:74:Privilege-separated SSH:/var/empty/sshd:sshd
　　/sbin/nologin:x:72:72::/:tcpdump
　　/bin/bash:x:500:500::/home/mygirl:mygirl
　　/bin/bash:x:501:501::/home/fadewalk:fadewalk
　　
　　二，取IP或数字
　　1.取数字
　　[iyunv@wen ~]# ifconfig | sed -nr 's#^.*dr:(.*) B.*$#\1#gp'
　　192.168.59.130
　　[iyunv@wen ~]# stat /etc/hosts
　　File: "/etc/hosts"
　　Size: 158 Blocks: 8 IO Block: 4096 普通文件
　　Device: 802h/2050d Inode: 40 Links: 2
　　Access: (0644/-rw-r--r--) Uid: ( 0/ root) Gid: ( 0/ root)
　　Access: 2017-10-11 20:22:15.436493668 +0800
　　Modify: 2010-01-12 21:28:22.000000000 +0800
　　Change: 2017-08-30 05:59:08.040858188 +0800
　　取出644
　　[iyunv@wen ~]# stat /etc/hosts|sed -nr 's#^.*0(.*)/-rw.*$#\1#gp'
　　644
　　[iyunv@wen ~]# stat /etc/hosts|sed -nr 's#^.*\(0(.*)/-rw.*$#\1#gp'
　　644
　　2.取IP
　　[iyunv@wen data]# ifconfig eth0
　　eth0      Link encap:Ethernet  HWaddr 00:0C:29:E9:95:DD
　　          inet addr:192.168.59.130  Bcast:192.168.59.255  Mask:255.255.255.0
　　          inet6 addr: fe80::20c:29ff:fee9:95dd/64 Scope:Link
　　          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1
　　          RX packets:6964 errors:0 dropped:0 overruns:0 frame:0
　　          TX packets:4430 errors:0 dropped:0 overruns:0 carrier:0
　　          collisions:0 txqueuelen:1000
　　          RX bytes:606332 (592.1 KiB)  TX bytes:489934 (478.4 KiB)
　　
　　[iyunv@wen ~]# ifconfig | sed -n '2s#^.*dr:##p'|sed 's# B.*$##g'
　　192.168.59.130
　　
　　
　　grep取IP
　　[iyunv@wen ~]# ifconfig eth0 |grep "ddr:[0-9.]*"
　　          inet addr:192.168.13.128  Bcast:192.168.13.255  Mask:255.255.255.0
　　          inet6 addr: fe80::20c:29ff:fee9:95dd/64 Scope:Link
　　[iyunv@wen ~]# ifconfig eth0 |grep -o "inet addr:[0-9.]*"
　　inet addr:192.168.13.128
　　[iyunv@wen ~]# ifconfig eth0 |grep -o "inet addr:[0-9.]*"|grep -o "[0-9]*"
　　192
　　168
　　13
　　128
　　[iyunv@wen ~]# ifconfig eth0 |grep -o "inet addr:[0-9.]*"|grep -o "[0-9.]*"
　　192.168.13.128