9.1 正则介绍_grep(上)
正则:是指有规律的字符串,学习正则表达式,就是学习这些规律以字符串的形式表述,对以后的编写shell脚本有很大的帮助。
正则表达式有三个实用的工具,号称正则三剑客:grep/egrep、sed、awk,在shell脚本编程中非常重要。
grep:一种文本搜索工具,使用特定的匹配模式搜索过滤指定的关键词,并默认输出匹配含有关键词的行。
grep -[选项] '模式(关键词)' 文件名
-c选项:匹配包含的行数 grep -c 'root' passwd
[root@lgs-01 grep]# grep 'root' passwdtest
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@lgs-01 grep]# grep -c 'root' passwdtest
2
-n选项:输出匹配行,并显示其在文件内的行号 grep -n 'root' passwd
[root@lgs-01 grep]# grep -n 'root' passwdtest
1:root:x:0:0:root:/root:/bin/bash
10:operator:x:11:0:operator:/root:/sbin/nologin
-i选项:不区分大小写匹配 grep -i 'nologin' passwd
[root@lgs-01 grep]# grep 'user' passwdtest
[root@lgs-01 grep]# grep -i 'user' passwdtest
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
-v选项:取反匹配输出 grep -r 'nologin' passwd
[root@lgs-01 grep]# grep -v 'nologin' passwdtest
root:x:0:0:root:/root:/bin/bash
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
lgs:x:1008:1000::/home/lgs:/bin/bash
abc:x:1001:1000::/home/abc:/bin/bash
-r选项:遍历所有子目录匹配,针对目录 grep -r 'root' /etc/
-A选项:后面跟数字如-A2,匹配改行及其下面的两行也输出 grep -A2 'root' passwd
[root@lgs-01 grep]# grep -nA2 'root' passwdtest
1:root:x:0:0:root:/root:/bin/bash
2-bin:x:1:1:bin:/bin:/sbin/nologin
3-daemon:x:2:2:daemon:/sbin:/sbin/nologin
--
10:operator:x:11:0:operator:/root:/sbin/nologin
11-games:x:12:100:games:/usr/games:/sbin/nologin
12-ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
-B选项:后面跟数字如-B2,匹配改行及其上面的两行也输出 grep -B2 'root' passwd
[root@lgs-01 grep]# grep -nB2 'root' passwdtest
1:root:x:0:0:root:/root:/bin/bash
--
8-halt:x:7:0:halt:/sbin:/sbin/halt
9-mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10:operator:x:11:0:operator:/root:/sbin/nologin
-C选项:后面跟数字如-C2,匹配改行及其上面的两行也输出 grep -C2 'root' passwd
[root@lgs-01 grep]# grep -nC2 'root' passwdtest
1:root:x:0:0:root:/root:/bin/bash
2-bin:x:1:1:bin:/bin:/sbin/nologin
3-daemon:x:2:2:daemon:/sbin:/sbin/nologin
--
8-halt:x:7:0:halt:/sbin:/sbin/halt
9-mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10:operator:x:11:0:operator:/root:/sbin/nologin
11-games:x:12:100:games:/usr/games:/sbin/nologin
12-ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
9.2 grep(中)
grep 范例:
grep '[0-9]' passwd :匹配带数字的行
[root@lgs-01 grep]# grep '[0-9]' passwdtest
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
lgs:x:1008:1000::/home/lgs:/bin/bash
abc:x:1001:1000::/home/abc:/bin/bash
grep -r '[0-9]' passwd :匹配不含数字的行
[root@lgs-01 grep]# grep -v '[0-9]' passwdtest
abc:y
grep -n '^abc' passwd :匹配以abc号开头的行
[root@lgs-01 grep]# grep '^abc' passwdtest
abc:x:1001:1000::/home/abc:/bin/bash
abc:0
abc:y
grep -nv '^abc' passwd :匹配不以abc号开头的行
[root@lgs-01 grep]# grep -v '^abc' passwdtest
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
lgs:x:1008:1000::/home/lgs:/bin/bash
grep -v '^abc' passwd |grep -v '^[a-zA-Z]' :匹配不以abc开头,又不以字母开头的行
[root@lgs-01 grep]# grep -v '^abc' passwdtest |grep -v '^[a-zA-Z]'
12:22:55
587:1
12:21
12:200
1
9
51
59
grep '[^0-9]' passwd :匹配含有非数字的行
[root@lgs-01 grep]# grep '[^0-9]' passwdtest
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
lgs:x:1008:1000::/home/lgs:/bin/bash
abc:x:1001:1000::/home/abc:/bin/bash
grep '^[^0-9]' passwd :匹配以非数字开头的行
[root@lgs-01 grep]# grep '^[0-9]' passwdtest
12:22:55
587:1
12:21
12:200
1
9
51
59
^跟在字符后面,代表以该字符开头;如果在[ ]中括号内,代表取反的意思。
^abc:表示以abc字符串开头。 ^[abc]:表示以a开头或者以b开头或者以c开头。[ ]号里表示里面某单一个字符。
[root@lgs-01 grep]# grep '^abc' passwdtest
abc:x:1001:1000::/home/abc:/bin/bash
abc:0
abc:y
[root@lgs-01 grep]# grep '^[abc]' passwdtest
bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
abc:x:1001:1000::/home/abc:/bin/bash
abc:0
abc:y
9.3 grep(下)
grep里的通配符号:
*号 代表前面的单个字符有0个或者多个
.号 代表 匹配任意单个字符
grep 'r.o' passwd :匹配含 r.o (.号代表任意单个字符) 三个字符的行
[root@lgs-01 grep]# grep 'r.o' passwdtest
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@lgs-01 grep]# grep 'r..o' passwdtest
operator:x:11:0:operator:/root:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
grep 'r*o' passwd :匹配含 o 或者 nr (n代表任意多个) o 的行
[root@lgs-01 grep]# grep -n 'r*o' passwdtest
1:root:x:0:0:root:/root:/bin/bash
2:bin:x:1:1:bin:/bin:/sbin/nologin
3:daemon:x:2:2:daemon:/sbin:/sbin/nologin
4:adm:x:3:4:adm:/var/adm:/sbin/nologin
5:lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
7:shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
9:mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10:operator:x:11:0:operator:/root:/sbin/nologin
11:games:x:12:100:games:/usr/games:/sbin/nologin
12:ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
13:nobody:x:99:99:Nobody:/:/sbin/nologin
14:systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
15:dbus:x:81:81:System message bus:/:/sbin/nologin
16:polkitd:x:999:997:User for polkitd:/:/sbin/nologin
17:postfix:x:89:89::/var/spool/postfix:/sbin/nologin
18:sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
19:chrony:x:998:996::/var/lib/chrony:/sbin/nologin
20:lgs:x:1008:1000::/home/lgs:/bin/bash
21:abc:x:1001:1000::/home/abc:/bin/bash
grep '.*' passwd :匹配任意行、包括空行 (贪婪匹配)
[root@lgs-01 grep]# grep '.*' passwdtest
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
lgs:x:1008:1000::/home/lgs:/bin/bash
abc:x:1001:1000::/home/abc:/bin/bash
12:22:55
587:1
12:21
12:200
1
9
51
59
abc:0
abc:y
{ }花括号代表前面的字符连着出现的次数
grep 'o{2}' passwd :匹配 o 必须连着出现2次的行 。{ }要用转义字符才生效。
[root@lgs-01 grep]# grep 'o\{2\}' passwdtest
root:x:0:0:root:/root:/bin/bash
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
egrep 'o{2}' passwd :用egrep不用转义字符 \ 让{ }生效
[root@lgs-01 grep]# egrep 'o{2}' passwdtest
root:x:0:0:root:/root:/bin/bash
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
grep 'o+d' passwd :匹配o出现1次或者多次的行。+号 代表其前面的单字符出现1次或者多次
[root@lgs-01 grep]# grep 'o\+d' passwdtest
nobody:x:99:99:Nobody:/:/sbin/nologin
grep 'o?t' passwd : 匹配 t 或者 ot 的行。?号代表其前面的单字符出现0次或者1次
[root@lgs-01 grep]# grep 'o\?t' passwdtest
root:x:0:0:root:/root:/bin/bash
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
operator:x:11:0:operator:/root:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
egrep 代表 grep -E
egrep 'root|nologin' passwd :匹配含root或者nologin的行。| 代表或者的意思
[root@lgs-01 grep]# grep -E 'root|nologin' passwdtest
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:997:User for polkitd:/:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
egrep '(99:){2}' passwd :匹配 99:字符串出现2次的行 。( )中括号代表字符串组合
[root@lgs-01 grep]# egrep '(99:){2}' passwdtest
nobody:x:99:99:Nobody:/:/sbin/nologin
+号 { }号 ?号 &号 |号 等特使符号,在grep中需要 加 \ 号转义才能使用,不转义表示特殊符号本身的字符输出
而在egrep中就不用转义。