目录
1.统计/etc/fstab文件中每个文件系统类型出现的次数
3.提取出字符串Yd$C@M05MB%9&Bdh7dq+YVixp3vpw中的所有数字
一.awk工作原理
- 逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令。
- sed命令常用于一整行的处理，而awk比较倾向于将一行分成多个“字段”然后再进行处理。awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。
- 在使用awk命令的过程中,可以使用逻辑操作符“&&”表示“与”、“||”表示“或”、“!”表示“非”；还可以进行简单的数学运算，如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。
1.命令格式
awk [选项] ‘模式或条件 {操作}’ 文件1 文件2......
awk -f|-v 脚本文件 文件1 文件2......
2.awk常见的内建变量
| 内建变量 | 作用 |
|---|---|
| FS | 列分割符。指定每行文本的字段分隔符，默认为空格或制表位。与"-F"作用相同 |
| NF | 当前处理的行的字段个数 |
| NR | 当前处理的行的行号（序数） |
| $0 | 当前处理的行的整行内容 |
| $n | 当前处理行的第n个字段（第n列） |
| FILENAME | 被处理的文件名 |
| RS | 行分隔符。awk从文件上读取资料时,将根据RS的定义把资料切割成许多条记录,而awk一次仅读入一条记录,以进行处理。预设值是'\n' |
二.awk按字段输出文本
1.awk初始用
[root@localhost ~]# awk '{print}'
[root@localhost ~]# awk '{print "hello"}'
[root@localhost ~]# df |awk '{print $1}'
2.打印文本内的所有内容
[root@localhost ~]# cat /etc/fstab |awk '{print}'
[root@localhost ~]# cat /etc/fstab |awk '{print $0}'
3.提取ip地址
1.sed和awk
[root@localhost ~]# ifconfig ens33 |sed -n '2p'|awk '{print $2}'
2.awk(有搜索功能)
[root@localhost ~]# ifconfig ens33 |awk '/netmask/{print $2}'
4.提取多种不同的分隔符
[root@localhost ~]# df |awk -F "[ %]+" '{print $5}'
[root@localhost ~]# df |awk -F "( +|%)" '{print $5}'
5. 提取IP地址和时间
[root@localhost ~]# cat 1.txt |sed -n "1p"|awk -F "[[ - ]+" '{print $1" "$4}'
6.提取主机名再放回源文件中
[root@localhost ~]# cat host.txt|awk -F"[ .]+" '{print $2}' >>host.txt
7.FS的使用
[root@localhost ~]# awk -v FS=: '{print $1FS$3}' /etc/passwd
8.OFS的使用
[root@localhost ~]# fs=":";awk -v FS=$fs -v OFS="+" '{print $1,$3}' /etc/passw
9.NF的使用
[root@localhost ~]# cat /etc/passwd |awk -F: '{print NF}'
10.BEGIN{ }模式
BEGIN模式表示，在处理指定的文本之前，需要先执行BEGIN模式中指定的动作；awk再处理指定的文本，之后再执行END模式中指定的动作，END{}语句块中，往往会放入打印结果等语句
[root@localhost ~]# awk 'BEGIN {x=0};/\/bin\/bash$/;{x++};END{print x}' /etc/passwd
[root@localhost ~]# awk 'BEGIN {x=0};/\/bin\/bash$/{x++;print x,$0};END{print x}' /etc/passwd
三.awk按行输出文本
1.提取连续行
[root@localhost ~]# awk 'NR==1,NR==3{print}' /etc/passwd
[root@localhost ~]# awk '(NR>=1)&&(NR<=3){print}' /etc/passwd
2.提取不连续行
[root@localhost ~]# awk 'NR==1||NR==3{print NR}' /etc/passwd
[root@localhost ~]# awk '(NR%2)==1{print}' /etc/passwd
[root@localhost ~]# awk '(NR%2)==0{print}' /etc/passwd
3.提取以xxx结尾的内容行
[root@localhost ~]# awk '/\/bin\/bash$/' /etc/passwd
[root@localhost ~]# grep '/bin/bash$' /etc/passwd
4.查看行号
[root@localhost ~]# awk '{print NR,$1}' /etc/passwd 行号显示在行首
[root@localhost ~]# awk '{print $1,NR}' /etc/passwd 行号显示在行末
5. 以列为条件输出行
[root@localhost ~]# awk -F: '$3>=1000{print}' /etc/passwd
四.练习
1.统计/etc/fstab文件中每个文件系统类型出现的次数
[root@localhost ~]# cat /etc/fstab |sed -n '9,$p'|awk -F " " '{print $3}'|sort |uniq -c
需要先排序
2.统计/etc/fstab文件中每个单词出现的次数
[root@localhost ~]# grep -Eo "\b[[:alpha:]]+\b" /etc/fstab |sort |uniq -c |sort -nr
3.提取出字符串Yd$C@M05MB%9&Bdh7dq+YVixp3vpw中的所有数字
[root@localhost ~]# echo 'Yd$C@M05MB%9&Bdh7dq+YVixp3vpw' |grep -o '[-0-9]'
4.提取主机名并放入原文件
[root@localhost ~]# cat host.txt |awk -F "[/.]+" '{print $2}' >> host.txt
