文件的格式化与相关处理
通过数据流重定向配合printf功能，以及awk命令，就可以让你的信息以你想要的模样输出。
1、格式化打印：printf
功能：
很多时候，我们可能需要将自己的数据格式化输出，但是由于原始数据长度不定，会出现格式混乱，printf可以将数据输出的结果格式化。
格式：
printf ‘打印格式’ 实际内容
举例：
>> print '%s\t %s\t %s\t %s\t %s\t \n' $ (cat printf.txt)
# 每个数据以tab分隔，但由于字符长度不一致，数据无法对齐
>> print '%10s %5i %5i %5i %8.2f \n' $ (cat printf.txt | grep -v Name)
# 第2行以后，分别以字符串、整数、小数点来显示2、awk：好用的数据处理工具
功能：
awk 也是一个非常棒的数据处理工具！sed 常常用于一整个行的处理， awk 则比较倾向于一行当中分成数个“字段”来处理。因此，awk 相当的适合处理小型的数据处理。
格式：
awk ‘条件类型1{动作1} 条件类型2{动作2} …’ filename
awk 后面接两个单引号并加上大括号 {} 来配置想要对数据进行的处理动作。 awk 可以处理后续接的文件，也可以读取来自前个命令的 standard output 。 但如前面说的， awk 主要是处理『每一行的字段内的数据』，而『默认的字段的分隔符号为 “空格键” 或 “[tab]键” 』！
举例来说，我们用 last 可以将登陆者的数据取出来，结果如下所示：
>> last -n 5 <==仅取出前五行
root pts/1 192.168.1.100 Tue Feb 10 11:21 still logged in
root pts/1 192.168.1.100 Tue Feb 10 00:46 - 02:28 (01:41)
root pts/1 192.168.1.100 Mon Feb 9 11:41 - 18:30 (06:48)
dmtsai pts/1 192.168.1.100 Mon Feb 9 11:41 - 11:41 (00:00)
root tty1 Fri Sep 5 14:09 - 14:10 (00:01)
若我想要取出帐号与登陆者的 IP ，且帐号与 IP 之间以 [tab] 隔开，则会变成这样：
>> last -n 5 | awk '{print $1 "\t" $3}'
root 192.168.1.100
root 192.168.1.100
root 192.168.1.100
dmtsai 192.168.1.100
root Fri上表是 awk 最常使用的动作！透过 print 的功能将字段数据列出来！字段的分隔则以空格键或 [tab] 按键来隔开。 因为不论哪一行我都要处理，因此，就不需要有 “条件类型” 的限制！我所想要的是第一栏以及第三栏， 但是，第五行的内容怪怪的～这是因为数据格式的问题啊！所以使用 awk 的时候，请先确认一下你的数据当中，如果是连续性的数据，请不要有空格或 [tab] 在内，否则，就会像这个例子这样，会发生误判！
另外，由上面这个例子你也会知道，在每一行的每个栏位都是有变量名称的，那就是 2… 等变量名称。以上面的例子来说， root 是 3 啦！后面以此类推～还有个变量！那就是 0 代表『一整行数据**』的意思～以上面的例子来说，第一行的 $0 代表的就是『root …. 』那一行啊！ 由此可知，刚刚上面五行当中，整个 awk 的处理流程是：
（1）读入第一行，并将第一行的数据填入
1, $2…. 等变量当中；
（2）依据 “条件类型” 的限制，判断是否需要进行后面的 “动作”；
（3）做完所有的动作与条件类型；
（4）若还有后续的『行』的数据，则重复上面 1~3 的步骤，直到所有的数据都读完为止。
经过这样的步骤，你会晓得， awk 是『以行为一次处理的单位』， 而『以字段为最小的处理单位』。好了，那么 awk 怎么知道我到底这个数据有几行？有几栏呢？这就需要 awk 的内建变量的帮忙啦～
| 变量名称 | 代表意义 |
|---|---|
| NF | 每一行 ($0) 拥有的栏位总数 |
| NR | 目前 awk 所处理的是『第几行』数据 |
| FS | 目前的分隔字节，默认是空白键 |
我们继续以上面 last -n 5 的例子来做说明，如果我想要：
- 列出每一行的帐号(就是 $1)；
- 列出目前处理的行数(就是 awk 内的 NR 变量)
- 并且说明，该行有多少栏位(就是 awk 内的 NF 变量)
则可以这样：
last -n 5| awk '{print $1 "\t lines: " NR "\t columns: " NF}'
root lines: 1 columns: 10
root lines: 2 columns: 10
root lines: 3 columns: 10
dmtsai lines: 4 columns: 10
root lines: 5 columns: 9
# 注意喔，在 awk 内的 NR, NF 等变量要用大写，且不需要有钱字号 $ 啦！awk的逻辑运算字节
既然有需要用到 “条件” 的类别，自然就需要一些逻辑运算,如下：
| 运算单元 | 代表意义 |
|---|---|
| > | 大於 |
| < | 小於 |
| >= | 大於或等於 |
| <= | 小於或等於 |
| == | 等於 |
| != | 不等於 |
举例：
>> cat /etc/passwd | awk '{FS=":"} $3 < 10 {print $1 "\t " $3}'
root:x:0:0:root:/root:/bin/bash
bin 1
daemon 2
....(以下省略)....
不过，第一行没有正确的显示出来，这是因为我们读入第一行的时候，那些变量 $1, $2... 默认还是以空白键为分隔的，所以虽然我们定义了 FS=":" 了， 但是却仅能在第二行后才开始生效。那么怎么办呢？我们可以预先配置 awk 的变量啊！ 利用 BEGIN 这个关键字：
>> cat /etc/passwd | awk 'BEGIN {FS=":"} $3 < 10 {print $1 "\t " $3}'
root 0
bin 1
daemon 2
......(以下省略)......
很有趣吧！而除了 BEGIN 之外，我们还有 END 呢另外，如果要用 awk 来进行『计算功能』呢？以底下的例子来看， 假设我有一个薪资数据表档名为 pay.txt ，内容是这样的：
| Name | 1st | 2nd | 3th |
|---|---|---|---|
| VBird | 23000 | 24000 | 25000 |
| DMTsai | 21000 | 20000 | 23000 |
| Bird2 | 43000 | 42000 | 41000 |
如何计算每个人的总额呢？而且还想要格式化输出！我们可以这样考虑：
第一行只是说明，所以第一行不要进行加总 (NR==1 时处理)；
第二行以后就会有加总的情况出现 (NR>=2 以后处理)
>> cat pay.txt | awk 'NR==1{printf "%10s %10s %10s %10s %10s\n",$1,$2,$3,$4,"Total" }
NR>=2{total = $2 + $3 + $4
printf "%10s %10d %10d %10d %10.2f\n", $1, $2, $3, $4, total}'
Name 1st 2nd 3th Total
VBird 23000 24000 25000 72000.00
DMTsai 21000 20000 23000 64000.00
Bird2 43000 42000 41000 126000.00上面的例子有几个重要事项应该要先说明的：
- awk 的命令间隔：所有 awk 的动作，亦即在 {} 内的动作，如果有需要多个命令辅助时，可利用分号『;』间隔， 或者直接以 [Enter] 按键来隔开每个命令，例如上面的范例中，鸟哥共按了三次 [enter] 喔！
- 逻辑运算当中，如果是『等於』的情况，则务必使用两个等号『==』！
- 格式化输出时，在 printf 的格式配置当中，务必加上 \n ，才能进行分行！
- 与 bash shell 的变量不同，在 awk 当中，变量可以直接使用，不需加上 $ 符号。
利用 awk 这个玩意儿，就可以帮我们处理很多日常工作了呢！真是好用的很～ 此外， awk 的输出格式当中，常常会以 printf 来辅助，所以， 最好你对 printf 也稍微熟悉一下比较好啦！另外， awk 的动作内 {} 也是支持 if (条件) 的喔！ 举例来说，上面的命令可以修订成为这样：
>> cat pay.txt | \
> awk '{if(NR==1) printf "%10s %10s %10s %10s %10s\n",$1,$2,$3,$4,"Total"}
NR>=2{total = $2 + $3 + $4
printf "%10s %10d %10d %10d %10.2f\n", $1, $2, $3, $4, total}'你可以仔细的比对一下上面两个输入有啥不同～从中去了解两种语法吧！我个人是比较倾向於使用第一种语法， 因为会比较有统一性啊！ \^_^
参考：
《鸟哥的Linux私房菜 基础学习篇 第三版》