awk中RS、ORS、FS、OFS的区别和联系小结

学习awk时,一定要记得动手去实践,只有在实践中才能发现问题,以下就我在学习中和实践中的经验,总结一下RS,ORS,FS,OFS的区别和联系。

一,RS与ORS

1,RS是记录分隔符,默认的分隔符是\n,具体用法看下


[root@krlcgcms01 mytest]# cat test1     //测试文件

 111 222

 333 444

 555 666

2,RS默认分割符\n


[root@krlcgcms01 mytest]# awk '{print $0}' test1  //awk 'BEGIN{RS="\n"}{print $0}' test1 这二个是一样的

111 222

333 444

555 666

其实你可以把上面test1文件里的内容理解为,111 222\n333 444\n555 6666,利用\n进行分割。看下一个例子

3,自定义RS分割符


[zhangy@localhost test]$ echo "111 222|333 444|555 666"|awk 'BEGIN{RS="|"}{print $0,RT}'

 111 222 |

 333 444 |

 555 666

结合上面一个例子,就很容易理解RS的用法了。

4,RS也可能是正则表达式


[zhangy@localhost test]$ echo "111 222a333 444b555 666"|awk 'BEGIN{RS="[a-z]+"}{print $1,RS,RT}'

 111 [a-z]+ a

 333 [a-z]+ b

 555 [a-z]+

从例3和例4,我们可以发现一点,当RT是利用RS匹配出来的内容。如果RS是某个固定的值时,RT就是RS的内容。

5,RS为空时


[zhangy@localhost test]$ cat -n test2

 1  111 222

 2

 3  333 444

 4  333 444

 5

 6

 7  555 666

[zhangy@localhost test]$ awk 'BEGIN{RS=""}{print $0}' test2

111 222

333 444

333 444

555 666

[zhangy@localhost test]$ awk 'BEGIN{RS="";}{print "<",$0,">"}' test2  //这个例子看着比较明显

< 111 222 >

< 333 444     //这一行和下面一行,是一行

333 444 >

< 555 666 >

从这个例子,可以看出当RS为空时,awk会自动以多行来做为分割符。

6,ORS记录输出分符符,默认值是\n

把ORS理解成RS反过程,这样更容易记忆和理解,看下面的例子。


[zhangy@localhost test]$ awk 'BEGIN{ORS="\n"}{print $0}' test1  //awk '{print $0}' test1二者是一样的

111 222

333 444

555 666

[zhangy@localhost test]$ awk 'BEGIN{ORS="|"}{print $0}' test1

111 222|333 444|555 666|

二,FS与OFS

1,FS指定列分割符


[zhangy@localhost test]$ echo "111|222|333"|awk '{print $1}'

 111|222|333

[zhangy@localhost test]$ echo "111|222|333"|awk 'BEGIN{FS="|"}{print $1}'

 111

2,FS也可以用正则


[zhangy@localhost test]$ echo "111||222|333"|awk 'BEGIN{FS="[|]+"}{print $1}'

111

3,FS为空的时候


[zhangy@localhost test]$ echo "111|222|333"|awk 'BEGIN{FS=""}{NF++;print $0}'

1 1 1 | 2 2 2 | 3 3 3

当FS为空的时候,awk会把一行中的每个字符,当成一列来处理。

4,RS被设定成非\n时,\n会成FS分割符中的一个


[zhangy@localhost test]$ cat test1

 111 222

 333 444

 555 666

[zhangy@localhost test]$ awk 'BEGIN{RS="444";}{print $2,$3}' test1

 222 333

 666

222和333之间是有一个\n的,当RS设定成444后,222和333被认定成同一行的二列了,其实按常规思想是二行的一列才对。

5,OFS列输出分隔符


[zhangy@localhost test]$ awk 'BEGIN{OFS="|";}{print $1,$2}' test1

 111|222

 333|444

 555|666

[zhangy@localhost test]$ awk 'BEGIN{OFS="|";}{print $1 OFS $2}' test1

 111|222

 333|444

 555|666

test1只有二列,如果100列,都写出来太麻烦了吧。


[zhangy@localhost test]$ awk 'BEGIN{OFS="|";}{print $0}' test1

 111 222

 333 444

 555 666

[zhangy@localhost test]$ awk 'BEGIN{OFS="|";}{NF=NF;print $0}' test1

 111|222

 333|444

 555|666

为什么第二种方法中的OFS生效呢?个人觉得,awk觉查到列有所变化时,就会让OFS生效,没变化直接输出了。