第一章awk

                                                                                                                    第1章 awk

1 awk简介

awk不仅仅时linux系统中的一个命令&＃xff0c;而且是一种编程语言&＃xff0c;可以用来处理数据和生成报告&＃xff08;excel&＃xff09;。处理的数据可以是一个或多个文件&＃xff0c;可以是来自标准输入&＃xff0c;也可以通过管道获取标准输入&＃xff0c;awk可以在命令行上直接编辑命令进行操作&＃xff0c;也可以编写成awk程序来进行更为复杂的运用。

awk指令是由模式&＃xff0c;动作&＃xff0c;或者模式和动作的组合组成。

• 正则表达式作为模式
• 比较表达式作为模式
• 范围模式
• 特殊模式BEGIN和END
• awk默认就支持的元字符

awk默认不支持的元字符:&＃xff08;参数--posix&＃xff09;

awk -F ":" &＃39;NR>&＃61;2 && NR<&＃61;6{print NR,$1}&＃39; 文件

-F&＃xff1a;参数-F指定awk按照什么标志进行文件分割&＃xff0c;切割成一列一列的&＃xff0c;如果不见-F参数&＃xff0c;awk默认按照空格进行文件分割。

":"&＃xff1a;指定“ &＃xff1a;”作为分割标志

NR>&＃61;2 && NR<&＃61;6&＃xff1a;这部分表示模式&＃xff0c;是一个条件&＃xff0c;表示取第2行到第6行

{print NR,$1}&＃xff1a;这部分表示动作&＃xff0c;表示要输出NR行号和$1第一列。

$0&＃xff1a;表示默认全输出。$NF:表示去每行最后一组元素

awk -F ":" &＃39;BEGIN{}模式{动作}END{}&＃39;

BEGIN{}&＃xff1a;开始模式&＃xff08;告诉awk要如何读&＃xff09;  END{}&＃xff1a;结束模式&＃xff08;告诉awk要如何结束&＃xff09;

BEGIN有读如换行符和输出换行符&＃xff1a;BEGIN{RS&＃61;"/";ORS&＃61;"任意符号"}

问题&＃xff01;1 看文件/etc/passed&＃xff0c;把所有的英文单字取出来排序&＃xff0c;看那个单词的重复最多&＃xff0c;看前十行&＃xff1f;

sed -r &＃39;s#[^a-zA-Z]# #g&＃39; shabi | xargs -n1 | sort | uniq -c | sort -rn | head

s#[]# #g:表示把中括号里的内容替换成空行

[^a-zA-Z]:表示取反

xargs -n1:表示每一行只有一个元素

sort:默认按照26个字母排序。

参数&＃xff1a;-n默认按照数字排序

-r 逆转排序

Uniq:相同元素去重

参数:-c  去重复单词时并统计次数

问题&＃xff01;2 &＃xff1a;去除网eth0的IP地址&＃xff1f;

方法一&＃xff1a;hostname -I

方法二&＃xff1a;ifconfig eth0 | awk &＃39;BEGIN{RS&＃61;"[ :]"}NR&＃61;&＃61;31&＃39;

方法三 &＃xff1a;ifconfig eth0 | awk -F "[ :]&＃43;" &＃39;NR&＃61;&＃61;2{print $4}&＃39;

问题&＃xff01;3 查看文件一共有多少空行&＃xff1f;

方法一 &＃xff1a;grep -c "^$" /etc/services 

 方法二 &＃xff1a;awk &＃39;/^$/{print $0}&＃39; /etc/services | wc -l

 方法三 &＃xff1a;awk &＃39;/^$/{i&＃61;i&＃43;1;print i}&＃39; /etc/services

 方法四 &＃xff1a; awk &＃39;/^$/{i&＃61;i&＃43;1}END{print i}&＃39; /etc/services