awk命令、awk编程语⾔详细介绍和实例
⼀，什么是awk
awk是linux下的⼀个命令，他对其他命令的输出，对⽂件的处理都⼗分强⼤，其实他更像⼀门编程语⾔，他可以⾃定义变量，有条件语句，有循环，有数组，有正则，有函数等。他读取输出，或者⽂件的⽅式是⼀⾏，⼀⾏的读，根据你给出的条件进⾏查，并在出来的⾏中进⾏操作，感觉他的设计思想，真的很简单，但是结合实际情况，具体操作起来就没有那么简单了。他有三种形势，awk，gawk，nawk，平时所说的awk其实就是gawk。
⼆，awk中的记录，域，分割符
当我们读取输出时，或者读取⽂件时，读取⼀⾏就是⼀个记录。记录分割符是默认是回车符，保存在RS，ORS中。
我们从记录中分割出我们要单词，或者是词组等，我们称他为域，域分割符，默认的是空格和TAB銉，保存在内建变
量ORS中。举个例⼦：
aaaa:bbbb:ccccccc
1111:2343:5t43343
上⾯有⼆⾏，这⼆⾏就是⼆个记录，每⾏后⾯的回车呢，就是记录分割符，⾥⾯冒号呢，就是域分割符，分割出来
的，aaaa,1111这类东西就是域了。
awk -F: '{print $1}' testfile
三，awk的内建变量和运算符
1，变量
变量描述
$n当前记录的第n个字段，字段间由 FS分隔。
$0完整的输⼊记录。
ARGC命令⾏参数的数⽬。
ARGIND命令⾏中当前⽂件的位置(从0开始算)。
ARGV包含命令⾏参数的数组。
CONVFMT数字转换格式(默认值为%.6g)
ENVIRON环境变量关联数组。
ERRNO最后⼀个系统错误的描述。
FIELDWIDTHS字段宽度列表(⽤空格键分隔)。
FILENAME当前⽂件名。
FNR同 NR，但相对于当前⽂件。
FS字段分隔符(默认是任何空格)。
IGNORECASE如果为真，则进⾏忽略⼤⼩写的匹配。
NF当前记录中的字段数。
NR当前记录数。
OFMT数字的输出格式(默认值是%.6g)。
OFS输出字段分隔符(默认值是⼀个空格)。
ORS输出记录分隔符(默认值是⼀个换⾏符)。
RLENGTH由 match函数所匹配的字符串的长度。
RS记录分隔符(默认是⼀个换⾏符)。
RSTART由 match函数所匹配的字符串的第⼀个位置。
SUBSEP数组下标分隔符(默认值是\034)。
2，运算符
运算符描述
= += -= *= /= %= ^= **=赋值
:C条件表达式
||逻辑或
&&逻辑与
~ ~!匹配正则表达式和不匹配正则表达式
< <= > >= != ==关系运算符
空格连接
+ -加，减
* / &乘，除与求余
+ - !⼀元加，减和逻辑⾮
^ ***求幂
++ --增加或减少，作为前缀或后缀
$字段引⽤
in数组成员
运算符描述
四，awk的正则
匹配符描述
\Y匹配⼀个单词开头或者末尾的空字符串
\B匹配单词内的空字符串
\<；匹配⼀个单词的开头的空字符串，锚定开始
\>匹配⼀个单词的末尾的空字符串，锚定末尾
\W匹配⼀个⾮字母数字组成的单词
\w匹配⼀个字母数字组成的单词
mysql 字符串转数组
\'匹配字符串末尾的⼀个空字符串
\‘匹配字符串开头的⼀个空字符串
五，awk的函数
1，字符串函数
函数名描述
sub匹配记录中最⼤、最靠左边的⼦字符串的正则表达式，并⽤替换字符串替换这些字符串。如果没有指定⽬标字符串就默认使⽤整个记录。替换只发⽣在第⼀次匹配的时候
gsub整个⽂档中进⾏匹配
index返回⼦字符串第⼀次被匹配的位置，偏移量从位置1开始
substr返回从位置1开始的⼦字符串，如果指定长度超过实际长度，就返回整个字符串
split可按给定的分隔符把字符串分割为⼀个数组。如果分隔符没提供，则按当前FS值进⾏分割
length返回记录的字符数
match 返回在字符串中正则表达式位置的索引，如果不到指定的正则表达式则返回0。match函数会设置内建变量RSTART为字符串中⼦字符串的开始位置，RLENGTH为到⼦字符串末尾的字符个数。substr可利于这些变量来截取字符串
toupper
和
tolower
可⽤于字符串⼤⼩间的转换，该功能只在gawk中有效
2，数学函数
函数名返回值atan2(x,y)y,x 范围内的余切
cos(x)余弦函数
exp(x)求幂
int(x)取整
log(x)⾃然对数
rand()随机数
sin(x)正弦
函数名返回值
sqrt(x)平⽅根
srand(x)x是rand()函数的种⼦
int(x)取整，过程没有舍⼊
rand()产⽣⼀个⼤于等于0⽽⼩于1的随机数
六，实例
学习awk的时候，做了⼀个例⼦，学东西，不要光看，光看是记不住东西的。光看的话，也许你知道怎么回事，真正实际操作，不是这⼉有问题，就是那⼉有问题。所以⼀定要动⼿亲⾃操作⼀下。
1，测试⽂件test
复制代码代码如下:
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/bin/false
daemon:x:2:2:daemon:/sbin:/bin/false
mail:x:8:12:mail:/var/spool/mail:/bin/false
ftp:x:14:11:ftp:/home/ftp:/bin/false
&nobody:$:99:99:nobody:/:/bin/false
zhangy:x:1000:100:,,,:/home/zhangy:/bin/bash
http:x:33:33::/srv/http:/bin/false
dbus:x:81:81:System message bus:/:/bin/false
hal:x:82:82:HAL daemon:/:/bin/false
mysql:x:89:89::/var/lib/mysql:/bin/false
aaa:x:1001:1001::/home/aaa:/bin/bash
ba:x:1002:1002::/home/zhangy:/bin/bash
test:x:1003:1003::/home/test:/bin/bash
@zhangying:*:1004:1004::/home/test:/bin/bash
policykit:x:102:1005:Po
例1：
复制代码代码如下:
cat test | awk -F: '{\
if ($1 == "root"){\
print $1;\
}else if($1 == "bin"){\
print $2;\
}else{\
print $3;\
} \
}'
例2：
复制代码代码如下:
awk '{\
for(i=0;i<NF;i++){\
if ($i ~/^root/){\
print $i;\
}else if($i ~/zhangy/){\
print $i;continue;\
}else if($i ~/mysql/){\
print $i;next;\
}else if($i ~/^test/){\
print $i;break;\
} \
}\
}' test
例3：
复制代码代码如下:
tail test | awk 'BEGIN{while(getline d){ split(d,test);for(i in test){\
print test[i]\
}}}'
例4：
复制代码代码如下:
ls -al /home/zhangy/mytest | awk 'BEGIN{while(getline d){ split(d,test);\
print test[9] ;}
}'
例5：
复制代码代码如下:
echo "32:34" |awk -F: '{print "max = ",max($1,$2)}\
function max(one,two){
if(one > two){
return one;
}else{
return two;
}
}
'
例6：
复制代码代码如下:
#awk 'BEGIN{print "what is your name"; getline name < "/dev/tty"}$1 ~name{print #"found name on line" NR}END{print "see you" name}' test
#awk '{sub(/daemon/,"tankzhang");print}' test
#awk '{{sub(/zhangy/,"tankzhang");$1};print}' test
#awk '{{gsub(/zhangy/,"tankzhang");$1};print}' test
#awk -F: '{print index("zhangy",$1)}' test
#awk -F: '{print substr($1,1,2)}' test
awk -F: '{mat=match($1,/^[a-zA-Z]+$/);print mat,RSTART,RLENGTH}' test
例7：
复制代码代码如下:
cat test |awk -F: '\
NF != 7{\
printf("line %d,does not have 7 fields:%s\n",NR,$0)}\
$1 !~ /^[A-Za-z0-9]/{printf("line %d,non alpha and numeric user id:%s: %s\n",NR,$1,$0)}\ $2 == "*" {printf("lind %d,no password:%s\n",NR,$0)}'

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。