linux⾥awk处理多个⽂件内容,linuxawk多⽂件操作2种实现⽅
我们经常会将2个有关联⽂本⽂件进⾏合并处理。分别从不同⽂件获取需要的列,然后,整体输出到⼀起。awk进⾏多⽂件处理时候,常常会遇到2个⽅⾯问题,第⼀个是怎么样合并多个⽂件为⼀个⽂件。第⼆个问题就是怎么样将多⾏合并为⼀⾏显⽰。我这⾥说下我的处理2种⽅法,还有实现思路。
实例⽂本:
复制代码代码如下:
[chengmo@centos5 shell]$ awk 'FNR==1{print "\r\n"FILENAME}{print $0}' a.
<
100 wang man
200 wangsan woman
300 wangming man
400 wangzheng man
<
100 90 80
200 80 70
300 60 50
400 70 20
需要合并得到结果:
100    wang    man 90  80
200 wangsan woman 80    70
300 wangming man 60    50
400 wangzheng man 70    20
awk多⽂件操作⽅法⼀:
实现思路:
通过外部命令合并⽂件,然后通过排序,然后通过awk进⾏合并操作。
linux怎么读文件内容⾸先:
复制代码代码如下:
[chengmo@centos5 shell]$ b.txt | sort -n -k1 |awk '{print}'
100 90 80
100 wang man
200 80 70
200 wangsan woman
300 60 50
300 wangming man
400 70 20
400 wangzheng man
现在需要把:第⼀列相同的处理合并到⼀⾏,这⾥需要⽤“next”语句。它操作,可以参考awk 多⾏合并【next 使⽤介绍】(常见应⽤4)
继续:
复制代码代码如下:
[chengmo@centos5 shell]$ b.txt | sort -n -k1 |awk 'NR%2==1{fd1=$2"\t"$3;next}{print $0"\t"fd1}'
100 wang man 90 80
200 wangsan woman 80 70
300 wangming man 60 50
400 wangzheng man 70 20
需要把⼏⾏合并,经常⽤到⽅法是:NR%num 然后将⾏值保存下来,next该⾏。在输出时候打印出来。
awk多⽂件操作⽅法⼆
实现思路
不借助第3放⼯具打开,直接通过awk 打开多个⽂件。然后可以通过:FILENAME获得当前处理⽂件名。NR总记录 FNR当前⽂件记录,以及ARGC传⼊参数总数,ARGV是数组,各个参数值。
看下这些实例:
复制代码代码如下:
[chengmo@centos5 shell]$ awk 'BEGIN{print ARGC,ARGV[0],ARGV[1],ARGV[2]}{print FILENAME,NR,FNR,$0}' a.
3 b.txt
< 1 1 100 wang man
< 2 2 200 wangsan woman
< 3 3 300 wangming man
< 4 4 400 wangzheng man
< 5 1 100 90 80
< 6 2 200 80 70
< 7 3 300 60 50
< 8 4 400 70 20
程序代码:
复制代码代码如下:
[chengmo@centos5 shell]$ awk '
BEGIN{
if(ARGC<3)
{
exit 1;
}
file="";
}
{
aData[FILENAME,$1]=ARGV[1]==FILENAME?$0:$2"\t"$3;
}
END{
for(k in aData)
{
split(k,idx,SUBSEP);
if(idx[1]==ARGV[1] && (ARGV[2],idx[2]) in aData)
{
print aData[ARGV[1],idx[2]],aData[ARGV[2],idx[2]] | "sort -n -k1";
}
}
}' a.
100 wang man 90 80
200 wangsan woman 80 70
300 wangming man 60 50
400 wangzheng man 70 20
代码说明:
这⾥⽤到2维数组,aData[⽂件名,关联列对应值] ,这种⽅法可以将多个⽂件内容。放⼊⼀个统⼀⼆维数组。然后循环数组,通过if((i,j} in array) 查对应列值,在其它⽂件中是否存在。
以上是2种实现⽅法,其中第⼀种思路较为简单,很容易理解。第⼆种处理起来较为复杂。有更好⽅法⼤家给我分享。

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。