linuxqwk将多个文件结果列合并到一个文件.docVIP

Linux下awk将多个文件的结果列合并到一个文件 在使用NS进行模拟结果数据处理的时候，往往需要对多组参数的结果进行比较来鉴别性能的优劣，这里编写了一个使用awk将多个同类型结果文件进行合并操作的脚本。如，NS模拟结果中，经常出现多个网络参数（协议类型、误码率、带宽、背景流、时延等）取不同值条件下进行一些网络指标（RTT，cwnd，吞吐量、网络利用率、公平性等）统计，这时会产生N多组实验结果，怎样对这么多组结果中的单个指标（常见的吞吐量）进行比较，如果使用手工粘贴到excel再进行绘图就显得任务量很大，显得人脑子比较笨（当然，最优秀的程序员永远是最懒的，我恰巧也是其中之一）。 小提示：为了方便NS模拟结果直接在excel里面打开，建议结果数据以文本形式（.txt，.dat）保存，各数据列之间用制表符\t（excel默认分隔符），这样在文件上右键-》Excel打开即可，而不用在excel里面使用数据导入向导设置分隔符这么麻烦。一切以提高生产效率和生活质量为根本出发点O(∩_∩)O~。 这里给出一个awk脚本来实现上面的问题。 test.awk: #!/usr/bin/awk -f BEGIN { #print ARGC; Index[ARGC];#记录各个文件的行下标 for(t=1;t=ARGC;t++) { Index[t]=0; } } { #文件数ARGC-1,第一个参数是应用程序名awk. for(t=1;t=ARGC;t++) { if(FILENAME==ARGV[t]) { line[t,Index[t]]=$0;#$0=整行,前提是各个文件行列之间已经被\t制表符分隔。 #line[t,Index[t]]=sprintf(%s\t%s,$1,$2);#如果固定为几列，也可以用这个。 Index[t]++; } } } END { maxcount=0; for(i=1;i=ARGC;i++) { if(Index[i]maxcount) maxcount=Index[i]; } #printf(maxcount:%d,maxcount); for(j=0;jmaxcount;j++) { for(i=1;i=ARGC;i++) { #多个文件的当前行拼接成一行 if(i==1) {#第一个文件 if(length(line[i,j])==0) str=\t\t;#一般操作的文件都是两列 else str=line[i,j];#第一次去掉制表符\t } else {#中间文件 if(length(line[i,j])==0) #中间行为空，将行内容替换为制表符\t str=sprintf(%s\t\t,str); else str=sprintf(%s\t%s,str,line[i,j]); } } printf(%s\n,str); } } 下面是测试结果： 命令行输入：awk -f test.awk rtt1.txt rtt.txt rtt2.txt out.txt Rtt1.txt: Rtt.txt: Rtt2.txt: 合并结果out.txt: 在excel里面打开结果：（out.txt右键-excel打开） 将rtt1.txt rtt.txt rtt2.txt out.txt文件合并， awk -f test.awk rtt1.txt rtt.txt rtt2.txt out.txt out2.txt 结果out2.txt： Excel中打开out2.txt