有選擇的刪除重復(fù)行

hgx126

一文件內(nèi)容如下：

1. 借據(jù)號(hào),代碼,計(jì)息日
   
2. 88130097410769,4005,20070610
   
3. 88130097410769,4005,20070610
   
4. 88130097410769,4005,20070611
   
5. 88130097410769,4005,20070611
   
6. 88130097423259,4005,20070701
   
7. 88130097423259,4005,20070701
   
8. 88130097423259,4005,20070928
   
9. 88130097423259,4005,20070928

復(fù)制代碼

以逗號(hào)為分隔符，第一列有許多重復(fù)項(xiàng)，現(xiàn)要求：同一行第一列相同的，只保留對(duì)應(yīng)第三列日期最大的行。如“88130097410769”重復(fù)的有四行，對(duì)應(yīng)第三列日期最大為“20070611”，就只保留第三行或第四行（第三行與第四行相同）。如果如下：

1. 借據(jù)號(hào),代碼,計(jì)息日
   
2. 88130097410769,4005,20070611
   
3. 88130097423259,4005,20070928

復(fù)制代碼

求awk命令代碼。

WilliBhamlll

1. awk -F, 'NR==1{print;next}a[$1]<$3{a[$1]=$3;b[$1]=$0;if(!d[$1]++)c[++n]=$1}END{for(i=0;i++<n;)print b[c[i]]}' file

復(fù)制代碼

Buring__

回復(fù) 1# hgx126

1. sort -unk3 -t, urfile |awk -F, '{a[$1","$2]=$3}END{for(i in a)print i","a[i]}'
   
2. 借據(jù)號(hào),代碼,計(jì)息日
   
3. 88130097410769,4005,20070611
   
4. 88130097423259,4005,20070928

復(fù)制代碼

zxy877298415

1. awk -F, '{if((!a)&&(!b)) {a=$1;b=$3;} else if(($1==a)&&($3==b)) {a=$1;b=$3} else if (($1==a)&&($3>b)){print $0;a=$1;b=$3} else if($1!=a) {a=$1;b=$3}}' file

復(fù)制代碼

   

yestreenstars

貌似已經(jīng)排好序了

1. awk -F, 'NR>1{if(t&&t!=$1)print s;t=$1;s=$0}END{print s}'

復(fù)制代碼

fangang001

[/ngbss/webapp/bin/test]cat data
88130097410769,4005,20070610
88130097410769,4005,20070610
88130097410769,4005,20070611
88130097410769,4005,20070611
88130097423259,4005,20070701
88130097423259,4005,20070701
88130097423259,4005,20070928
88130097423259,4005,20070928
[/ngbss/webapp/bin/test]sort -t',' -k1,1 -k3,3r data | awk -F',' '{if($1!=PR) print $0; PR=$1;}'
88130097410769,4005,20070611
88130097423259,4005,20070928

jcdiy0601

1. cat test|sort|awk -F"," '{a[$1]=$3}END{for(i in a)print i,$2,a[i]}'|sort

復(fù)制代碼

liion631818

1. 
   
2. awk -F "," 'BGEIN{
   
3. }
   
4. {
   
5.         if(NR==1)
   
6.                 print;
   
7.         else if(line[$1] < $NF ){
   
8.                 line[$1] = $NF;
   
9.                 line2[$1] = $(NF-1);
   
10.         }
    
11. }
    
12. END{
    
13.         for(l in line)
    
14.                 print l "," line2[l] "," line[l]
    
15. }
    
16. ' test.txt
    

復(fù)制代碼

ch_hoho

awk -F',' '{if(a[$1]<$3){a[$1]=$3;b[$1]=$0;}}END{for(i in b){print b[i]}}' file

冰諦

sort -t,  -k1n,1  -k3rn,3 -o file  file;sort -t, -k1n,1 -u file