如何剔除重復(fù)號(hào)碼的行

iocg

如下的文本（文本間用tab）：


2015/10/5        吳女士        網(wǎng)絡(luò)中介        15900002687        日語
2015/10/15        林姐        留學(xué)中介        18000001217        英語
2015/10/7        杜先生        網(wǎng)搜        18900000906        口語
2015/10/19        陳小姐        TQ        13300009352        西班牙語
2015/10/0        陳小姐        TQ        13300009352        西班牙語
2015/10/24        吳女士        TQ        13500003866        日語
2015/10/6        李小姐        轉(zhuǎn)介紹        18600001706        英語
2015/10/27        王學(xué)        網(wǎng)搜        18500008867        韓語
2015/10/30        余先生        口碑        18500005868        日語
2015/11/1        湯同學(xué)        網(wǎng)搜        15600006137        德語
2015/11/3        林生        網(wǎng)搜        15900007553        雅思
2015/11/13        林女士        口碑        13000003966        口語
2015/11/13        王小姐        TQ        13900002264        日語
2015/11/17        同學(xué)        微博微信        18100003153        口語
2015/11/8        周女士        戶外廣告        13800009231        韓語
2015/10/27        王同學(xué)        網(wǎng)搜        18500008867        韓語
2015/10/30        余生        口碑        18500005868        日語
2015/11/1        湯同學(xué)        網(wǎng)搜        15600006137        德語
2015/11/13        林先生        網(wǎng)搜        15900007553        雅思
2015/11/13        林女士        口碑        13000003966        口語
2015/10/5        同學(xué)        微博微信        18500002966        日語
2015/10/15        吳女士        網(wǎng)絡(luò)中介        15900002687        日語
2015/10/5        林小姐        留學(xué)中介        18000001217        英語
2015/10/17        杜先        網(wǎng)搜        18900000906        口語
2015/10/13        同學(xué)        網(wǎng)搜        15600008199        韓語
2015/10/3        李先生        網(wǎng)搜        13100003060        法語
2015/10/13        林同學(xué)        校園宣傳        15900003700        雅思
2015/10/4        丁女士        網(wǎng)搜        13600003228        英語
2015/10/10        李士        口碑        15000000759        英語
2015/10/1        王同學(xué)        網(wǎng)搜        13200001278        韓語
2015/10/2        唐同學(xué)        微博微信        15700007973        雅思
2015/10/15        倪生        網(wǎng)搜        15500003277        日語
2015/10/5        劉先生        網(wǎng)搜        18600001322        韓語
2015/10/15        同        微博微信        18500002966        日語
2015/10/15        吳女士        網(wǎng)絡(luò)中介        15900002687        日語


============
所有行的號(hào)碼可能有重復(fù)，相同號(hào)碼視為同一人。
我想保留一個(gè)號(hào)碼就行了！

Riet

awk -F"\t" '{a[$4]=$0}END{for(i in a)print a[i]}'

hz_oracle

sort -k4 quchong.txt | uniq -f 3 -w 5

hz_oracle

sort -k4 quchong.txt | uniq -f 3 -w 5

jcdiy0601

awk '!a[$4]++' file
2015/10/5        吳女士        網(wǎng)絡(luò)中介        15900002687        日語
2015/10/15        林姐        留學(xué)中介        18000001217        英語
2015/10/7        杜先生        網(wǎng)搜        18900000906        口語
2015/10/19        陳小姐        TQ        13300009352        西班牙語
2015/10/24        吳女士        TQ        13500003866        日語
2015/10/6        李小姐        轉(zhuǎn)介紹        18600001706        英語
2015/10/27        王學(xué)        網(wǎng)搜        18500008867        韓語
2015/10/30        余先生        口碑        18500005868        日語
2015/11/1        湯同學(xué)        網(wǎng)搜        15600006137        德語
2015/11/3        林生        網(wǎng)搜        15900007553        雅思
2015/11/13        林女士        口碑        13000003966        口語
2015/11/13        王小姐        TQ        13900002264        日語
2015/11/17        同學(xué)        微博微信        18100003153        口語
2015/11/8        周女士        戶外廣告        13800009231        韓語
2015/10/5        同學(xué)        微博微信        18500002966        日語
2015/10/13        同學(xué)        網(wǎng)搜        15600008199        韓語
2015/10/3        李先生        網(wǎng)搜        13100003060        法語
2015/10/13        林同學(xué)        校園宣傳        15900003700        雅思
2015/10/4        丁女士        網(wǎng)搜        13600003228        英語
2015/10/10        李士        口碑        15000000759        英語
2015/10/1        王同學(xué)        網(wǎng)搜        13200001278        韓語
2015/10/2        唐同學(xué)        微博微信        15700007973        雅思
2015/10/15        倪生        網(wǎng)搜        15500003277        日語
2015/10/5        劉先生        網(wǎng)搜        18600001322        韓語

wjemail

請(qǐng)教一下，awk '!a[$4]++' file 這個(gè)是否如下理解呢？ 比如說第一次出現(xiàn)號(hào)碼1的時(shí)候，a[1]的值為零，第二次出現(xiàn)號(hào)碼1的時(shí)候，a[1]++就是1了，這時(shí)!a[$4]++就成了！1，相當(dāng)于not true，不匹配所以不輸出。

hz_oracle

回復(fù) 7# wjemail

是這樣理解的。聰明

   

liion631818

1. awk '{a[$4]++;if(a[$4]==1)print;}'

復(fù)制代碼

回復(fù) 1# iocg


   

jason680

回復(fù) 7# wjemail

awk初學(xué)之常見問題
http://www.72891.cn/thread-2309494-1-1.html