用户名: 密码: 忘记密码? 注册

shell处理文件中的重复记录

作者:  时间: 2010-11-01
通过shell命令来处理文件中的重复记录:

awk '! a[$0]++' 4.txt >5.txt
这个是删除文件中所有列都重复的记录
awk '! a[$1]++' 5.txt >6.txt
删除文件中第一列重复的记录
awk '! a[$1,$2]++' 5.txt >6.txt
删除文件中第一,二列都重复的记录