如何取出文件内的重复行

 sort -u yourfile |uniq -w 13 -D

 13 是需要match的位数。