如果是txt文件，先将将txt文件，用ArrayList读进内存，如果太大(比如三四十兆的那种)，可以下个分割txt文件的软件(我这儿就有个很好用的，可以给你发过去)，然后ArrayList里每一条字符串就对应着txt文件里的一行，然后对字符串进行解析处理即可
搜一下：两个TXT文本里面的数据怎么比对去掉重复，我这是大数据量有30万
