• 本帖最后由 king 于 2018-11-1 15:35 编辑 *

计划对文件去重重复行,网上看到这个两个python脚本说可以,win7运行出问题。
我python白痴一个,请教大佬是什么问题。

第一个:效率不错,但是去重运行到26800 kB就退出了
**import shutil
rFile = open("a.txt", "r")
wFile = open("b.txt", "w")
allLine = rFile.readlines()
rFile.close()
h = {}
for i in allLine:
if not h.has_key(i):
h=1
wFile.write(i)
wFile.close()**

第二个,效率太慢,1分钟才1M文件。。

"