゛遗憾完美°
发表于 2015-8-15 00:29
制作字典时去重复的小工具 1E1000W数据只需30S左右
在吾爱找到的,试后感觉可以,需要字典去重复的小伙伴看看啊。
急速去除字典重复内容
mmfdr
发表于 2015-8-15 08:53
随风飘 发表于 2015-8-15 08:10
这一类工具对于有中文的,格式多种文本会出错,找最早那个7G泄漏门测试一下。
试了一下,1G往上的比较慢
再测试500M左右的看看怎么样
无线世界真精彩
发表于 2015-8-15 01:10
谢谢分享 很有用
勾魂夺魄
发表于 2015-8-15 01:28
谢谢分享 :victory:
HiQ
发表于 2015-8-15 01:32
好东西,以往的字典早该更新了
0度的浪漫
发表于 2015-8-15 07:19
不错的哈哈
mmfdr
发表于 2015-8-15 07:22
不错的东东啊!{:5_239:}
随风飘
发表于 2015-8-15 08:10
这一类工具对于有中文的,格式多种文本会出错,找最早那个7G泄漏门测试一下。
xkl
发表于 2015-8-15 08:38
lshliveyou
发表于 2015-8-15 08:58
好东西拿出来了
xteng
发表于 2015-8-15 10:22
多文本去重复需要怎么操作?
zhucexiaohao
发表于 2015-8-15 10:37
这类小工具对于小字典来说比较快,随着字典增大,内存和时间会无法忍受