重複數據過濾神器是一款高效安全,簡單使用,綠色免費的文件過濾器。在平時的工作中,經常會需要修改文本,可是有時會出現好多重複的數據,重複數據過濾神器能夠幫助用戶快速處理這些重複文件。
軟件功能強大,支持字符串過濾,也支持對.csv文件直接過濾。假如你采集了很多郵箱、淘寶買家帳號、QQ帳號,或其它類似的帳號、ID等信息,但裏麵有很多重複的數據,手工去除那太慢太煩容易出錯,那麼你應該用淘寶神器之重複數據過濾神器來過濾重複的數據(隻保留一次)。
支持多文件批量過濾刪除重複數據,支持多線程過濾,以列表方式友好顯示每個文件各自的過濾進度。
支持多文件合並過濾,如果你將數據保存在了多個文件中,不必合並,可以直接對這幾個文件進行合並及去重複過濾,最後保存為一個無重複數據的文件。
每個文件過濾都會提供過濾報告,並統計各個數據的重複次數,你可以再次按重複次數來篩選數據(比如在提取的淘寶交易訂單信息中,如果某個買家帳號出現的重複次數高於某個值,我們可以認為它可能是刷信譽的買家而非真買家從而再次去除等)。
本軟件主要針對QQ號、旺旺號、郵箱、手機等任何你想去除重複的字符串數據。
導入文本
輸入字符串過濾
csv文件過濾
140.5M / 09-05
76.4M / 03-25
55M / 06-05
237.9M / 04-13
900.9M / 03-02
96.2M / 07-06
311.2M / 07-06
335M / 07-06
200M / 07-06
413.8M / 07-06
484.7M / 09-27
165.4M / 09-05
353.9M / 06-05
131.8M / 04-13
195.6M / 03-03
45.6M / 09-08
665.2M / 07-06
2.84G / 07-06
93M / 07-06
338.3M / 07-06
1.38G / 07-26
488.3M / 07-16
109.8M / 06-03
142M / 01-08
1.2M / 11-23
548.8M / 04-13
1.6M / 04-13
1.48G / 03-18
646.6M / 03-03
133.7M / 03-03
110.5M / 09-05
33.4M / 09-05
325.8M / 08-12
60M / 04-29
254M / 04-25
659M / 04-23
1M / 12-26
253.4M / 12-08
253M / 12-08
1.19G / 11-16
369M / 09-22
181.5M / 09-22
201.2M / 09-05
488.3M / 07-16
248.9M / 12-08
248.9M / 12-08
100.6M / 03-06
148.9M / 03-06
1.12G / 07-06
1.25G / 07-06
126.7M / 02-04
1.76G / 09-22
1.92G / 04-17
201.5M / 04-13
7.31G / 07-01
94.3M / 07-06
2.48G / 07-06
7.63G / 07-06
1M / 07-06
778.1M / 07-06
561.8M / 07-11
72M / 07-06
548.7M / 07-06
1.00G / 07-06
9.13G / 07-06
126.2M / 07-06
72M / 07-06
105.1M / 07-06
132M / 07-06
132M / 07-06