TXT文本去重工具

软件使用说明

1. 选择输入方式：可直接粘贴文本内容，也可以选择一个或多个TXT文件进行批量处理。批量文件模式会保留原文件名，遇到重名会自动追加数字区分。
2. 使用示例数据：可点击人名列表、邮箱地址、关键词列表或混合数据按钮载入示例，先体验去重效果。
3. 配置去重规则：
   • 去除前后空格：清理每行开头和结尾的空白字符。
   • 删除空行：自动移除空白行；关闭后空行也会参与去重。
   • 忽略大小写：将Apple、APPLE、apple按相同内容判断。
   • 合并连续空格：把多个连续空格或制表符按一个空格比较。
   • 保持原始顺序：按内容首次出现的位置输出；关闭后可按文本规则排序。
4. 选择文件编码：根据TXT文件情况选择UTF-8、GB18030/GBK/GB2312、Big5或ISO-8859-1，中文乱码时可切换编码重试。
5. 开始处理：设置完成后点击“开始去重处理”，工具会生成统计信息和结果预览。
6. 下载结果：单个结果可直接下载；多个TXT文件处理后可点击“下载全部结果”获取ZIP压缩包。

常见问题