文本去重

去除文本中的重复行,支持保留原顺序或按字母排序。

文字编辑 · ToolBox

工具介绍

文本去重工具用于删除文本中重复出现的行,可选择保留原始顺序(第一次出现的行留下,后续重复行删掉)或在去重后按字母排序输出。典型场景包括:清理导出的邮箱列表、合并多份关键词表后去掉重复词、整理日志中的唯一记录、给问卷收集的答案去重。几百上千行数据用肉眼找重复几乎不可能,Excel 又需要导入导出,直接粘贴到这里一键就能得到干净的唯一行列表,还能顺便统计去掉了多少重复。免费使用,无需注册。

使用步骤

  1. 把包含重复行的文本粘贴到输入框,每行一条记录
  2. 选择去重模式:保留原始顺序,或去重后按字母排序
  3. 点击去重按钮,查看处理后的唯一行列表和数量变化
  4. 复制结果,粘贴回表格、文档或其他工具中

常见问题

去重时区分大小写吗?

工具按行的完整内容进行比对。如果文本同时存在大小写不同的版本(如 Apple 和 apple),建议先用大小写转换工具统一格式后再去重,效果更彻底。

空行会被一起删掉吗?

重复的空行也属于重复内容,去重后通常只会保留一个空行。如需彻底清除空行,可配合文本压缩或空白字符清理工具处理。

去重后顺序会乱吗?

选择“保留原顺序”模式时,每一行第一次出现的位置保持不变,只删除后面重复出现的行;选择排序模式才会按字母重新排列。