删除重复行 在线去重排序清理文本内容工具
文本里重复行太多理不清？去除文本中的重复行，支持排序、区分大小写和空格处理，适合整理列表、日志和CSV数据清洗，结果可复制。
更新于 2026-08-16
相关工具
功能特性
- 删除重复行：精确匹配或不区分大小写去重
- 按字母顺序升序（A-Z）和降序（Z-A）排序
- 按行长度排序：从短到长或从长到短
- 反转行序，翻转整个列表
- 随机打乱行顺序
- 删除空行并修剪每行的空白字符
- 实时显示处理前后的行数
- 一键复制结果到剪贴板
- 示例文本快速体验所有功能
- 首次加载后支持离线使用
使用方法
- 1在输入区域粘贴或输入文本（每行一项）。
- 2勾选「去重」删除重复行。可选择区分大小写或不区分大小写。
- 3选择排序方式：A-Z 排序、Z-A 排序、按长度排序、反向或打乱。
- 4切换「删除空行」和「修剪空白」获得更干净的输出。
- 5点击「复制」将处理后的结果复制到剪贴板。
- 6查看实时行数统计，了解去重过程中删除了多少行。
- 7使用「按长度排序」从短到长排列项目，便于浏览。
- 8使用「打乱」随机化顺序，用于抽奖或随机选择。
常见问题
如何删除文本中的重复行？
将文本粘贴到输入区域，然后勾选「去重」复选框。选择「区分大小写」会将「Apple」和「apple」视为不同行，选择「不区分大小写」则视为相同。去重结果即时显示在输出区域。
区分大小写和不区分大小写的去重有什么区别？
区分大小写去重将「Apple」和「apple」视为不同的行（两者都保留）。不区分大小写则将其视为重复（只保留第一个出现）。当大小写重要时使用区分大小写，一般列表清理使用不区分大小写。
按行长度排序如何工作？
行按字符数（含空格）比较。「从短到长」从字符最少到最多排序。「从长到短」则相反。相同长度的行保留原始相对顺序。
如何删除空白行？
勾选「删除空行」即可移除空白行。还可以勾选「修剪空白」去除每行首尾空格。这两个选项可以与去重和排序同时使用。
打乱选项能产生真正随机的结果吗？
打乱功能使用 Fisher-Yates 算法实现无偏随机化。每种排列都是等概率的。适用于随机选择、抽奖或混洗列表顺序。
如何在 Excel 中删除重复行？
如果每行数据在独立单元格里（单列），选中该列后使用「数据 > 删除重复值」，Excel 默认保留第一次出现的行。如果整个列表是单个单元格里的一长串文本，先用「数据 > 分列」或粘贴到单列中拆成多行，再去重。处理粘贴出来的纯文本列表时，本工具更快，不用跟格式规则较劲。
如何在 Notepad++ 或 VS Code 中删除重复行？
Notepad++ 没有内置去重：先排序（编辑 > 行操作 > 按字典序升序排列），再用正则把 ^(.*)(?:\r?\n\1)+$ 替换为 $1，把相邻的相同行合并成一行。VS Code 中先全选，在命令面板运行「Sort Lines Ascending」（按行升序排序），再做同样的正则查找替换（带 g 标志）。先排序是正则生效的关键；重复行只有相邻后才能被合并。
如何从 CSV 或列表中删除重复行？
粘贴列表（每行一项），勾选「去重」，大多数数据清理任务选择不区分大小写。对于 CSV 文件，此工具将每行作为单个字符串处理；如需基于特定列去重，先提取该列，去重后再与原始数据集合并。
「A-Z 排序」和「按长度排序」有什么区别？
A-Z 排序按字母顺序排列（如'apple'、'banana'、'cherry'）。按长度排序按字符数从短到长排列（如'fig'(3)、'apple'(5)、'banana'(6)）。按名称查找用字母序；识别短条目或长条目用长度排序。
可以处理数千行的超长列表吗？
可以。工具在浏览器中用 JavaScript 数组快速处理文本。100,000+ 行的列表也能处理，不过超大数据集可能稍有延迟。处理前后的实时行数统计帮助验证结果。
清理混乱列表的最佳方法是什么？
效果最好的做法是全部启用：先修剪空白去除首尾空格，然后删除空行消除空白条目，启用不区分大小写去重合并'Apple'和'apple'，最后 A-Z 排序获得有序输出。
「反向」选项与其他排序有何不同？
反向仅翻转行的顺序，不做任何排序比较。如果列表是 [A, B, C]，反向得到 [C, B, A]。这与 Z-A 排序不同（字母降序排序）。需要保留分组但反转顺序时使用反向。
为什么去除后还有一些重复？
最常见的原因是看不见的差异：行尾空格（「abc 」和「abc」）、行首空白、制表符与空格不同、或换行符不同（Windows 文件的 CRLF 与 Unix 的 LF）。不区分大小写模式处理大小写但不处理空白。请先规范化文本（去掉行尾空格或使用去空行选项），再重新去重。如果从 Windows 编辑器粘贴，仅 CRLF 换行就足以让相同行看起来不同。
能保留重复行中的最后一行而不是第一行吗？
不能直接做到；去重逻辑固定保留首次出现的行。两步变通：先「反向」，再去重，再「反向」，结果保留的是每行最后一次出现的位置，顺序也恢复原样。要自动化的话，同样的两步写在 Python 或 awk 里就是一行的事。
除了去重，还能统计每行出现的次数吗？
不能。本工具只去重和排序，不做频次统计。需要频率表的话，把文本粘进电子表格做数据透视，或用 Python 的 collections.Counter、awk 的 '{c[$0]++} END {for (k in c) print c[k], k}' 一行搞定。本工具的去重结果正好可以当作这项分析的干净底稿。
误开了去重，把需要的重复行删了，还能找回吗？
本页找不回：没有撤销功能，工具只处理输入面板里当前的内容。如果原始文本还在（另一个标签页、编辑器或来源文件），粘贴回来重来即可；这里不存储、不上传，也没有其他可恢复的东西。以后建议：把新副本粘进输入框，输出确认无误前保留原始文本；复制结果前先看状态栏里的处理前后行数。
「删除空行」会把只有空格的「假空行」也删掉吗？
不会。「删除空行」只删真正为空的行，带空格或制表符的行仍算内容。想把这种「看不见的空行」也清掉，先开启「修剪空白」（去掉每行首尾空格），再执行「删除空行」；或者两个选项一起开。这和「去重后仍有重复」是同一类问题：空白差异让看起来相同的行变得不相等。