ToolHub 工具箱

教程/工具教程

文本去重 教程

按行去重、排序。

打开工具 →Pro 与批量能力 →

概览

按行去重并可选排序/去空格，适合处理名单、关键词、IP 列表与日志片段。

适用场景

  • 清洗列表（trim/去重/排序）后喂给脚本
  • 生成 ID/密码用于测试数据

常见坑

  • CRLF/LF 换行差异会影响结果
  • 排序为字典序，数字可能需要补零

常见问题

会保留空行吗？

不会。默认过滤空行。

排序规则是什么？

按字符串字典序排序（localeCompare）。

示例

输入

a\nb\na\n

输出

a\nb