文本去重工具
逐行比对或用指定键字段判重，输出干净无冗余的结果集
永久免费本地计算 · 零上传
🔒 全程在浏览器内计算，输入内容不会离开您的设备。
怎么用
- 粘贴多行文本或 JSON 数组
- 选择去重模式（整行匹配/忽略大小写/按字段）
- 执行去重
- 查看删除数量并复制结果
典型场景
清理爬虫抓取到的重复 URL 列表
去除用户反馈中内容完全相同的条目
合并多份名单后剔除重复手机号
常见问题
能否忽略前后空格后判重？
提供 trim 预处理选项，去空格后再比较。
对 JSON 对象数组怎么判重？
可指定 id 或某字段作为唯一键进行对象级去重。
去重后顺序会变吗？
默认保留每个元素首次出现的位置不变。