文本行去重过滤器 - 保留或删除重复

去重保留唯一：每行内容只保留一次，删除所有重复项。这是最常用的标准去重模式，适合名单整理、关键词去重等场景。
仅保留重复行：只显示出现超过1次的行（每行显示一次），帮助你快速找出哪些行存在重复。
仅保留唯一行：只保留完全唯一的行（出现恰好1次），删除所有有重复的行。适合提取"独有"数据。
显示全部重复：保留重复行的每一次出现，删除所有唯一行。适合提取所有重复数据用于进一步分析。

完全安全。所有文本处理均在您的本地浏览器中完成，数据不会上传到任何服务器，也不会被存储或记录。即使您关闭页面，数据也会随之消失。适合处理敏感数据、隐私信息和商业数据。

勾选「区分大小写」时，"Hello"和"hello"被视为不同的行；取消勾选则视为相同。
勾选「忽略前后空格」时，" hello "和"hello"被视为相同，结果保留首次出现的原始格式。建议同时勾选这两个选项以获得最佳去重效果。如果您的数据格式严格统一，也可以取消勾选以保留精确匹配。

取决于您的设备性能，一般可流畅处理数万至数十万行的文本。对于10万行以内的数据，处理速度通常在毫秒级别。如果文本超过50万行，建议分批处理以获得更好的体验。浏览器内存是主要限制因素。

• 数据清洗：处理CSV/Excel导出的名单，去除重复条目
• 日志分析：提取日志中的唯一错误信息或重复出现的模式
• SEO关键词整理：去重关键词列表，生成唯一关键词集合
• 邮件列表整理：清理重复的邮箱地址
• 代码审查：查找重复的导入语句或配置项
• 学术研究：整理文献列表、去除重复引用