UD5工具箱
文本去重工具提供了全面而灵活的功能体系，涵盖了文本去重处理的各个方面。以下是各核心功能的详细介绍：
1. 三种去重模式
工具提供三种去重模式，每种模式适用于不同的数据处理需求：
保留第一个（Keep First）：当同一行文本出现多次时，保留首次出现的那一行，删除其后所有重复项。处理后结果中每行都是唯一的，且保持了原始文本中首次出现的顺序。此模式适用于大多数常见的去重场景，例如清理邮件列表时保留最早录入的地址、整理客户名单时保留首次记录的信息等。
保留最后一个（Keep Last）：当同一行文本出现多次时，保留最后一次出现的那一行，删除之前的所有重复项。处理后结果中每行同样是唯一的，但保留的是最后出现的版本。此模式适用于需要获取最新数据的场景，例如从日志文件中提取每个事件的最新状态、从多次更新的配置列表中保留最新条目等。
删除全部重复（Remove All Duplicates）：将所有出现次数超过一次的行全部移除，仅保留那些在整个文本中只出现过一次的唯一行。此模式适用于筛选真正唯一的条目，例如从多组数据中找出没有重复的记录、检测数据中的唯一值和重复值分布等。
2. 大小写敏感控制
工具提供「大小写敏感」开关，让用户自由控制比较重复行时是否区分英文字母的大小写。当开关开启时（默认状态），「Apple」和「apple」被视为两个不同的行，不会被判定为重复；当开关关闭时，两者会被视为相同行，去重时会合并处理。这一功能在处理包含英文内容的文本时非常实用——例如整理用户输入的邮箱列表时，同一地址可能以不同大小写形式出现（如「User@Example.com」和「user@example.com」），关闭大小写敏感即可正确识别为同一地址。
3. 忽略空行
「忽略空行」选项启用后，工具会在去重处理过程中自动清除文本中的所有空行（包括纯空格行和制表符行）。空行通常是在文本编辑、复制粘贴或数据导出过程中产生的无意义内容，它们不仅占用空间，还可能干扰去重判断。启用此选项后，输出结果将不含任何空行，文本更加紧凑整洁。该选项与去重操作独立工作，即使文本中没有重复行，启用后也会自动清除所有空行。
4. 去除首尾空格
「去除首尾空格」选项启用后，工具会自动修剪每行文本首尾的空白字符，包括空格、制表符（Tab）、不间断空格等。在实际数据中，同一行文本可能因为排版、复制来源不同而带有不同的首尾空白——例如「 你好 」和「你好」在内容上完全相同，但因为首尾空格的差异会被视为不同的行。启用此选项后，所有行的首尾空白都会被自动清除，确保内容相同的行能被正确识别为重复行。
5. 实时行数统计
工具提供实时的文本行数统计功能，在用户输入或粘贴文本后立即分析并展示四项关键数据：总行数（输入文本的完整行数，包括重复行）、重复行数（被判定为重复的行数）、删除行数（去重操作后将被移除的行数）和保留行数（去重操作后将保留在结果中的行数）。这些统计数据随文本内容、去重模式和辅助选项的变化实时更新，让用户在执行去重操作前就能清楚了解处理结果的数量变化，便于评估去重效果。
6. 一键复制与下载
去重处理完成后，用户可以通过「复制结果」按钮一键将去重后的文本复制到剪贴板，方便直接粘贴到其他应用程序中使用。也可以通过「下载结果」按钮将去重后的文本保存为TXT文件到本地，便于存档和后续处理。两种输出方式灵活便捷，满足不同的使用习惯。
7. 纯前端本地处理
本工具的所有文本处理逻辑均在浏览器本地执行，基于JavaScript实现，不需要任何后端服务器参与。用户粘贴或输入的文本数据完全在浏览器内存中处理，不会通过任何网络请求传输到远程服务器。这意味着即使在没有网络连接的环境下（已缓存页面），工具也能正常工作。同时，用户的文本数据——无论是敏感的业务数据、个人信息还是隐私内容——都不会离开本地设备，从技术架构层面保障了数据安全。