DEDUPLICATE

定义 Definition

deduplicate（动词）：去重；把重复的内容（如数据、文件、记录、文本片段等）识别出来并合并/删除，只保留一份，以节省空间或避免重复计算。（常见于数据处理、存储、编程与信息管理语境）

发音 Pronunciation

/ˌdiːˈdjuːplɪkeɪt/

例句 Examples

We deduplicate the email list before sending the newsletter.
我们在发送简报之前先对邮件名单进行去重。

To improve performance, the system deduplicates identical files across users while keeping correct access permissions.
为了提升性能，系统会对不同用户之间完全相同的文件进行去重存储，同时仍然保持正确的访问权限控制。

词源 Etymology

由前缀 **de-**（表示“去除、减少”）+ duplicate（“重复的；复制品”）构成，字面意思就是“把重复的去掉”。该词在现代英语中常用于计算机与数据工程领域，强调对重复信息的识别与消除。

相关词 Related Words

• De-duplicate
• Duplicate
• Redundant
• Unique
• Normalize
• Consolidate
• Merge
• Filter
• Compression

文学与著作中的用例 Literary Works

• Designing Data-Intensive Applications（Martin Kleppmann）——讨论数据系统中的存储、复制与去重等工程概念时常出现相关用语。
• Hadoop: The Definitive Guide（Tom White）——在大规模数据处理与数据清洗/去重的语境中使用该词。
• Data Management for Researchers（Kristin Briney）——在研究数据整理、清理与去重的实践建议中出现该词。