重复词查找与删除

重复的词会悄悄混进每一份草稿：同一个形容词在一段里出现三次，或者改了一行之后留下一个不小心写重的“而且 而且”。这个工具会列出你用了不止一次的词及其次数，修正写重的词，也可以清理关键词或标签列表，让每个词只保留第一个。它适用于浏览器能切分出词的任何语言，包括韩语、日语和中文。

使用方法

1. 粘贴文本或词语列表。
2. 选择列出重复词、修正不小心写重的词，或删除所有重复。
3. 列出和删除时，设置最小词长，以及是否忽略 the、and 这样的常见英语单词。
4. 复制结果；表格会显示每个重复的词以及找到的每处重复。

计算公式

重复词 = 转成小写后（除非区分大小写）出现次数不少于 2 的词，不含短词和常见词

词语由浏览器的 Unicode 分词器（Intl.Segmenter）识别，它能处理撇号、重音以及没有空格分隔的文字。不小心写重指同一个词连续出现两次，中间只隔着空格或一次换行；中间若有逗号或句号，就不算写重。“had had”和“that that”常常是正确的，会被保留。删除重复时，被删词后面的分隔符（空格、逗号或分号）会一并删除，使列表保持整洁。

示例

在示例文本中，“设计”出现 4 次，“结果”出现 3 次，“团队”和“而且”各出现 2 次。工具还会找到两处不小心写重的词，“结果 结果”和“而且 而且”，修正模式会删除它们各自的第二个词。