重複単語削除ツール
テキストを貼り付けてモードを選んでください。連続した繰り返しのみは「the the」のようなタイプミスを「the」にまとめ、ほかの文章には触れません。単語リスト内のすべての重複は、単語リストに含まれる各単語の最初の1つだけを残します。削除された単語数と残った単語数が表示されます。無料、会員登録不要。テキストがブラウザの外に出ることはありません。
モード
0 単語
重複単語削除ツールの使い方
- モードを選びます。 文章や段落には連続した繰り返しのみを、キーワード、タグ、語彙には単語リスト内のすべての重複を選びます。
- テキストを貼り付けます。 入力欄の下のカウンターに、貼り付けた単語数が表示されます。
- 重複を削除を押します。 クリーニングされたテキストが下に表示され、削除された重複単語数と残った単語数の2つのカードが付きます。
- 確認してからコピーします。 使う前に結果を一度読んでください。意図的な繰り返しもあります（下記参照）。結果をコピーを押すと、クリップボードに入ります。
各モードの動作
連続した繰り返しのみは、同じ単語が2回以上続けて現れ、間にあるのが1行内のスペースやタブだけの場合を探し、1つだけ残します。比較では大文字・小文字を区別しないため、「The the」は「The」にまとめられます（最初の出現の大文字・小文字はそのまま残ります）。どれだけ長い連続も1語になります。ハイフンやアポストロフィは単語の一部として扱われ、アクセント付きのラテン文字や、キリル文字、アラビア文字、デーヴァナーガリー文字など、単語の間にスペースを入れる文字体系でも機能します。
このモードは意図的に慎重な設計になっています。行をまたいで繰り返される単語、コピーの間に句読点がある繰り返し（"very, very"）、数字がくっついた繰り返し（"the the2"）は、どれも意図的かもしれないため、そのまま残されます。
単語リスト内のすべての重複は文章ではなく、リスト用です。各行をスペースとタブで分割し、単語を小文字にして比較し、後の写しがどこにあっても、各単語の最初の出現だけを残します。入力した改行と空行は保持されますが、すべての単語が重複だった行は空行として残らず削除されます。句読点は単語の一部として扱われるため、"tips," と "tips" は別の項目になります。
具体例
連続した繰り返しを、つっかえた単語が4か所と、3つ続いた箇所が1か所ある20語の文に適用した例：
入力
I went to to the the store and and bought bread. The the cat sat sat sat on the mat.
出力
I went to the store and bought bread. The cat sat on the mat.
削除された重複は6個（3つ続いた箇所は2個と数えます）、残りは14語です。「mat」の前にある無関係な「the」は残ることに注意してください。背中合わせの繰り返しだけがまとめられます。次は短い単語リストでのリストモードです：
入力
red green blue Red green yellow blue purple
出力
red green blue yellow purple
3語が削除されました — "Red"、2つ目の "green"、2つ目の "blue" — 残りは5語です。各単語の最初の写しはもとの位置に残るため、2行目は "yellow" だけに縮みます。
意図的な繰り返し
英語にも正当な二重語があります："She had had enough"、"the idea that that author raised"、"no, no, no"。連続モードは最初の2つをまとめてしまうため、最終稿に貼り付ける前に出力を確認してください。意図的な繰り返しがあるリストや詩にこのモードを使うと、意味が変わってしまうこともあります。
同じ注意はリストモードにはさらに強く当てはまります。通常の文章に使うと、後に出てくるすべての "the"、"and"、"a" を削除してしまいます："The cat saw the dog and the cat ran." は "The cat saw dog and ran." になります。リストにだけ使ってください。
どのツールが必要ですか？
| やりたいこと | 使うツール |
|---|---|
| 段落中の "the the" のようなタイプミスを直す、または単語のリストを重複除去する | このページ |
| 1行に1項目の重複を除去する（大文字・小文字の選択と空行の削除付き） | 重複行を削除 |
| テキスト中のすべての異なる単語を、出現数付きでアルファベット順に一覧する | ユニーク単語抽出ツール |
| 近くで繰り返されているが隣接していない単語を探す | Word Repetition Checker |
| 2つのリストが共有する項目と、片方にだけある項目 | リスト比較 |
よくある質問
- 文章から重複単語を削除するにはどうすればよいですか？
- テキストを貼り付け、モードを選んで「重複を削除」を押してください。背中合わせに繰り返された単語をまとめるには「連続した繰り返しのみ」を、リスト内の各単語の最初の1つだけを残すには「単語リスト内のすべての重複」を使います。通常の文章には1つ目のモードを使ってください。
- 「the the」のような二重になった単語はどう直せますか？
- 「連続した繰り返しのみ」を選んで、文章を貼り付けてください。同じ行で背中合わせに繰り返されるものは、大文字・小文字に関係なく1語にまとめられ、件数に削除された数が表示されます。
- 最初の写しと最後の写しのどちらが残りますか？
- 最初の写しです。どちらのモードでも、最初の出現が元のつづりと大文字・小文字を保ちます。リストモードでは、後に小文字の "red" が出てきても最初の "Red" が残ります。比較では大文字・小文字を区別しないためです。
- なぜ私のテキストに "very, very" が残ったのですか？
- 2つの単語の間にカンマ、ピリオド、その他の記号があると、連続した単語とはみなされません。ツールは、強調のための繰り返しがよくあるため、テキストをそのままにする方に寄せています。どうしても削除したい場合は、余分な単語を手で削除してください。
- すべての単語が重複している行はどうなりますか？
- リストモードでは、その行のすべての単語がすでに前に出現していた場合、行が削除されるため、1行に1語のリストに空白が残りません。自分で入力した空行は残ります。1行に1項目で行全体を比較したい場合は、重複行を削除を使うと、空行も削除できます。
- 英語以外の言語でも使えますか？
- 単語をスペースで区切る言語であれば使えます。アクセント付きのラテン文字、キリル文字、アラビア文字、デーヴァナーガリー文字を含みます。中国語や日本語は単語の間にスペースがないため分割できず、文字の連なり全体が1つの単語として扱われます。
- テキストはどこかに送信されますか？
- いいえ。単語の比較はブラウザ内で行われ、テキストはアップロードも保存もされません。