繰り返される単語のコピーを1つ保持する方法.

「重複単語の削除」を開き、テキストの書き込みまたは貼り付けを選択するか、サポートされているUTF-8テキストファイルをアップロードします。アップロードするとエディタが開きますが、ツールは実行されません。この例では、比較に示されている正確なソースを使用します。

最大入力および結果: 1 MBの UTF-8 テキスト（1,048,576文字の入力上限あり）。拡張変換も結果の制限内に収まる必要があります。

apple banana apple orange banana

記録された例では、次の設定を使用します：一意の単語を結合する文字：, 、大文字小文字の区別：オフ。

トークンは空白で区切られます。「大文字と小文字を区別」がオフの場合、大文字と小文字が異なる形式は比較キーを共有し、最初の綴りが保持されます。「区切り文字」の値は一意のトークンを結合します。初期の区切り文字はカンマとスペースです。

一意の単語を結合する文字

,

大文字と小文字を区別

オフ

入力と設定の準備ができたら、「重複単語の削除」を選択します。保存された例では、結果は"apple, banana, orange"で始まります。

句読点はトークンに付着したままになるため、「word」と「word,」は異なるエントリとしてカウントされる場合があります。これは単語の語根や意味を分析するものではありません。

結果の概要では、元のトークン数と保持された一意のトークン数を比較し、削除した重複語を表示します。単語は空白文字で区切られ、句読点は単語に付いたままになるため、レポートは結合された出力を再カウントするのではなく、入力トークンに従います。

結果の概要では、変更された結果、変更されていない結果、空の結果が区別されます。変更されていない結果は、選択した操作によってテキストが変更されなかったことを意味します。空の結果は、削除や抽出の結果として予期される出力である可能性があります。

現在の結果を確認し、ダウンロードアイコンを使用して TXT ファイルを保存します。この例での実際のダウンロードファイル名は remove-duplicate-words.txt です。コピーとダウンロードには現在の結果が使用されるため、保存前に最終的な文言の変更を行ってください。「次に進む」を使用すると、結果を互換性のある次のツールに引き継ぐことができ、別の操作を実行する前に確認できます。

結果を編集すると、ツールを再実行するまで計算された詳細は非表示になります。コピーと TXT ダウンロードには編集後のテキストが使用されます。元の状態に戻すには、ツールを再適用してレポートを更新してください。