Cách giữ lại một bản sao của các từ lặp lại.

Mở Xóa từ trùng lặp và chọn Viết hoặc dán văn bản, hoặc tải lên tệp văn bản UTF-8 được hỗ trợ. Việc tải lên sẽ mở trình chỉnh sửa; nó không chạy công cụ. Ví dụ này sử dụng nguồn chính xác được hiển thị trong phần so sánh.

Đầu vào và kết quả tối đa: 1 MB văn bản UTF-8, với giới hạn đầu vào là 1,048,576 ký tự. Các phép biến đổi mở rộng cũng phải phù hợp với giới hạn kết quả.

apple banana apple orange banana

Đối với ví dụ đã ghi, hãy sử dụng các cài đặt sau: Nối các từ duy nhất bằng: , ; Khớp chữ hoa/thường: Tắt.

Các từ được phân tách bằng khoảng trắng. Khi tắt Khớp chữ hoa/thường, các dạng viết hoa khác nhau sẽ chia sẻ một khóa so sánh trong khi cách viết đầu tiên được giữ lại. Giá trị Dấu phân cách nối các từ duy nhất; dấu phân cách ban đầu là dấu phẩy theo sau bởi một khoảng trắng.

Nối các từ duy nhất bằng

,

Khớp chữ hoa/thường

Tắt

Chọn Xóa từ trùng lặp khi đầu vào và cài đặt đã sẵn sàng. Trong ví dụ đã lưu, kết quả bắt đầu bằng: "apple, banana, orange".

Dấu câu vẫn gắn liền với từ của nó, vì vậy từ và từ, có thể được tính là các mục khác nhau. Công cụ này không phân tích gốc từ hoặc ý nghĩa.

Tổng quan kết quả so sánh số lượng token gốc với các token duy nhất được giữ lại và hiển thị Từ trùng lặp đã xóa. Các từ được phân tách bằng khoảng trắng và dấu câu vẫn gắn liền, vì vậy báo cáo tuân theo các token đầu vào thay vì đếm lại đầu ra đã nối.

Tổng quan kết quả phân biệt các kết quả đã thay đổi, không thay đổi và trống. Kết quả không thay đổi có nghĩa là thao tác đã chọn không làm thay đổi văn bản; kết quả trống có thể là kết quả mong đợi của việc xóa hoặc trích xuất.

Xem lại Tổng quan kết quả hiện tại, sau đó sử dụng biểu tượng tải xuống để lưu tệp TXT. Tệp tải xuống thực tế trong ví dụ này có tên là remove-duplicate-words.txt. Sao chép và tải xuống sử dụng kết quả hiện tại, vì vậy hãy thực hiện mọi thay đổi về từ ngữ cuối cùng trước khi lưu. Tiếp tục đến có thể chuyển kết quả sang công cụ tương thích tiếp theo, nơi bạn xem lại kết quả trước khi chạy một thao tác khác.

Việc chỉnh sửa kết quả sẽ ẩn các chi tiết đã tính toán cho đến khi bạn chạy lại công cụ. Sao chép và tải xuống TXT sử dụng văn bản đã chỉnh sửa; quay lại nguồn và áp dụng lại công cụ để làm mới báo cáo.