Simpan kejadian pertama bagi setiap token seperti perkataan dan cantumkan token yang tinggal dengan pemisah pilihan anda. Ikuti input dan tetapan tepat di bawah untuk menghasilkan semula contoh ini. Buka Alih Keluar Perkataan Pendua.
Sediakan teks sumber
Buka Buang Perkataan Pendua dan pilih Tulis atau tampal teks, atau muat naik fail teks UTF-8 yang disokong. Muat naik membuka editor; ia tidak menjalankan alat tersebut. Contoh ini menggunakan sumber tepat yang ditunjukkan dalam perbandingan.
Input dan hasil maksimum: 1 MB teks UTF-8, dengan had input 1,048,576 aksara. Transformasi yang mengembang juga mesti memuatkan had hasil.
Gunakan input contoh yang tepat
apple banana apple orange banana
Operasi teks ini berjalan dalam pelayar anda; sumber dan hasilnya tidak dihantar untuk penukaran. Draf mungkin disimpan dalam tab pelayar ini apabila storan sesi tersedia. Kosongkan akan membuang draf semasa; muat turun kerja penting sebelum menutup tab.
Pilih tetapan
Untuk contoh yang direkodkan, gunakan tetapan ini: Cantumkan perkataan unik dengan: , ; Padankan huruf besar/kecil: Mati.
Token dipisahkan oleh ruang putih. Dengan Padan huruf besar/kecil dimatikan, bentuk huruf besar/kecil yang berbeza berkongsi kunci perbandingan manakala ejaan pertama dikekalkan. Nilai Pemisah mencantumkan token unik; pemisah awal ialah koma diikuti dengan ruang.
Contoh dalam panduan ini
Disahkan dalam aliran kerja pelayar i2TEXT pada 11 November 2026.
- Input
- example.txt
- Output
- remove-duplicate-words.txt
- Hasil disimpan
- 21 bait
Gunakan dan periksa hasilnya
Pilih Buang Perkataan Pendua apabila input dan tetapan sedia. Dalam contoh yang disimpan, hasil bermula dengan: "apple, banana, orange".
Tanda baca kekal melekat pada tokennya, jadi perkataan dan perkataan, boleh dikira sebagai entri yang berbeza. Ini tidak menganalisis akar perkataan atau makna.
Ringkasan hasil membandingkan kiraan token asal dengan token unik yang dikekalkan dan menunjukkan Perkataan pendua dibuang. Perkataan dipisahkan oleh ruang kosong dan tanda baca kekal bersama, jadi laporan mengikut token input dan bukannya mengira semula output yang digabungkan.
Ringkasan hasil membezakan hasil yang berubah, tidak berubah dan kosong. Hasil yang tidak berubah bermakna operasi yang dipilih tidak mengubah teks; hasil kosong boleh menjadi hasil yang dijangkakan daripada pembuangan atau pengekstrakan.
Simpan versi yang anda semak
Semak hasil semasa, kemudian gunakan ikon muat turun untuk menyimpan fail TXT. Muat turun sebenar dalam contoh ini dinamakan remove-duplicate-words.txt. Salin dan muat turun menggunakan hasil semasa, jadi buat sebarang perubahan perkataan terakhir sebelum menyimpan. Teruskan ke boleh membawa hasil ke alat seterusnya yang serasi, di mana anda menyemaknya sebelum menjalankan operasi lain.
Menyunting hasil akan menyembunyikan butiran yang dikira sehingga anda menjalankan alat sekali lagi. Salin dan muat turun TXT menggunakan teks yang disunting; kembali ke sumber dan gunakan semula alat untuk mengemas kini laporan.
example.txtremove-duplicate-words.txt
Soalan lazim
Apakah tetapan yang menghasilkan contoh ini?
Cantumkan perkataan unik dengan: , ; Padankan huruf besar/kecil: Mati.
Apakah yang perlu saya semak sebelum menggunakan hasil?
Tanda baca kekal melekat pada tokennya, jadi perkataan dan perkataan, boleh dikira sebagai entri yang berbeza. Ini tidak menganalisis akar perkataan atau makna.
Di manakah teks ini diproses?
Operasi teks ini berjalan dalam pelayar anda; sumber dan hasilnya tidak dihantar untuk penukaran. Draf mungkin disimpan dalam tab pelayar ini apabila storan sesi tersedia. Kosongkan akan membuang draf semasa; muat turun kerja penting sebelum menutup tab.
Cuba Buang Perkataan Pendua dengan teks anda sendiri.
Gunakan sumber anda sendiri dan semak hasil sebelum berkongsi.
