Cara menggunakan
- Tempel daftar atau buka file UTF-8.
- Pilih kemunculan yang disimpan dan aturan perbandingan.
- Salin atau unduh baris yang tersisa.
Menghapus duplikat per baris
Simpan satu kemunculan tiap baris dan urutan relatif baris yang tersisa. Default membandingkan secara tepat dan menyimpan kemunculan pertama.
Pilih pangkas spasi, abaikan besar/kecil huruf, hapus baris kosong, atau normalisasi NFC sesuai data.
Satu baris per rekaman
Rekaman yang sama dihapus secara utuh. Baris baru terakhir adalah pembatas, bukan rekaman kosong tambahan. Baris kosong eksplisit tetap ada kecuali dihapus lewat opsi.
Apple
Banana
Apple
Cherry
Banana
Apple
Banana
Cherry
Apple dan Banana pertama tetap dalam urutan asal.
Kemunculan pertama atau terakhir
Pertama menyimpan yang paling awal; Terakhir yang paling akhir, sambil menjaga urutan baris tersisa. Abaikan besar/kecil membandingkan bentuk Unicode huruf kecil. NFC menyamakan bentuk ekuivalen kanonis tanpa menulis ulang baris yang disimpan.
Perubahan keluaran
Pemangkasan tiap baris berlaku untuk perbandingan dan keluaran. Aturan lain mempertahankan penulisan asli. BOM awal dan baris baru terakhir dipertahankan; pemisah campuran memakai bentuk pertama.
Teks: masukan hingga 5 MiB, 100.000 baris logis, keluaran 20 MiB, dan 10 detik. Regex: teks 1 MiB, pola 4.096 unit UTF-16, 500 kecocokan, dan 2 detik. File harus UTF-8. Semua diproses di perangkat Anda.
Pertanyaan umum
Apakah daftar juga diurutkan?
Tidak. Urutan asal baris tersisa dipertahankan. Gunakan pengurut teks untuk mengurutkan.
Apakah Apple dan apple sama?
Hanya jika abaikan besar/kecil aktif; default-nya perbandingan tepat.
Bisakah menyimpan kemunculan terakhir?
Ya. Pilih Terakhir untuk menghapus yang lebih awal.
Apa yang diubah NFC?
Bentuk Unicode ekuivalen kanonis dibandingkan sama, tetapi baris tersimpan tidak ditulis ulang.
Apakah ini Unicode case folding penuh?
Tidak. Hanya konversi huruf kecil, tanpa aturan lokal atau case folding penuh.