Lewati ke konten
Coverton blog
Dalam artikel ini
Tabel dan data

Cara menghapus duplikat CSV dan memilih rekaman yang dipertahankan

Dua rekaman yang berbagi kode pesanan masih dapat berbeda dalam nilai-nilai lain mereka. menentukan kolom yang sepadan dan apa yang terjadi untuk disimpan sebelum menilai baris yang dihapus oleh deduplikasi.

Buka alatnyaCara menggunakan alat ini ↓
Hapus baris CSV duplikat
Ilustrasi alur kerja alat ini; gambar ini bukan hasil pemrosesan file yang diunggah.

Cara menggunakan alat ini

  1. Pilih file dalam format CSV. File maksimum per batch: 1.
  2. Tinjau Kolom kunci (kosongkan untuk baris penuh), Baris duplikat untuk disimpan, Pangkas spasi di depan dan di belakang, Abaikan perbedaan huruf besar dan kecil, lalu mulai memproses.
  3. Unduh hasil CSV dan periksa konten dan kualitasnya.

Pilih pengaturan yang tepat

Masukkan nama-nama kolom kunci yang dipisahkan oleh commas atau biarkan kosong untuk membandingkan seluruh baris. Pilih retensi pertama atau terakhir dan opsi pemotongan atau tidak sensitif kasus sesuai dengan aturan perlawanan yang diinginkan.

Masukan yang didukung
  • CSV
Keluaran
  • CSV
Pengaturan yang tersedia
  • Kolom kunci (kosongkan untuk baris penuh)
  • Baris duplikat untuk disimpan
  • Pangkas spasi di depan dan di belakang
  • Abaikan perbedaan huruf besar dan kecil

Sebelum mulai

Pahami kolom dan aturan penafsiran sebelum mengubah data

Periksa lembar, baris judul, pengodean karakter, dan pemisah yang benar. Kode produk dengan nol di depan merupakan pengenal, bukan angka biasa untuk dihitung. Tentukan urutan tanggal dan tanda desimal dari sumber agar nilai ambigu tidak ditafsirkan menurut kebiasaan lokal yang kebetulan berbeda.

Jika membandingkan, menggabungkan, atau menghapus duplikat, pilih kunci dan urutan berkas berdasarkan arti satu catatan. Kunci sama dapat memiliki informasi lain yang berbeda. Mengabaikan spasi atau huruf besar dapat menggabungkan perbedaan yang sah; tentukan kemunculan yang disimpan berdasarkan sumber.

Pada pemetaan kolom, periksa nilai sumber yang memasok setiap kolom tujuan. Pada label dan gambar tabel, periksa nama, kode, satuan, serta urutan tampilan. Uji QR dan barcode dengan pemindai. Alat tidak memberikan kode produk baru, dan ekspor tabel ukuran tidak mengonversi satuan.

Cocokkan catatan dan baca laporan pengecualian

Bandingkan jumlah baris, urutan kolom, dan pengenal terpilih dengan sumber. Perluasan nilai dalam satu sel dapat menambah baris, sedangkan penggabungan dapat menghilangkan catatan yang tidak cocok. Baca laporan nilai yang dibuang, tidak valid, atau belum terselesaikan sebelum memakai hasil.

Perubahan format tidak selalu mempertahankan seluruh model data. CSV tidak mewakili semua struktur JSON atau XML bertingkat, dan teks biasa tidak membawa tampilan lembar kerja. Base64 adalah pengodean yang dapat dibalik, bukan enkripsi. Minifikasi juga berbeda dari kompresi ZIP.

Jika gagal, periksa nama kolom persis, arah pemetaan, sintaks, dan tipe yang dibutuhkan. Operasi penjumlahan dan rata-rata membutuhkan angka, sedangkan penghitungan jumlah catatan tidak menjumlahkan nilainya. Pengodean salah atau digit yang sudah hilang tidak diperbaiki dengan menebak nilai. Uji impor di program penerima dan simpan sumber untuk pencocokan.

Contoh masukan dan keluaran

ID pesanan berulang → CSV dengan rekaman yang disimpan

Contoh menggambarkan alur kerja. Hasil tergantung pada file sumber dan pengaturan.

Periksa hasilnya sebelum Anda menyimpannya

Untuk setiap kunci berulang, periksa tanggal dan nilai yang disimpan. periksa ruang putih atau varian kasus yang menjadi setara di bawah matching yang lebih luas, dan periksa urutan baris yang disimpan sebelum menggunakan spreadsheet.

Jika hasilnya berbeda dari yang Anda harapkan

Nama tajuk yang tidak diketahui atau kutipan yang tidak sah dapat mencegah pemrosesan. opsi pemotongan yang digunakan untuk perbandingan tidak berarti bahwa ruang putih di setiap sel yang disimpan juga telah dibersihkan.

Batasan yang perlu diingat

  • Periksa pengkodean karakter, pemisah dan nama kolom. Jumlah yang besar dapat kehilangan presisi dalam JavaScript; CSV tidak mempertahankan semua tipe dan struktur bersarang.
  • Mengabaikan spasi atau sensitivitas huruf dapat meringkas nilai yang berbeda.

Pilih tugas berikutnya

Ubah CSV menjadi JSON

CSV baris pertama menyediakan kunci untuk setiap baris data objek JSON. nilai sel disimpan sebagai string, jadi memeriksa jenis mereka sebelum melewati hasil ke sistem yang mengharapkan angka atau nilai boolean.

Pilih kod sumber dan gunakan deteksi delimiter otomatis atau pilih delimiter yang sebenarnya.Selesaikan headers kosong atau duplicate dan pastikan setiap baris memiliki jumlah kolom yang sama dengan headers.

Buka alatnya

Ubah JSON menjadi CSV

Konversi spreadsheet ini membutuhkan array yang entri-nya adalah objek. memutuskan apakah objek yang dihiasi harus menjadi kolom terpisah atau tetap JSON string di dalam sel, karena spreadsheet yang dihasilkan dibaca berbeda dalam setiap kasus.

Memungkinkan flattening untuk mengubah sifat objek yang dihiasi menjadi headers yang terikat dengan titik. array tidak diperluas ke beberapa baris, jadi periksa sel-sel itu secara terpisah jika Anda berniat untuk menganalisis setiap item array.

Buka alatnya
CovertonHapus baris CSV duplikat
Buka alatnya

Panduan ini menjelaskan alat yang tersedia untuk digunakan di browser. Simpan salinan file asli dan periksa hasilnya sebelum membagikannya.

Terjemahan ini disiapkan dengan bantuan perangkat lunak. Anda juga dapat membaca versi bahasa Inggris. Baca dalam bahasa Inggris