Ga naar de inhoud
Coverton Bloggen
In dit artikel
Tabellen en gegevens

Verwijder dubbele CSV-rijen: kolomkoppen en waarden controleren

Twee records die een bestelcode delen, kunnen nog steeds verschillen in hun andere waarden. Definieer de overeenkomende kolommen en welke instance u wilt behouden voordat u de rijen evalueert die door deduplicatie zijn verwijderd.

Open het gereedschapHoe u dit hulpmiddel kunt gebruiken ↓
Verwijder dubbele CSV-rijen
Illustratie van de workflow van deze tool; het is geen resultaat van een geüpload bestand.

Hoe u dit hulpmiddel kunt gebruiken

  1. Kies bestanden in het CSV-formaat. Maximaal aantal bestanden per batch: 1.
  2. Controleer Sleutelkolommen (leeg voor volledige rij), Dubbele rijen om te behouden, Trim voor- en achterruimten, Negeer de verschillen tussen hoofdletters en kleine letters en start vervolgens de verwerking.
  3. Download het CSV-resultaat en controleer de inhoud en kwaliteit ervan.

Kies de juiste instellingen

Voer sleutelkolomnamen in, gescheiden door komma's, of laat ze leeg om hele rijen te vergelijken. Kies de eerste of laatste retentie en de opties voor bijsnijden of hoofdletterongevoelig volgens de beoogde matchingregel.

Ondersteunde invoer
  • CSV
Uitvoer
  • CSV
Beschikbare instellingen
  • Sleutelkolommen (leeg voor volledige rij)
  • Dubbele rijen om te behouden
  • Trim voor- en achterruimten
  • Negeer de verschillen tussen hoofdletters en kleine letters

Voor u begint

Leg de betekenis van de gegevens vast

Bepaal wat een rij of waarde voorstelt en bewaar een bronkopie. Controleer bij tabellen koppen, scheidingstekens en tekencodering; bij gestructureerde bestanden de vereiste objecten of arrays. Alleen de weergave in een spreadsheet bepaalt niet de betekenis van codes, datums en bedragen.

Kies aangeboden sleutelkolommen, typeregels en uitvoervelden volgens de eisen van de bestemming. Test een voorbeeld met een lege waarde, herhaling en leestekens. Controleer voor etiketten, grafieken of persoonlijke documenten uit welke kolom elke waarde komt en of eenheden en teksten kloppen.

Bepaal vooraf controles: een code die ongewijzigd moet blijven, een waarde met bekende betekenis en een verwachte relatie tussen records. Maak bij aangeboden type- of koppelregels onderscheid tussen bronwaarde en programmaweergave. Test dubbelzinnige datums en verschillend geschreven sleutels voordat u een brede regel gebruikt. Bewaar regels en bestemmingseisen bij het resultaat, zodat een verschil naar invoer, interpretatie of omzetting kan worden herleid.

Controleer waarden en uitzonderingen

Open of importeer de uitvoer met de instellingen van het doelprogramma. Vergelijk koppen, recordaantallen en steekproeven met de bron. Samenvatten, splitsen of duplicaten verwijderen kan het aantal bewust wijzigen; controleer waarom het verandert in plaats van altijd hetzelfde aantal rijen te verwachten.

Lees uitzonderings- en validatierapporten voor u verdergaat. Controleer bij verschoven kolommen, onleesbare tekens of ontbrekende sleutels eerst scheidingstekens, codering en exacte kopnamen. Coderen is geen versleuteling; opmaak bevestigt geen betekenis. Test gedrukte codes en etiketten voordat u de hele reeks maakt.

Voorbeeld invoer en uitvoer

herhaalde bestelling ID’s → CSV met bewaard records

Voorbeelden beschrijven de workflow. De resultaten zijn afhankelijk van het bronbestand en de instellingen.

Controleer het resultaat voordat u opslaat

Voor elke herhaalde sleutel, bekijk de bewaardde datum en waarden. Inspecteer witruimte of case varianten die gelijk worden bij bredere matching, en controleer de bewaardde volgorde voordat u het spreadsheet gebruikt.

Als het resultaat anders is dan u had verwacht

Onbekende headernamen of ongeldige aanhalingstekens kunnen de verwerking belemmeren. Een bijsnijdoptie die ter vergelijking wordt gebruikt, betekent niet dat de witruimte in elke opgeslagen cel ook is opgeschoond.

Gebruiksbeperkingen

  • Controleer de tekencodering, scheidingstekens en kolomnamen. Grote getallen kunnen de nauwkeurigheid in JavaScript verliezen; CSV behoudt niet alle typen en geneste structuren.
  • Het negeren van spaties of hoofdlettergevoeligheid kan verschillende waarden samenvatten.

Ga verder met verwante tools

Converteer CSV naar JSON

De eerste rij CSV levert de sleutels voor het JSON-object van elke gegevensrij. Celwaarden worden opgeslagen als tekenreeksen, dus controleer hun typen voordat u het resultaat doorgeeft aan een systeem dat getallen of Booleaanse waarden verwacht.

Selecteer de broncodering en gebruik de automatische delimiter detectie of selecteer de werkelijke delimiter. Resolve leeg of duplicate header en zorg ervoor dat elke rij hetzelfde aantal kolommen heeft als de header.

Open het gereedschap

Converteer JSON naar CSV

De conversie vereist een array met objecten. Kies of geneste objecten aparte kolommen krijgen of als JSON-tekenreeksen in cellen blijven. Die keuze bepaalt hoe de spreadsheet wordt gelezen.

Schakel afvlakken in om eigenschappen van geneste objecten om te zetten in kolomkoppen met punten. Arrays worden niet over meerdere rijen verdeeld. Bekijk die cellen apart als u elk array-item wilt analyseren.

Open het gereedschap
CovertonVerwijder dubbele CSV-rijen
Open het gereedschap

Deze handleiding legt de openbaar beschikbare tool voor de browser uit. Bewaar een kopie van het origineel en controleer het resultaat voordat u het deelt.

Deze vertaling is met softwarematige hulp tot stand gekomen. Je kunt ook de Engelse versie lezen. Lees in het Engels