Gå til indhold
Coverton Blog
I denne artikel
Tabeller og data

Sådan fjerner du dubletter i CSV og vælger, hvilke poster der skal beholdes

To arkiver, der deler en ordre kode, kan stadig adskille sig i deres andre værdier. definere de matchende kolonner og hvad der sker for at holde før evaluering af rækkerne fjernet ved deduplication.

Åbn værktøjetSådan bruger du dette værktøj ↓
Fjern dublerede CSV-rækker
Illustration af dette værktøjs arbejdsgang; det er ikke et resultat af en uploadet fil.

Sådan bruger du dette værktøj

  1. Vælg filer i formatet CSV. Maksimalt antal filer pr. batch: 1.
  2. Gennemgå Nøglekolonner (tom for fuld række), Dublerede rækker at beholde, Trim førende og efterfølgende rum, Ignorer forskelle med store og små bogstaver, og start derefter behandlingen.
  3. Download resultatet i CSV, og kontrollér indhold og kvalitet.

Vælg de rigtige indstillinger

Indtast nøglekolonne navn adskilt af commas eller lad dem tomme for at sammenligne hele rækker. Vælg den første eller sidste retention og trimming eller case-insensitive muligheder i henhold til den hensigtsmæssige matching regel.

Understøttet input
  • CSV
Output
  • CSV
Tilgængelige indstillinger
  • Nøglekolonner (tom for fuld række)
  • Dublerede rækker at beholde
  • Trim førende og efterfølgende rum
  • Ignorer forskelle med store og små bogstaver

Før du begynder

Afklar betydningen af inputdata

Bestem, hvad en række eller værdi repræsenterer, og gem en kildekopi før ændringer. I tabeller skal du gennemgå overskrifter, separatorer og tegnkodning; i strukturerede filer de krævede objekter eller arrays. Visningen i et regneark afgør ikke alene betydningen af identifikatorer, datoer og beløb.

Vælg tilbudte matchkolonner, typeregler og outputfelter efter modtagerens behov. Prøv en stikprøve med en tom værdi, en gentagelse og tegnsætning. For etiketter, diagrammer eller personligt tilpassede dokumenter skal du kontrollere kildekolonner, enheder og formuleringer.

Fastlæg kontroller på forhånd: en identifikator med uændret stavning, en værdi med kendt betydning og en forventet relation mellem poster. Ved type- eller matchregler skal kildeværdien skelnes fra programmets visning. Test tvetydige datoer og forskelligt skrevne nøgler før en generel regel. Gem regler og målkrav sammen med resultatet, så forskellen kan knyttes til input, fortolkning eller omformning.

Kontrollér værdier og undtagelser

Åbn eller importér resultatet med målprogrammets indstillinger. Sammenlign overskrifter, antal poster og udvalgte værdier med kilden. Opsummering, opdeling eller fjernelse af dubletter kan bevidst ændre antallet; kontrollér årsagen i stedet for at kræve samme antal rækker efter enhver omformning.

Læs undtagelses- og valideringsrapporter før næste skridt. Ved forskudte kolonner, forkerte tegn eller manglende nøgler skal du først kontrollere separator, kodning og præcise overskriftsnavne. Kodning er ikke kryptering, og formatering bekræfter ikke betydningen. Test trykte koder og etiketter før hele serien fremstilles.

Eksempel på input og output

gentagne ordre ID’er → CSV med bevarede optegnelser

Eksempler beskriver arbejdsgangen. Resultaterne afhænger af kildefilen og indstillingerne.

Tjek resultatet før du gemmer

For hver gentagne nøgle, gennemgå de bevarede datoer og værdier. Inspekter hvidspace eller case varianter, der bliver tilsvarende under bredere matching, og kontrollere den bevarede rækkefølge, før du bruger regneark.

Hvis resultatet er anderledes end forventet

Unknown header names eller invalid quoting kan forhindre behandling. En trimming-option, der anvendes til sammenligning, betyder ikke, at hvidspace i hver gemt celle også er blevet rengjort.

Grænser at huske på

  • Tjek tegnkodning, separatorer og kolonnenavne. Store tal kan miste præcision i JavaScript; CSV bevarer ikke alle typer og indlejrede strukturer.
  • Ignorering af mellemrum eller følsomhed for store og små bogstaver kan opsummere forskellige værdier.

Fortsæt med relaterede værktøjer

Konverter CSV til JSON

Den første CSV række leverer nøglerne til hver data række JSON objekt. Cell værdier er gemt som strenge, så inspicere deres typer, før du overfører resultatet til et system, der forventer tal eller boolean værdier.

Vælg kildekodning og brug automatisk delimiterdetektion eller vælg den virkelige delimiter. løse tomme eller duplikerede overskrifter og sørg for, at hver række har det samme antal kolonner som overskriften.

Åbn værktøjet

Konverter JSON til CSV

Denne regneark konvertering kræver en række, hvis indtægter er objekter. Bestem om nestede objekter skal blive separate kolonner eller forblive JSON strenge inde i cellerne, fordi den resulterende regneark læses anderledes i hvert tilfælde.

Tillad flændering til at omdanne nestede objekts egenskaber til header, der er forbundet med punkter. Arrays er ikke udvidet til flere rækker, så gennemgå disse celler adskilt, hvis du har til hensigt at analysere hvert array element.

Åbn værktøjet
CovertonFjern dublerede CSV-rækker
Åbn værktøjet

Denne vejledning beskriver det tilgængelige browserværktøj. Gem en kopi af originalen, og kontrollér resultatet, før du deler det.

Denne oversættelse er udarbejdet med softwareassistance. Du kan også læse den engelske version. Læs på engelsk