Hoppa till innehållet
Coverton Blogg
I den här artikeln
Tabeller och data

Så tar du bort dubbletter i CSV och väljer vilka poster som ska behållas

Två poster som delar en orderkod kan fortfarande skilja sig i sina andra värden. definiera matchande kolumner och vilken händelse att hålla innan du utvärderar raderna borttagna av deduplicering.

Öppna verktygetSå använder du verktyget ↓
Ta bort dubbletter av CSV-rader
Illustration av detta verktygs arbetsflöde; det är inte ett resultat från en uppladdad fil.

Så använder du verktyget

  1. Välj filer i formatet CSV. Maximalt antal filer per batch: 1.
  2. Granska Nyckelkolumner (tomma för hela raden), Duplicera rader att behålla, Trimma ledande och efterföljande utrymmen, Ignorera skillnader i versaler och gemener och börja sedan bearbeta.
  3. Ladda ner CSV-resultatet och kontrollera dess innehåll och kvalitet.

Välj rätt inställningar

Ange nyckelkolumnnamn som är separerade av commas eller lämna dem tomma för att jämföra hela rader. Välj första eller sista retention och trimming eller fallsensitiva alternativ enligt den avsedda matchningsregeln.

Indata som stöds
  • CSV
Utdata
  • CSV
Tillgängliga inställningar
  • Nyckelkolumner (tomma för hela raden)
  • Duplicera rader att behålla
  • Trimma ledande och efterföljande utrymmen
  • Ignorera skillnader i versaler och gemener

Innan du börjar

Fastställ vad uppgifterna betyder

Bestäm vad en rad eller ett värde representerar och spara en källkopia. I tabeller granskar du rubriker, avgränsare och teckenkodning; i strukturerade filer de objekt eller arrayer som krävs. Visningen i ett kalkylprogram avgör inte ensam betydelsen av identifierare, datum och belopp.

Välj tillgängliga matchningskolumner, typregler och utdatafält efter mottagarens krav. Prova ett urval med ett tomt värde, en upprepning och skiljetecken. För etiketter, diagram eller personanpassade dokument kontrollerar du källkolumner, enheter och formuleringar.

Bestäm kontroller i förväg: en identifierare som ska behålla sin stavning, ett värde med känd tolkning och en väntad relation mellan poster. Med typ- eller matchningsregler skiljer du källvärdet från programvisningen. Testa tvetydiga datum och olika skrivna nycklar innan en generell regel används. Spara regler och målkrav med resultatet så att skillnader kan härledas till indata, tolkning eller omvandling.

Verifiera värden och undantag

Öppna eller importera resultatet med målprogrammets inställningar. Jämför rubriker, antal poster och värdeprover med källan. Sammanställning, delning eller borttagning av dubbletter kan avsiktligt ändra antalet rader; kontrollera orsaken i stället för att kräva samma antal efter varje omvandling.

Läs undantags- eller valideringsrapporter innan du fortsätter. Vid förskjutna kolumner, felaktiga tecken eller saknade nycklar granskar du först avgränsare, kodning och exakta rubriknamn. Kodning är inte kryptering och formatering bekräftar inte betydelsen. Testa tryckta koder och etiketter innan hela serien görs.

Exempel på indata och utdata

Upprepad order ID → CSV med bevarade register

Exempel beskriver arbetsflödet. Resultaten beror på källfilen och inställningarna.

Kontrollera resultatet innan du sparar

För varje upprepade nyckel, granska de bevarade datum och värden. Kontrollera vitt utrymme eller fallsvarianter som blir motsvarande under bredare matchning, och kontrollera den sparade raden ordning innan du använder kalkylblad.

Om resultatet skiljer sig från vad du förväntade dig

Okända headernamn eller invalid citat kan förhindra bearbetning. Ett trimmingalternativ som används för jämförelse betyder inte att vitt utrymme i varje sparad cell också har rengjorts.

Gränser att tänka på

  • Kontrollera teckenkodning, avgränsare och kolumnnamn. Stora siffror kan förlora precision i JavaScript; CSV bevarar inte alla typer och kapslade strukturer.
  • Att ignorera mellanslag eller skiftlägeskänslighet kan sammanfatta olika värden.

Fortsätt med relaterade verktyg

Konvertera CSV till JSON

Den första CSV raden levererar nycklarna för varje data rad JSON objekt. Cellvärden lagras som strängar, så kontrollera sina typer innan du överför resultatet till ett system som förväntar sig siffror eller boolean värden.

Välj källkodning och använd automatisk delimiterdetektion eller välj den faktiska delimiter. Lös tomma eller dubbla rubriker och se till att varje rad har samma antal kolumner som rubriken.

Öppna verktyget

Konvertera JSON till CSV

Denna kalkylblad omvandling kräver en array vars ingångar är föremål. Besluta om nestade föremål ska bli separata kolumner eller förbli JSON strängar inuti celler, eftersom den resulterande kalkylblad läses annorlunda i varje fall.

Tillåta flätning för att omvandla nestade föremål egenskaper till headers anslutna med punkter. Arrays är inte utvidgade till flera rader, så granska dessa celler separat om du avser att analysera varje array objekt.

Öppna verktyget
CovertonTa bort dubbletter av CSV-rader
Öppna verktyget

Guiden beskriver det tillgängliga webbläsarverktyget. Behåll en kopia av originalet och kontrollera resultatet innan du delar det.

Denna översättning förbereddes med hjälp av programvara. Du kan också läsa den engelska versionen. Läs på engelska