Přejít na obsah
Coverton Blog
V tomto článku
Tabulky a data

Odstraňte duplicitní řádky CSV: záhlaví a hodnoty

Dva záznamy, které sdílejí objednací kód, se mohou ještě lišit v ostatních hodnotách. Před vyhodnocením řádků odstraněných deduplikací definujte odpovídající sloupce a výskyt, který chcete zachovat.

Otevřete nástrojJak používat tento nástroj ↓
Odstraňte duplicitní řádky CSV
Ilustrace pracovního postupu tohoto nástroje; není to výsledek nahraného souboru.

Jak používat tento nástroj

  1. Vyberte soubory ve formátu CSV. Maximální počet souborů v dávce: 1.
  2. Zkontrolujte Klíčové sloupce (prázdné pro celý řádek), Duplicitní řádky, které chcete zachovat, Ořízněte přední a zadní mezery, Ignorujte rozdíly mezi velkými a malými písmeny a poté spusťte zpracování.
  3. Stáhněte si výsledek CSV a zkontrolujte jeho obsah a kvalitu.

Zvolte správná nastavení

Zadejte názvy sloupců klíče oddělené čárkami nebo je nechte prázdné, chcete-li porovnat celé řádky. Vyberte první nebo poslední uchování a možnosti oříznutí nebo bez ohledu na velikost písmen podle zamýšleného pravidla shody.

Podporovaný vstup
  • CSV
Výstup
  • CSV
Dostupná nastavení
  • Klíčové sloupce (prázdné pro celý řádek)
  • Duplicitní řádky, které chcete zachovat
  • Ořízněte přední a zadní mezery
  • Ignorujte rozdíly mezi velkými a malými písmeny

Než začnete

Ujasněte si význam vstupních dat

Před převodem určete, co představuje řádek nebo hodnota, a zachovejte zdrojovou kopii. U tabulek zkontrolujte záhlaví, oddělovače a kódování, u strukturovaných souborů požadované objekty nebo pole. Samotné zobrazení v tabulkovém programu neurčuje význam identifikátorů, dat a částek.

Dostupné sloupce pro párování, pravidla typů a výstupní pole vybírejte podle požadavků cíle. Vyzkoušejte vzorek s prázdnou hodnotou, opakováním a interpunkcí. U štítků, grafů a personalizovaných dokumentů zkontrolujte zdrojové sloupce, jednotky a formulace.

Předem stanovte kontroly: identifikátor se zachovaným zápisem, hodnotu se známým významem a očekávaný vztah záznamů. Při pravidlech typů či párování rozlišujte zdrojovou hodnotu od jejího zobrazení. Otestujte nejednoznačné datumové zápisy a různě zapsané klíče před použitím obecného pravidla. Uchovejte pravidla a požadavky s výsledkem, abyste odlišili chybu vstupu, výkladu a převodu.

Zkontrolujte hodnoty a výjimky

Výstup otevřete nebo importujte s nastavením cílového programu. Porovnejte záhlaví, počty záznamů a vzorky hodnot. Souhrn, rozdělení nebo odstranění duplicit může počet řádků záměrně změnit; ověřujte příčinu, nevyžadujte stejný počet po každé operaci.

Před pokračováním přečtěte zprávy o výjimkách a ověření. Při posunutých sloupcích, poškozených znacích či chybějícím klíči nejdříve zkontrolujte oddělovače, kódování a přesné názvy záhlaví. Kódování není šifrování a formátování nepotvrzuje význam. Tištěné kódy či štítky vyzkoušejte před vytvořením celé série.

Příklad vstupu a výstupu

opakované ID objednávky → CSV s zachovanými záznamy

Příklady popisují pracovní postup. Výsledky závisí na zdrojovém souboru a nastavení.

Před uložením zkontrolujte výsledek

Pro každý opakovaný klíč zkontrolujte zachovaný datum a hodnoty. zkontrolujte bílý prostor nebo varianty případu, které se stávají ekvivalentními při širším shodování, a zkontrolujte zachovaný pořadí řádku před použitím šířky.

Pokud se výsledek liší od toho, co jste očekávali

Neznámé názvy záhlaví nebo neplatné citace mohou zabránit zpracování. Možnost oříznutí použitá pro srovnání neznamená, že byly vyčištěny také bílé znaky v každé uložené buňce.

Omezení nástroje

  • Zkontrolujte kódování znaků, oddělovače a názvy sloupců. Velká čísla mohou ztratit přesnost v JavaScriptu; CSV nezachová všechny typy a vnořené struktury.
  • Ignorování mezer nebo rozlišování velkých a malých písmen může shrnout různé hodnoty.

Pokračujte se souvisejícími nástroji

Převést CSV na JSON

První řádek CSV poskytuje klíče pro objekt JSON každého řádku dat. Hodnoty buněk jsou uloženy jako řetězce, takže před předáním výsledku systému, který očekává čísla nebo booleovské hodnoty, zkontrolujte jejich typy.

Vyberte kódování zdroje a použijte automatickou detekci delimiteru nebo vyberte skutečný delimiter. Rozlište prázdné nebo duplicitní titulky a ujistěte se, že každý řádek má stejný počet sloupců jako titulek.

Otevřete nástroj

Převést JSON na CSV

Převod vyžaduje pole objektů. Rozhodněte, zda se vnořené objekty mají převést na samostatné sloupce, nebo zůstat jako řetězce JSON v buňkách. Výsledná tabulka se v každém případě čte jinak.

Zapněte zploštění, aby se názvy vlastností vnořených objektů změnily na záhlaví spojená tečkami. Pole se nerozbalují do více řádků; pokud chcete analyzovat každou položku pole, zkontrolujte tyto buňky samostatně.

Otevřete nástroj
CovertonOdstraňte duplicitní řádky CSV
Otevřete nástroj

Tento průvodce popisuje veřejně dostupný nástroj používaný v prohlížeči. Uchovejte si kopii originálu a před sdílením zkontrolujte výsledek.

Tento překlad byl připraven za softwarové pomoci. Můžete si také přečíst anglickou verzi. Číst v angličtině