Przejdź do treści
Coverton Bloga
W tym artykule
Tabele i dane

Usuń zduplikowane wiersze (CSV, Excel): klucze i niedopasowane wiersze

Wiersze o tym samym identyfikatorze zamówienia mogą zawierać różne informacje w innych kolumnach. Zdecyduj, które kolumny definiują duplikat i które wystąpienie powinno pozostać przed usunięciem rekordów.

Otwórz narzędzieJak korzystać z tego narzędzia ↓
Usuń zduplikowane wiersze
Ilustracja pokazuje sposób korzystania z narzędzia. Nie przedstawia wyniku przetwarzania przesłanego pliku.

Jak korzystać z tego narzędzia

  1. Dodaj tablicę i wybierz podwójne kolumny kluczowe.
  2. Wybierz pierwsze lub ostatnie wystąpienie i reguły dopasowywania spacji i wielkości liter.
  3. Uruchom zadanie i porównaj zachowane wiersze z raportem usunięcia.
  4. Pobierz wyczyszczony arkusz i raport.

Wybierz odpowiednie ustawienia

Wybierz zduplikowane kolumny kluczowe i zdecyduj, czy zachować pierwsze czy ostatnie wystąpienie. Ignoruj ​​spacje lub wielkość liter tylko wtedy, gdy różnice te nie pozwalają na rozróżnienie prawidłowych rekordów.

Przed rozpoczęciem

Ustal znaczenie danych wejściowych

Przed przekształceniem ustal, co oznacza wiersz lub wartość, i zachowaj kopię źródła. W tabelach sprawdź nagłówki, separatory i kodowanie, a w plikach strukturalnych wymagane obiekty lub tablice. Sam sposób wyświetlania w arkuszu nie wyjaśnia znaczenia identyfikatorów, dat i kwot.

Dobierz dostępne kolumny dopasowania, reguły typów i pola wyjściowe do wymagań odbiorcy. Wypróbuj próbkę z pustą wartością, powtórzeniem i interpunkcją. Dla etykiet, wykresów lub dokumentów spersonalizowanych sprawdź kolumny źródłowe, jednostki i brzmienie tekstu.

Ustal kontrole przed przetwarzaniem: identyfikator z zachowaną pisownią, wartość o znanym znaczeniu i oczekiwaną relację między rekordami. Przy regułach typu lub dopasowania odróżnij wartość źródłową od jej wyświetlania. Sprawdź niejednoznaczne daty i różnie zapisane klucze przed użyciem ogólnej reguły. Zachowaj reguły i wymagania z wynikiem, aby rozpoznać, czy różnica wynika z wejścia, interpretacji czy przekształcenia.

Zweryfikuj wartości i wyjątki

Otwórz lub zaimportuj wynik zgodnie z ustawieniami programu docelowego. Porównaj nagłówki, liczbę rekordów i próbki wartości. Podsumowanie, podział lub usuwanie duplikatów mogą celowo zmienić liczbę wierszy; sprawdź powód zmiany zamiast oczekiwać niezmiennego wyniku każdej operacji.

Przeczytaj raport wyjątków lub walidacji przed dalszą pracą. Przy przesuniętych kolumnach, błędnych znakach albo brakującym kluczu sprawdź separator, kodowanie i dokładne nazwy nagłówków. Kodowanie nie jest szyfrowaniem, a formatowanie nie potwierdza znaczenia. Przetestuj wydrukowane kody lub etykiety przed wykonaniem całej serii.

Przykładowe wejście i wyjście

powtarzające się klucze do zamówienia → utrzymywane arkusze + sprawozdanie z usuwania

Przykłady opisują przepływ pracy. Wyniki zależą od pliku źródłowego i ustawień.

Sprawdź wynik przed zapisaniem

Użyj oryginalnych numerów wierszy w raporcie usunięcia, aby zidentyfikować odrzucone rekordy. Porównaj zatrzymane kwoty, pola statusu lub dane kontaktowe ze źródłem, aby potwierdzić, że są potrzebne.

Jeśli wynik różni się od oczekiwanego

Jeśli znikną prawidłowe rekordy, sprawdź, czy wybrany klucz grupuje razem niepowiązane wiersze. Jeśli nadal występują duplikaty, sprawdź otaczające przestrzenie i zasady dotyczące wielkości liter przed uruchomieniem czyszczenia z różnymi opcjami.

Ograniczenia, o których należy pamiętać

  • Rekordy dzielące klucz mogą się różnić gdzie indziej. Przejrzyj raport o usunięciu. Zera wiodące i długie kody pozostają tekstem.

Przejdź do powiązanych narzędzi

Konwertuj CSV na JSON

Pierwszy wiersz CSV dostarcza klucze dla obiektu JSON każdego wiersza danych. Wartości komórek są przechowywane jako ciągi znaków, dlatego przed przekazaniem wyniku do systemu, który oczekuje liczb lub wartości logicznych, sprawdź ich typ.

Wybierz kodowanie źródłowe i użyj automatycznej detekcji delimiter lub wybierz prawdziwy delimiter. Rozwiąż pusty lub podwójne nagłówki i upewnij się, że każda kolejka ma taką samą liczbę kolumn jak nagłówek.

Otwórz narzędzie

Konwertuj JSON na CSV

Konwersja wymaga tablicy, której elementami są obiekty. Zdecyduj, czy zagnieżdżone obiekty mają tworzyć osobne kolumny, czy pozostać ciągami JSON w komórkach. W każdym przypadku tabelę odczytuje się inaczej.

Włącz spłaszczanie, aby nazwy właściwości zagnieżdżonych obiektów tworzyły nagłówki połączone kropkami. Tablice nie są rozwijane na wiele wierszy. Sprawdź te komórki osobno, jeśli chcesz analizować każdy element tablicy.

Otwórz narzędzie
CovertonUsuń zduplikowane wiersze
Otwórz narzędzie

Ten przewodnik opisuje publicznie dostępne narzędzie działające w przeglądarce. Zachowaj kopię oryginału i sprawdź wynik przed udostępnieniem.

To tłumaczenie zostało przygotowane przy pomocy oprogramowania. Możesz przeczytać także wersję angielską. Przeczytaj po angielsku