Преминете към съдържанието
Coverton Блог
В тази статия
Таблици и данни

Премахване на дублирани CSV редове: заглавия и стойности

Две записи, които споделят код за поръчка, все още могат да се различават в другите си стойности. Определете съвпадащите колони и какви събития трябва да се запазят, преди да се оценят редките, премахнати чрез дедуплиране.

Отворете инструментаКак да използвате този инструмент ↓
Премахване на дублирани CSV редове
Илюстрацията показва стъпките за използване на инструмента. Тя не е резултат от обработката на качен файл.

Как да използвате този инструмент

  1. Изберете файлове във формат CSV. Максимален брой файлове на партида: 1.
  2. Прегледайте Ключови колони (празни за цял ред), Дублирани редове за запазване, Изрежете началните и крайните интервали, Игнорирайте разликите между главни и малки букви, след което започнете обработката.
  3. Изтеглете резултата CSV и проверете неговото съдържание и качество.

Изберете правилните настройки

Въведете имена на ключови колони, отделени от комми или ги оставете празни, за да сравнявате цели редове. Изберете първото или последното задържане и опциите за изхвърляне или случайно нечувствителни, в съответствие с правилото за съответствие.

Поддържан вход
  • CSV
Изход
  • CSV
Налични настройки
  • Ключови колони (празни за цял ред)
  • Дублирани редове за запазване
  • Изрежете началните и крайните интервали
  • Игнорирайте разликите между главни и малки букви

Преди да започнете

Изяснете значението на входните данни

Преди преобразуване определете какво означава редът или стойността и запазете изходно копие. При таблици проверете заглавия, разделители и кодировка, а при структурирани файлове — нужните обекти или масиви. Видът в електронна таблица сам по себе си не определя смисъла на кодове, дати и суми.

Избирайте наличните ключови колони, правила за типове и изходни полета според получателя. Пробвайте извадка с празна стойност, повторение и препинателни знаци. За етикети, диаграми и персонализирани документи проверете източника на всяка колона, мерните единици и текстовете.

Задайте проверки предварително: код с непроменено изписване, стойност с известен смисъл и очаквана връзка между записи. При правила за типове или съпоставяне отделяйте изходната стойност от показването ѝ. Пробвайте двусмислени дати и различно изписани ключове преди общо правило. Запазете правилата и изискванията с резултата, за да различавате проблем във входа, тълкуването или преобразуването.

Сверете стойностите и изключенията

Отворете или импортирайте резултата с настройките на целевата програма. Сравнете заглавия, брой записи и примерни стойности. Обобщаване, разделяне или премахване на дубликати може умишлено да промени броя редове; проверявайте причината, вместо да очаквате еднакъв брой след всяка операция.

Прочетете отчетите за изключения и проверки преди продължаване. При разместени колони, повредени знаци или липсващ ключ първо проверете разделителя, кодировката и точните заглавия. Кодиране не е шифроване, а форматиране не потвърждава смисъла. Пробвайте отпечатаните кодове и етикети преди цялата серия.

Пример за въвеждане и извеждане

Повтаряни идентификатори за поръчка → CSV с запазени записи

Примери описват работния процес. Резултатите зависят от изходния файл и настройките.

Проверете резултата, преди да запазите

За всеки повтарящ се ключ, проверете запазената дата и стойности. Инспектирайте бели пространства или варианти на случая, които стават еквивалентни по време на по-широко съвпадение, и проверете запазения ред, преди да използвате раздела.

Ако резултатът е различен от очаквания

Неизвестни имена на заглавието или невалидно цитиране могат да предотвратят обработката. опцията за изхвърляне, използвана за сравнение, не означава, че белият пространство във всяка спасена клетка също е почистено.

Ограничения, които трябва да имате предвид

  • Проверете кодирането на символите, разделителите и имената на колоните. Големите числа могат да загубят прецизност в JavaScript; CSV не запазва всички типове и вложени структури.
  • Пренебрегването на интервали или чувствителност към главни и малки букви може да обобщи различни стойности.

Продължете със свързаните инструменти

Преобразувайте CSV в JSON

Първият ред CSV осигурява ключовете за всеки ред данни на обекта JSON. Целевите стойности се съхраняват като редове, така че проверявайте техните типове, преди да прехвърлите резултата към система, която очаква числа или булеанни стойности.

Изберете кодирането на източника и използвайте автоматично детектиране на пределите или изберете действителния пределите. Решете празни или дублиращи глави и уверете се, че всеки ред има същия брой колони като заглавието.

Отворете инструмента

Преобразувайте JSON в CSV

Преобразуването изисква масив от обекти. Изберете дали вложените обекти да станат отделни колони, или да останат JSON низове в клетките. Получената таблица се чете различно според избора.

Включете изглаждането на вложените обекти, за да се превърнат имената на свойствата им в заглавия, свързани с точки. Масивите не се разширяват в няколко реда; проверете тези клетки отделно, ако ще анализирате всеки елемент.

Отворете инструмента
CovertonПремахване на дублирани CSV редове
Отворете инструмента

Това ръководство описва публично достъпния инструмент, който работи в браузъра. Запазете копие на оригинала и проверете резултата, преди да го споделите.

Този превод е изготвен със софтуерна помощ. Можете да прочетете и английската версия. Прочетете на английски