Перейти до вмісту
Coverton Блог
У цій статті
Таблиці та дані

Видаліть повторювані рядки CSV: заголовки та значення

Два записи, що мають спільний код замовлення, можуть відрізнятися іншими значеннями. Визначте відповідні стовпці та те, яке входження зберегти, перш ніж оцінювати рядки, видалені дедуплікацією.

Відкрийте інструментЯк користуватися цим інструментом ↓
Видаліть повторювані рядки CSV
Ілюстрація робочого процесу цього інструменту; це не результат завантаженого файлу.

Як користуватися цим інструментом

  1. Виберіть файли у форматі CSV. Максимальна кількість файлів на пакет: 1.
  2. Перегляньте Ключові стовпці (порожні для повного рядка), Зберегти повторювані рядки, Вирізати пробіли на початку та в кінці, Ігноруйте відмінності у верхньому та нижньому регістрах, а потім почніть обробку.
  3. Завантажте результат CSV і перевірте його вміст і якість.

Виберіть правильні налаштування

Введіть назви ключових стовпців, розділивши їх комами, або залиште їх порожніми, щоб порівняти цілі рядки. Виберіть перше чи останнє збереження та параметри обрізання або без урахування регістру відповідно до передбачуваного правила відповідності.

Підтримувані вхідні дані
  • CSV
Результат
  • CSV
Доступні налаштування
  • Ключові стовпці (порожні для повного рядка)
  • Зберегти повторювані рядки
  • Вирізати пробіли на початку та в кінці
  • Ігноруйте відмінності у верхньому та нижньому регістрах

Перед початком

З’ясуйте значення вхідних даних

Перед перетворенням визначте, що означає рядок або значення, і збережіть копію джерела. У таблицях перевірте заголовки, роздільники й кодування, у структурованих файлах — потрібні об’єкти чи масиви. Вигляд у табличній програмі сам по собі не визначає зміст кодів, дат і сум.

Вибирайте доступні ключові стовпці, правила типів і вихідні поля за вимогами одержувача. Випробуйте зразок із порожнім значенням, повтором і розділовими знаками. Для етикеток, діаграм і персоналізованих документів перевірте джерельні стовпці, одиниці та формулювання.

Заздалегідь визначте перевірки: ідентифікатор із незмінним написанням, значення з відомим змістом та очікуваний зв’язок записів. За наявності правил типів чи зіставлення відрізняйте початкове значення від його показу. Перевірте неоднозначні дати й по-різному записані ключі до застосування загального правила. Збережіть правила та вимоги з результатом, щоб пов’язати розбіжність із введенням, тлумаченням або перетворенням.

Звірте значення й винятки

Відкрийте або імпортуйте результат із налаштуваннями цільової програми. Порівняйте заголовки, кількість записів і вибіркові значення. Підсумовування, поділ чи видалення дублікатів можуть навмисно змінити кількість рядків; перевіряйте причину, а не вимагайте однакового числа після кожної операції.

Прочитайте звіти про винятки або перевірки перед продовженням. Якщо стовпці зсунулися, символи спотворені чи ключ відсутній, спершу перевірте роздільник, кодування і точні назви заголовків. Кодування не є шифруванням, форматування не підтверджує змісту. Випробуйте друковані коди чи етикетки до виготовлення всієї серії.

Приклад введення та виведення

Повторні ідентифікатори замовлення → CSV з збереженими записами

Приклади описують робочий процес. Результати залежать від вихідного файлу та налаштувань.

Перед збереженням перевірте результат

Перевірте білий простір або варіанти випадку, які стають еквівалентними під час більш широкого збігу, і перевірте збережений порядок ряду перед використанням шини.

Якщо результат відрізняється від очікуваного

Невідомі імена заголовків або недійсні лапки можуть перешкоджати обробці. Параметр обрізання, використаний для порівняння, не означає, що пробіли в кожній збереженій клітинці також були очищені.

Пам’ятайте про обмеження

  • Перевірте кодування символів, роздільники та назви стовпців. Великі числа можуть втратити точність у JavaScript; CSV не зберігає всі типи та вкладені структури.
  • Ігнорування пробілів або чутливості до регістру може підсумовувати різні значення.

Продовжити з пов’язаними інструментами

Перетворіть CSV на JSON

Перший рядок CSV надає ключі для об’єкта JSON кожного рядка даних. Значення клітинок зберігаються як рядки, тому перевірте їх типи, перш ніж передавати результат системі, яка очікує чисел або логічних значень.

Виберіть кодування джерела і використовуйте автоматичне виявлення делімітера або виберіть реальний делімітер. Розв'яжіть порожні або подвійні заголовки і переконайтеся, що кожна рядка має таку ж кількість стовпів, як і заголовка.

Відкрийте інструмент

Перетворіть JSON на CSV

Для перетворення потрібен масив об’єктів. Вирішіть, чи вкладені об’єкти мають стати окремими стовпцями, чи залишитися рядками JSON у клітинках: від цього залежить спосіб читання таблиці.

Увімкніть розгортання вкладених об’єктів, щоб назви їхніх властивостей стали заголовками, з’єднаними крапками. Масиви не розгортаються в кілька рядків; перевірте такі клітинки окремо, якщо потрібно аналізувати кожен елемент масиву.

Відкрийте інструмент
CovertonВидаліть повторювані рядки CSV
Відкрийте інструмент

Цей посібник описує загальнодоступний інструмент, що працює в браузері. Збережіть копію оригіналу та перевірте результат перед поширенням.

Цей переклад було підготовлено за допомогою програмного забезпечення. Ви також можете прочитати англійську версію. Читайте англійською