Ferramentas de texto e dados

Remover duplicados de CSV

Identifique duplicados por linha completa ou campos escolhidos, preserve a primeira ocorrência e exporte CSV.

Conteúdo CSV

CSV sem duplicados

Pré-visualização da tabela

Remova duplicados por linha ou colunas, mantendo o primeiro registo, a ordem das colunas e o escape CSV correto.

Os ficheiros CSV são processados apenas no seu navegador e não são enviados para servidores.

Sobre esta ferramenta

O removedor de duplicados CSV compara linhas completas ou uma ou mais colunas selecionadas. Conserva o primeiro registo por predefinição e exclui o cabeçalho da comparação. Os números de coluna distinguem campos com o mesmo nome.

Como utilizar

  1. Cole CSV ou escolha um ficheiro UTF-8 e confirme o delimitador e o cabeçalho.
  2. Depois de ler as colunas, escolha comparar linhas completas ou selecione campos pelo nome e número de coluna.
  3. Clique em «Remover registos duplicados» e consulte os registos originais, únicos e removidos.
  4. Reveja a pré-visualização limitada e copie ou transfira o CSV com campos corretamente escapados.

Exemplos de utilização

  • a,b / 1,2 / 1,2 / 2,3 conserva dois registos ao comparar linhas completas.
  • id,nome / 1,Ana / 1,Luís / 2,Eva conserva 1,Ana e 2,Eva ao comparar a coluna id.
  • Os cabeçalhos repetidos nome (coluna 1) e nome (coluna 2) podem ser selecionados separadamente.

Regras e limites

A primeira linha é o cabeçalho por predefinição. Conserva-se o primeiro registo correspondente e a ordem original. Os campos são comparados exatamente, sem remover espaços nem alterar números. Campos com delimitadores, aspas ou quebras são corretamente colocados entre aspas no CSV. Limites de entrada: 2 MiB, 100 000 registos, 500 colunas e 500 000 células. Pré-visualização: 500 linhas, 100 colunas e 10 000 células.

Utilizações comuns

  • Remover registos repetidos de exportações de dados.
  • Conservar a primeira ocorrência de um ID, email ou conjunto de campos.
  • Organizar CSV sem substituir colunas com cabeçalhos repetidos.

Privacidade

O texto, os ficheiros e as pré-visualizações são processados no navegador. O conteúdo que introduz não é enviado nem guardado automaticamente. Guarde o que pretende conservar antes de sair da página.

FAQ

O que significa comparar linhas completas?

Só existem duplicados quando todos os campos coincidem em conteúdo e posição. O modo de colunas selecionadas compara apenas os campos escolhidos.

Que registo duplicado é conservado?

A primeira ocorrência completa. Todos os campos pertencem a esse registo e a ordem original é mantida.

Perdem-se dados com cabeçalhos repetidos?

Não. Todas as colunas são conservadas e os respetivos números permitem identificar e selecionar separadamente os campos com o mesmo nome.

Como são geradas as aspas na saída?

Campos com delimitadores, aspas ou quebras são envolvidos em aspas segundo as regras CSV; as aspas duplas interiores são duplicadas.

As fórmulas ou os espaços dos campos são alterados automaticamente?

Os campos não são reescritos nem os espaços removidos automaticamente. Ao importar numa folha de cálculo, escolha texto ou outro tipo de coluna de acordo com os dados.

Voltar ao catálogo de ferramentas para programadores