GALAXY OF TOOLS

English

Setor Texto

Remover linhas duplicadas

Apague linhas repetidas de qualquer lista ou texto, mantenha a primeira ou a última cópia e veja o que foi removido.

Duplicados encontrados

Esta ferramenta funciona inteiramente no seu navegador. Nada do que você digita ou envia vai para um servidor.

Grátis para todos. Se esta ferramenta poupou seu tempo, pague um café para a gente.

Remova as linhas duplicadas de qualquer lista em segundos

Listas de e-mail guardam o mesmo endereço duas vezes, exportações de palavras-chave repetem termos, logs repetem erros e colunas copiadas de uma planilha vêm cheias de repetidos. A ferramenta Remover linhas duplicadas limpa tudo isso na hora: cole o texto e cada linha repetida some, enquanto a ordem do resto fica exatamente como estava.

Você decide o que conta como duplicado: se “London” e “london” são iguais, se espaços soltos no começo ou no fim das linhas importam, o que fazer com as linhas em branco e se fica a primeira ou a última cópia de cada linha repetida. A ferramenta também lista cada duplicado encontrado e quantas vezes ele apareceu, o que ajuda quando você precisa saber o que se repetia, e não só se livrar disso. Tudo roda no seu navegador, então listas de clientes e dados privados nunca saem do seu dispositivo.

Como usar: Remover linhas duplicadas

  1. Cole sua lista na caixa de entrada, um item por linha. Texto copiado do Excel, do Google Planilhas ou de uma coluna CSV funciona direto.
  2. Escolha se fica a primeira ou a última ocorrência de cada linha repetida.
  3. Defina as opções: marque “Diferenciar maiúsculas” para tratar “London” e “london” como diferentes, e deixe marcado “Ignorar espaços no início e no fim das linhas” para pegar duplicados que só diferem por espaços invisíveis.
  4. Decida o que fazer com as linhas em branco e, se quiser, ordene o resultado de A → Z ou de Z → A.
  5. Confira o selo e a lista “Duplicados encontrados” e depois copie ou baixe as linhas únicas.

Recursos: Remover linhas duplicadas

Mantém a sua ordem

As linhas únicas continuam na ordem original, a menos que você escolha ordená-las, então listas numeradas ou por prioridade não se bagunçam.

Primeira ou última cópia

Mantenha a primeira ocorrência (o mais comum) ou a última, útil em logs e exportações em que o registro mais novo fica no fim.

Mostra o que foi removido

A contagem de linhas removidas e a lista de cada valor duplicado com o número de vezes que apareceu, do mais frequente ao menos.

Opções de espaços e maiúsculas

Ignore espaços no início e no fim e escolha comparar diferenciando ou não maiúsculas de minúsculas.

Comparação com Unicode

Letras acentuadas digitadas de jeitos diferentes (um “é” pré-composto ou “e” mais um sinal de acento) são reconhecidas como o mesmo texto.

Aguenta listas grandes

Dezenas de milhares de linhas são processadas em uma fração de segundo, tudo no seu dispositivo.

Quais ajustes usar?

Sua listaDiferenciar maiúsculasIgnorar espaços nas pontasLinhas em branco
Endereços de e-mailNão: na prática e-mails não diferenciam maiúsculasSimRemover
Palavras-chave ou tagsNãoSimRemover
URLsSim: os caminhos podem diferenciar maiúsculasSimRemover
Linhas de código ou configuraçãoSimNão: a indentação pode importarManter
Parágrafos de textoSimSimManter

Como os duplicados são detectados

Duas linhas são duplicadas quando ficam idênticas depois de aplicadas as opções que você escolheu. Com “Ignorar espaços no início e no fim das linhas” marcado, New York e New York   coincidem, mas a linha mantida é copiada exatamente como foi escrita. Com “Diferenciar maiúsculas” desmarcado, a comparação ignora maiúsculas, então Priya@Example.com e priya@example.com contam como uma só.

As linhas em branco têm um ajuste próprio porque costumam separar grupos em vez de carregar dados. “Manter todas as linhas em branco” não mexe nelas, “Remover linhas em branco” apaga todas e “Tratar como as outras” mantém só a primeira. Os fins de linha do Windows (CRLF) e do Unix (LF) são entendidos, e o resultado sempre usa quebras de linha padrão, que colam bem em qualquer lugar.

Dicas para listas mais limpas

  • Vai tirar endereços de uma conversa longa de e-mail ou de um documento? Passe antes pelo Extrator de e-mails e depois remova os duplicados aqui.
  • Linhas que parecem idênticas mas não coincidem costumam ter uma tabulação, um espaço não separável ou um caractere de largura zero. Limpe com Remover espaços extras e tente de novo.
  • Para comparar duas listas e ver o que está em uma e não na outra, use o Comparador de textos.
  • Precisa da lista em ordem alfabética, natural ou numérica? Ordenar linhas tem mais modos de ordenação e também remove duplicados enquanto ordena.

Remover linhas duplicadas: perguntas frequentes

Como removo linhas duplicadas de uma lista?

Cole a lista na caixa, um item por linha. Os duplicados somem na hora e as linhas únicas aparecem em “Linhas únicas”, prontas para copiar ou baixar como arquivo .txt.

Remover linhas duplicadas muda a ordem?

Não. As linhas ficam na ordem original e só as cópias extras são descartadas. Se quiser o resultado ordenado, escolha “Ordenar A → Z” ou “Ordenar Z → A” em “Ordem do resultado”.

Por que algumas linhas duplicadas não são removidas?

Provavelmente elas diferem um pouco: nas maiúsculas, nos espaços das pontas ou por caracteres invisíveis como tabulações e espaços não separáveis. Desmarque “Diferenciar maiúsculas”, deixe “Ignorar espaços…” marcado ou limpe o texto antes com Remover espaços extras.

Dá para ver quais linhas estavam duplicadas?

Dá. A caixa “Duplicados encontrados” lista cada valor repetido e quantas vezes apareceu, do mais frequente ao menos, e o selo mostra o total de linhas removidas.

Como removo duplicados no Excel?

No Excel, selecione a coluna e use Dados → Remover Duplicatas; no Google Planilhas, Dados → Limpeza de dados → Remover duplicatas. Colar a coluna aqui é mais rápido se você também quer opções de maiúsculas e espaços, ou uma lista do que foi removido.

Existe limite de linhas para deduplicar?

Não há limite fixo. Listas de 100,000 linhas ou alguns megabytes de texto funcionam nos navegadores modernos; entradas muito grandes só demoram um pouco mais. Seus dados ficam no seu dispositivo.

Estas também podem ajudar