Eliminador de líneas duplicadas

El Eliminador de líneas duplicadas es una herramienta gratuita que elimina las líneas repetidas del texto que pegues e indica cuántas quedan.

¿Cómo elimino líneas duplicadas?

Pega el texto con un elemento en cada línea, ejecuta la herramienta y copia el resultado limpio.

1. Organiza el contenido original de modo que cada dirección de correo electrónico, URL, código de producto u otro valor aparezca en su propia línea.
2. Envía el texto para eliminar los duplicados.
3. Comprueba los recuentos y revisa las líneas resultantes antes de utilizarlas en otro lugar.

La herramienta utiliza la operación array_unique de PHP. Cuando una misma línea aparece más de una vez, conserva la primera y elimina las coincidencias posteriores.

¿Cuándo ahorra tiempo eliminar líneas duplicadas?

Ahorra tiempo siempre que una lista haya acumulado entradas repetidas al exportar, copiar o combinar datos de varias fuentes.

• Las exportaciones de Excel y Google Sheets suelen contener direcciones de correo electrónico, números de referencia o códigos de inventario repetidos después de combinar varias hojas de cálculo.
• Los archivos de importación de Mailchimp pueden requerir que se eliminen las filas con direcciones de correo electrónico duplicadas antes de subirlos, aunque eliminar líneas no valida las direcciones ni concilia registros de contactos distintos.
• El trabajo con productos de Shopify puede generar SKU repetidos cuando se copian valores de más de un informe.
• Las exportaciones de Google Search Console pueden combinarse en una lista con una URL por línea y limpiarse antes de realizar otros análisis.
• Los archivos de configuración de GitHub, incluidas las listas sencillas de elementos permitidos o ignorados, pueden contener entradas idénticas añadidas por distintos colaboradores.

Conviene conservar una copia intacta del contenido original para poder recuperar cualquier línea eliminada como duplicada. Si permanece algún duplicado aparente, examínalo en un editor de texto sin formato que muestre los espacios finales y otros caracteres invisibles.

¿Cómo trata los espacios, las mayúsculas y la puntuación?

Compara el valor completo de cada línea, por lo que cualquier diferencia dentro de ella puede impedir que dos entradas coincidan.

Por ejemplo, "Manchester", "manchester" y "Manchester " son cadenas distintas porque cambia el uso de mayúsculas o hay un espacio final. Los números y los signos de puntuación también forman parte de la comparación, así que "INV-104" no coincide con "INV104". La operación no deduce que dos valores con formatos diferentes se refieran al mismo cliente, URL o producto.

El texto con acentos o caracteres no latinos puede almacenarse como cadenas de texto, pero dos textos Unicode visualmente idénticos pueden utilizar secuencias de caracteres subyacentes diferentes. Esas líneas pueden seguir considerándose distintas a menos que el texto se normalice antes. Si array_unique recibe varias líneas en blanco como valores vacíos repetidos, solo conserva el primer valor vacío.

En archivos muy grandes, puede resultar más práctico usar una función de hoja de cálculo o un script para eliminar los duplicados del conjunto completo de líneas que pegarlo en una herramienta del navegador.

¿Cómo interpreto el resultado?

Los campos del resultado muestran el número original de líneas, cuántas quedan y cuántas se han eliminado.

• Líneas es el número de líneas de la lista enviada.
• Nuevas líneas es el número de líneas que quedan tras eliminar los valores duplicados.
• Líneas eliminadas indica cuántos valores repetidos se han descartado.

Comprueba que el número de líneas eliminadas se corresponda con lo que esperabas. Una cifra inesperadamente baja suele indicar diferencias de espacios, mayúsculas o puntuación entre las líneas. Una cifra inesperadamente alta puede significar que las filas repetidas tenían un significado propio en los datos originales, como transacciones distintas con descripciones idénticas.

Ejemplos prácticos con líneas

Si las líneas de entrada son "pear", "apple" y "pear", el resultado contiene "pear" y "apple". Se elimina la segunda aparición de "pear" y se conserva el orden de las primeras apariciones.

En el caso de "London", "london" y "London " con un espacio final, los tres valores son distintos al comparar directamente las cadenas. Unificar primero las mayúsculas y eliminar los espacios del principio y del final sería una operación aparte.

Si los valores están separados por comas en lugar de saltos de línea, usa primero el Separador de texto para colocar cada valor en su propia línea. La eliminación de duplicados actúa sobre líneas completas, no sobre palabras individuales ni campos separados por comas dentro de una línea.

Preguntas frecuentes

¿Puedo eliminar duplicados de un archivo CSV?

Puedes pegar contenido CSV, pero la operación compara las filas completas como líneas. No eliminará duplicados de una sola columna manteniendo datos distintos en las columnas contiguas. Para buscar coincidencias por columnas, utiliza el comando Quitar duplicados de Excel, Google Sheets o un script compatible con CSV.

¿Por qué los elementos numerados de una lista no se consideran duplicados?

Los números iniciales forman parte de cada línea, por lo que "1. Bristol" y "2. Bristol" son valores diferentes. Si el nombre del lugar es el valor que quieres comparar, elimina la numeración antes de buscar duplicados.

¿Es seguro pegar información confidencial?

El procesamiento se realiza en el servidor. Los datos que introduces se envían al servidor mediante HTTPS y no se almacenan, pero salen de tu dispositivo durante el proceso. No envíes datos confidenciales o sujetos a normativas si la política de tu organización prohíbe transmitirlos a un servicio externo.

¿Puedo usarlo para limpiar JSON o código de programación?

Eliminar líneas repetidas sin tener en cuenta el contexto puede dañar JSON, código fuente y otros formatos estructurados en los que la repetición puede ser intencionada. Utiliza un analizador, un formateador o una herramienta específica del lenguaje cuando la estructura y la posición de las líneas influyan en el significado.

Comprobaciones finales

Revisa la lista limpia antes de importarla, especialmente si las líneas duplicadas pueden representar pedidos, pagos o eventos distintos. Conserva el archivo original hasta que el sistema de destino haya aceptado los datos revisados y hayas comprobado las líneas que la herramienta ha mantenido y eliminado.