Supprime les lignes en double d'une liste ou d'un bloc de texte et indique combien ont été retirées. Utile pour nettoyer CSV, logs, listes d'URL, dumps de mots-clés et tout endroit où les répétitions se glissent.
Mode de conservation :
- Première occurrence — quand une ligne apparaît plusieurs fois, la première copie est conservée et les suivantes supprimées. C'est le choix habituel : il préserve l'ordre original de haut en bas que vous avez collé.
- Dernière occurrence — la dernière copie est conservée à la place. Pratique quand l'entrée la plus récente est celle à laquelle vous faites confiance (ex. un log où la dernière ligne prime).
Options de comparaison :
- Sensible à la casse (activé par défaut) — traite
Apple et apple comme des lignes distinctes. Désactivez-le pour les considérer comme des doublons.
- Couper les espaces avant comparaison — supprime les espaces/tabulations de début et de fin de chaque ligne avant de décider si deux lignes sont égales, ainsi
hello et hello comptent comme la même ligne. (La coupe ne sert qu'à comparer ; les espaces originaux des lignes conservées restent dans la sortie.)
- Ignorer les lignes vides — supprime les lignes vides (sans caractères ou seulement des espaces) au lieu de les réduire à une seule.
À savoir :
- Comparaison sur la ligne entière uniquement — cet outil ne déduplique pas les mots ou champs individuels au sein d'une ligne.
- Les compteurs dans les métadonnées vous donnent le nombre de lignes d'origine, le nombre conservé et combien de doublons ont été retirés.