Supprimer les doublons dans un fichier sous Mac OSX
Vous avez un fichier avec plusieurs milliers ou centaines de milliers de lignes et vous souhaitez supprimer les doublons comme par exemple un fichier de e-mailing, ou encore un fichier robots.txt truffé de lignes de spamreferers. Voici une méthode extrêmement rapide sous Mac OSX.
Préparer son fichier à nettoyer
Avant de commencer, vous devez faire un copier-coller des lignes à nettoyer dans un fichier .txt avec TextEdit par exemple.
Ensuite, vous avez juste à nommer votre fichier au format .txt contenant vos doublons et le placer sur votre bureau.
La ligne de code pour supprimer les doublons à l’intérieur d’un fichier.txt
Allez dans votre Spotlight et tapez Terminal.
Ligne de code à insérer dans Terminal
|
1 |
sort -u ~/Desktop/nom_fichier_a_nettoyer.txt > ~/Desktop/nom_nouveau_fichier_tout_propre.txt |
Et voilà…