Vous avez un fichier avec plusieurs milliers ou centaines de milliers de lignes et vous souhaitez supprimer les doublons comme par exemple un fichier de e-mailing, ou encore un fichier robots.txt truffé de lignes de spamreferers. Voici une méthode extrêmement rapide sous Mac OSX.
Préparer son fichier à nettoyer
Avant de commencer, vous devez faire un copier-coller des lignes à nettoyer dans un fichier .txt avec TextEdit par exemple.
Ensuite, vous avez juste à nommer votre fichier au format .txt contenant vos doublons et le placer sur votre bureau.
La ligne de code pour supprimer les doublons à l’intérieur d’un fichier.txt
Allez dans votre Spotlight et tapez Terminal.
Ligne de code à insérer dans Terminal
1 | sort -u ~/Desktop/nom_fichier_a_nettoyer.txt > ~/Desktop/nom_nouveau_fichier_tout_propre.txt |
Et voilà…
Gemini 2 de MacPaw est aussi pas mal bien que payant pour se débarasser des doublons sous Macintosh. Je recommande fortement cette application !