Super rapide : Sous Linux, trouvez les fichiers en double en quelques clics

Navigation Rapide:

1. 1. Comment les fichiers en double sont générés dans votre système Linux
2. 2. Pourquoi devriez-vous supprimer les fichiers en double sous Linux
3. 3. Comment rechercher et nettoyer les fichiers en double Linux (3 méthodes efficaces!)
4. 4. Guide supplémentaire : identifiez et supprimez les fichiers en double en quelques étapes simples (manuellement ou automatiquement)

Nous avons l'habitude de télécharger divers fichiers ou contenus à partir du Web. De plus, nous transférons continuellement des fichiers sur nos ordinateurs. En conséquence, nous aurions de nombreux fichiers en double dans notre système sans nous en rendre compte. Il est courant de trouver le même fichier sur votre disque de stockage dans différents répertoires ou de sauvegarder certains fichiers dans plusieurs emplacements, ou vous pouvez avoir des fichiers en double avec des noms différents mais le même contenu.

Les doublons sont généralement un gaspillage d'espace de stockage. Ils occupent une quantité considérable de stockage et peuvent entraîner un manque de stockage système. Par conséquent, il est essentiel de localiser et d'éviter que les fichiers en double ne consomment trop d'espace. Cet article vous guidera à travers les meilleures façons de trouver les fichiers en double et de les supprimer.

Comment les fichiers en double sont générés dans votre système Linux

Les fichiers en double sont des copies identiques des fichiers originaux stockés ou installés sur votre système Linux. Diverses raisons peuvent conduire à ce que ces fichiers apparaissent légitimement sur votre système. Il existe de nombreux types de fichiers en double contenant des documents, des fichiers audio, vidéo, des images et des fichiers exécutables. Trop de fichiers redondants dans un système Linux peuvent nuire à ses performances globales.

Vous pouvez rencontrer plusieurs problèmes sous Linux causés par des fichiers en double. Avoir des fichiers en double peut augmenter considérablement la charge sur Linux. Par conséquent, les performances et les fonctionnalités peuvent souffrir en raison de fichiers encombrés.

Voici quelques façons dont les fichiers en double peuvent apparaître sur votre Linux :

• Plusieurs téléchargements du même fichier sans en être conscient laissent beaucoup de place à la formation de fichiers en double.
• Lors du transfert de fichiers entre Linux et Windows, il est possible d'importer plusieurs fois le même fichier, ce qui entraîne une duplication des fichiers.
• Le fait d'avoir des sauvegardes d'un fichier spécifique à divers endroits peut également générer plusieurs copies.

Pourquoi devriez-vous supprimer les fichiers en double sous Linux

Vous devez vous assurer que tous les fichiers indésirables sont tenus à l'écart de votre système Linux pour qu'il continue de fonctionner correctement. Vous pouvez trouver et supprimer les fichiers en double en toute sécurité sous Linux en utilisant plusieurs méthodes. Vous pouvez utiliser ces méthodes pour maintenir votre système à jour et sans encombrement.

En plus d'améliorer les performances de Linux, la suppression des fichiers dupliqués libère également beaucoup d'espace de stockage en supprimant d'innombrables fichiers inutiles. Vous bénéficiez des avantages suivants en supprimant les fichiers en double sous Linux :

• Permettez à Linux de fonctionner de manière efficace et efficiente sans problèmes de retard.
• Libérez beaucoup d'espace de stockage, ce qui peut être très utile.
• Organisez systématiquement les fichiers pour éviter un méli-mélo de fichiers.
• Optimisez le tri des fichiers, réduisez les ralentissements et accélérez la productivité.

Comment rechercher et nettoyer les fichiers en double Linux

Trouver et supprimer les fichiers en double devient facile lorsque vous utilisez les méthodes suivantes :

1. Méthode 1. Rechercher les fichiers en double par nom
2. Méthode 2. Rechercher les fichiers en double par taille
3. Méthode 3. Trouver les fichiers en double par la somme de contrôle MD5

Méthode 1. Rechercher les fichiers en double par nom

Si vous ne souhaitez pas utiliser de détecteur de doublons, vous recherchez et supprimez tous les fichiers en double en recherchant leurs noms. À l'aide des scripts suivants, vous pouvez démarrer le processus :

Étape 1. Suivez et écrivez simplement le script.

awk -F'/' '{

  f = $NF

  a[f] = f in a? a[f] RS $0 : $0

  b[f]++ } 

  END{for(x in b)

        if(b[x]>1)

          printf "Duplicate Filename: %s\n%s\n",x,a[x] }' <(find . -type f)

L'exécution de ce script comparera et affichera tous les fichiers portant le même nom.

Remarque* Cette méthode ne s'applique qu'à la recherche de fichiers en double portant le même nom. Il ne compare pas les données qu'ils contiennent.

Étape 2. Assurez-vous que la liste affiche tous les noms de fichiers, y compris le chemin comme celui-ci.

Nom de fichier en double : textfile1

./folder3/textfile1

./folder2/textfile1

./folder1/textfile1

Nom de fichier en double : textfile2

./folder3/textfile2

./folder2/textfile2

./folder1/textfile2

Méthode 2. Rechercher les fichiers en double par taille

Cette méthode est un moyen rapide de trouver des doublons ayant la même taille. Voyons comment cela fonctionne :

Remarque* Cette méthode est utile pour les fichiers de même taille car elle n'analyse pas leur contenu.

Étape 1. Écrivez le script donné pour trouver des fichiers de même taille.

awk '{

  size = $1

  a[size]=size in a ? a[size] RS $2 : $2

  b[size]++ } 

  END{for(x in b)

        if(b[x]>1)

          printf "Duplicate Files By Size: %d Bytes\n%s\n",x,a[x] }' <(find . -type f -exec du -b {} +)

Remarque* Cette méthode est utile pour les fichiers de taille similaire car elle n'analyse pas les données qu'ils contiennent.

• La commande du dans le script donné s'applique pour calculer les tailles de fichier.
• La commande Find prend un paramètre appelé -exec du -b {} + pour transmettre la taille du fichier à la commande AWK.

Étape 2. Lorsque vous appliquez le script donné, il affichera la sortie comme ceci :

Fichiers en double par taille : 20 octets

./folder3/textfile1

./folder2/textfile1

./folder1/textfile1

Fichiers en double par taille : 35 octets

./folder3/textfile2

./folder2/textfile2

./folder1/textfile2

Maintenant, vous pouvez localiser le chemin du fichier pour rechercher et supprimer les doublons.

Voici les détails du script afin que vous puissiez voir ce qu'il fait.

• <(find . – type f) - Pour qu'AWK lise la sortie de find, nous devons utiliser la substitution de processus.
• find . -type f  - Cette commande navigue dans tous les fichiers du répertoire searchPath.
• awk -F’/’ - Nous utilisons '/' comme variable interne de la commande AWK. Ce faisant, vous pouvez extraire le nom du fichier plus facilement. Vous trouverez alors le nom du fichier dans le dernier champ.
• f = $NF - La variable f est utilisée pour enregistrer le nom du fichier.
• a[f] = f in a? a[f] RS $0: $0 - Ce code est utile si le nom de fichier n'existe pas. Nous créons un accès pour mapper le chemin du fichier d'origine à l'aide de ce code de script.
• b[f]++ - Un autre tableau b[] est créé pour suivre le nombre de fichiers portant le même nom.
• END{for(x in b) - Nous utilisons ce code pour analyser toutes les entrées du tableau b[]
• if(b[x]>1) - S'il existe plusieurs fichiers portant le même nom que x, cela signifie qu'il y en a eu plusieurs copies.
• printf “Duplicate Filename: %s\n%s\n”,x,a[x] - À la fin, ce code est utilisé pour imprimer le nom de fichier en double x. Pour imprimer tous les chemins complets, y compris le nom de fichier, nous utilisons a[x].

Méthode 3. Trouver les fichiers en double par la somme de contrôle MD5

Identifier les doublons à l'aide de la somme de contrôle md5 serait la solution la plus gérable pour quiconque. Les gens utilisent cette fonction pour localiser les fichiers ayant la même somme de contrôle. Initialement, la somme de contrôle MDS est conçue pour vérifier l'intégration des données.

De plus, vous pouvez trouver des fichiers qui ont probablement le même contenu. Pour naviguer dans un hachage MD5 d'un fichier, nous pouvons utiliser la commande md5sum sous Linux.

Étape 1. Commençons par utiliser le script donné dans le shell de commande :

awk '{

  md5=$1

  a[md5]=md5 in a ? a[md5] RS $2 : $2

  b[md5]++ } 

  END{for(x in b)

        if(b[x]>1)

          printf "Duplicate Files (MD5:%s):\n%s\n",x,a[x] }' <(find . -type f -exec md5sum {} +)

• -exec md5sum {} + est le paramètre supplémentaire de la commande find.

Étape 2. Lorsque vous appliquez la commande donnée, les résultats s'afficheront comme indiqué ci-dessous :

Fichiers en double (MD5 :1d65953b527afb4bd9bc0986fd0b9547) :

./folder3/textfile1

./folder2/textfile1

./folder1/textfile1

Dans le résultat, vous pouvez voir que nous avons trois fichiers portant le même nom text-file-2 , mais le hachage MD5 ne les trouve pas car leur contenu est unique.

Guide supplémentaire : identifier et supprimer les fichiers en double en quelques étapes simples

Les gens peuvent rencontrer les tracas des fichiers en double même s'ils utilisent Linux ou Windows. Bien que les fichiers en double ne soient pas difficiles à éliminer, ils peuvent être ennuyeux à trouver et à supprimer. Découvrons la meilleure méthode pour vous :

Si vous êtes un utilisateur Windows, vous pouvez également supprimer l'encombrement évité des fichiers en double.

Correctif 1. Identifiez et supprimez manuellement les fichiers en double

Comme nous en avons discuté dans le cas de Linux, vous pouvez également identifier et supprimer les fichiers en double en les triant par nom ou par taille. Pour rechercher et supprimer des fichiers en double dans Windows , vous pouvez ouvrir le dossier à partir duquel vous souhaitez rechercher des doublons. Utilisez maintenant la fonction de recherche dans l'Explorateur Windows, tapez l'extension de fichier et triez tous les fichiers par nom ou par taille. Ainsi, vous pouvez identifier tous les fichiers avec la même taille ou le même nom.

Correctif 2. Identifier et supprimer automatiquement les fichiers en double

La recherche et la suppression de fichiers copiés est un processus long et fastidieux. Nous vous suggérons de garder la main sur le meilleur outil de recherche de fichiers en double qui vous fait gagner du temps et des efforts en même temps. Par conséquent, il est conseillé d'utiliser EaseUS DupFiles Cleaner, réputé pour ses fonctionnalités avancées et sa facilité d'utilisation.

EaseUS DupFiles Cleaner convient à tous les disques de stockage internes et externes, y compris les clés USB et les cartes SD. Son algorithme avancé est idéal pour trouver tous les types de fichiers en double avec une précision de 100 %.

Voici comment vous pouvez utiliser ce logiciel pour rechercher et supprimer des fichiers en double sur Windows :

Étape 1. Ouvrez EaseUS Dupfiles Cleaner et cliquez sur Analyser maintenant pour commencer le nettoyage. EaseUS Dupfiles Cleaner sélectionnera automatiquement toutes les données de toutes les partitions. Vous pouvez supprimer les partitions que vous ne voulez pas nettoyer en appuyant sur le signe "-" dans Analyser les dossiers et choisir les types de fichiers dans Modèle de nom du fichier.

* Vous pouvez cliquer sur Avancé pour personnaliser l'analyse, et le système activera le mode de protection des fichiers par défaut. 

Étape 2. Le processus d'analyse commence, veuillez attendre patiemment. Le temps dépend du nombre de fichiers que vous devez analyser.

Étape 3. Une fois l'analyse terminée, vous pouvez cliquer sur Suppression automatique pour réaliser un nettoyage en un seul clic. 

Étape 4. Si vous avez encore des inquiétudes, vous pouvez choisir de cliquer sur Afficher les détails pour vérifier.

* Vous pouvez cliquer sur Selection intelligente pour vérifier plus précisément quel type de les fichiers que vous devez nettoyer et si vous ne pouvez pas identifier le contenu à partir du nom du fichier, vous pouvez cliquer directement sur le nom du fichier dans le coin supérieur droit pour le prévisualiser.