Linux için 4 komut satırı çözümü biliyorum. Tercih ettiğim, rdfindmevcut tüm seçenekler nedeniyle burada listelenen sonuncusudur .
fdupes
- Bu en çok tavsiye edilen / en çok tanınan olanı gibi görünüyor.
- Kullanımı en basit olanıdır, ancak tek eylemi kopyaları silmek.
- Yinelenenlerin aslında yinelenen olduğundan emin olmak için (sonsuza kadar çalıştırılmadan), dosyalar arasındaki karşılaştırmalar önce dosya boyutuna, sonra md5 karmasına, ardından by-by-byte byte karşılaştırmasına göre yapılır.
Örnek çıktı ("gösteri boyutu", "özyinelemeli" seçenekleriyle):
$ fdupes -Sr .
17 bytes each:
./Dir1/Some File
./Dir2/SomeFile
hardlink
- Adından da anlaşılacağı gibi, bulunan dosyaları sabit bağlantılarla değiştirin.
- Bir
--dry-runseçeneği var.
- İçeriklerin nasıl karşılaştırıldığını göstermez, ancak diğer tüm seçeneklerin aksine dosya modunu, sahibi ve değiştirilen zamanı dikkate alır.
Örnek çıktı (iki dosyamın biraz farklı değiştirilmiş süreleri olduğunu unutmayın, bu nedenle ikinci çalışmada bunu görmezden gelmesini söyledim):
$ stat Dir*/* | grep Modify
Modify: 2015-09-06 23:51:38.784637949 -0500
Modify: 2015-09-06 23:51:47.488638188 -0500
$ hardlink --dry-run -v .
Mode: dry-run
Files: 5
Linked: 0 files
Compared: 0 files
Saved: 0 bytes
Duration: 0.00 seconds
$ hardlink --dry-run -v -t .
[DryRun] Linking ./Dir2/SomeFile to ./Dir1/Some File (-17 bytes)
Mode: dry-run
Files: 5
Linked: 1 files
Compared: 1 files
Saved: 17 bytes
Duration: 0.00 seconds
puding
- Kullanıcının daha sonra üzerinde çalıştığı dosyaları bulmak için yapılmıştır; hiçbir eylemi yok.
- Karşılaştırmalar dosya boyutuna ve ardından sha1 karmasına göre yapılır.
- Karma, sha256, sha384 veya sha512 olarak değiştirilebilir.
- Karma, bayt bayt karşılaştırması yapmak için devre dışı bırakılabilir
Örnek çıktı ("özyinelemeli" seçeneği ile):
$ duff -r .
2 files in cluster 1 (17 bytes, digest 34e744e5268c613316756c679143890df3675cbb)
./Dir2/SomeFile
./Dir1/Some File
rdfind
- Seçeneklerin alışılmadık bir sözdizimi vardır (taklit etmek
findmi gerekiyor ?).
- Eylemlerin yinelenen dosyaları alması için çeşitli seçenekler (silme, sembolik bağlantılar oluşturma, bağlantı oluşturma).
- Kuru çalışma moduna sahiptir.
- Karşılaştırmalar dosya boyutu, sonra ilk bayt, sonra son bayt, sonra md5 (varsayılan) veya sha1 ile yapılır.
- Bulunan dosyaların sıralanması, hangi dosyanın orijinal olarak kabul edildiğini öngörülebilir kılar.
Örnek çıktı:
$ rdfind -dryrun true -makehardlinks true .
(DRYRUN MODE) Now scanning ".", found 5 files.
(DRYRUN MODE) Now have 5 files in total.
(DRYRUN MODE) Removed 0 files due to nonunique device and inode.
(DRYRUN MODE) Now removing files with zero size from list...removed 0 files
(DRYRUN MODE) Total size is 13341 bytes or 13 kib
(DRYRUN MODE) Now sorting on size:removed 3 files due to unique sizes from list.2 files left.
(DRYRUN MODE) Now eliminating candidates based on first bytes:removed 0 files from list.2 files left.
(DRYRUN MODE) Now eliminating candidates based on last bytes:removed 0 files from list.2 files left.
(DRYRUN MODE) Now eliminating candidates based on md5 checksum:removed 0 files from list.2 files left.
(DRYRUN MODE) It seems like you have 2 files that are not unique
(DRYRUN MODE) Totally, 17 b can be reduced.
(DRYRUN MODE) Now making results file results.txt
(DRYRUN MODE) Now making hard links.
hardlink ./Dir1/Some File to ./Dir2/SomeFile
Making 1 links.
$ cat results.txt
# Automatically generated
# duptype id depth size device inode priority name
DUPTYPE_FIRST_OCCURRENCE 1 1 17 2055 24916405 1 ./Dir2/SomeFile
DUPTYPE_WITHIN_SAME_TREE -1 1 17 2055 24916406 1 ./Dir1/Some File
# end of file
