Arşivlenen dosyalar üzerinde tekilleştirme (tekilleştirme) yapabilen bir arşivleyici programı arıyorum. Arşivin paketini açtıktan sonra, yazılım sıkıştırma işlemi sırasında kaldırdığı dosyaları geri koyacaktır.
Şimdiye kadar buldum:
Başka birinin farkında olan var mı?
Bu muhtemelen 7-zip için harika bir ek olacaktır.
Yanıtlar:
Hemen hemen tüm modern arşivciler tam olarak bunu yaparlar, tek fark buna "katı" bir arşiv olarak başvurmalarıdır, çünkü tüm dosyalar sıkıştırma algoritmasına beslenmeden önce tek bir akışa birleştirilir. Bu, her dosyayı birer birer sıkıştıran ve her sıkıştırılmış dosyayı arşive ekleyen standart zip sıkıştırmasından farklıdır.
7-zip doğası gereği etkili bir şekilde tekilleştirme sağlar. 7-Zip örneğin dosyaları arayacak, benzer dosya türlerine ve dosya adlarına göre sıralayacaktır ve böylece aynı tür ve veriye sahip iki dosya, kompresör algoritmalarına giden akışa yan yana yerleştirilecektir. Kompresör daha sonra son zamanlarda gördüğü çok fazla veri görecek ve bu iki dosya, dosyaları tek tek sıkıştırmaya kıyasla sıkıştırma verimliliğinde büyük bir artış görecektir.
Linux, ".tgz" biçimlerinin (veya tam biçimini kullanmak için ".tar.gz") yaygınlığıyla uzun zamandır benzer bir davranış gördü, çünkü katran tüm dosyaları tek bir akışta birleştiriyor ( dosyaları sıralama ve gruplandırma) ve ardından gzip ile sıkıştırma. Bu kaçırdığı şey, 7-zip'in yaptığı sıralamadır, bu da verimliliği biraz düşürebilir, ancak zip'in yaptığı gibi bir çok ayrı ayrı sıkıştırılmış dosyayı birlikte engellemekten çok daha iyidir .
.tar.gzBirbirinden tamamen bağımsız olarak sadece nispeten küçük blokları (900KB gibi) sıkıştırmakla gzip yapmaz ve böylece iki büyük ama aynı dosyayı (örneğin, birkaç 4MB görüntü) tekilleştirme yeteneğine sahip olmaz mı?
Tekilleştirme işlemini bir sıkıştırma işlemiyle kullanmanın bir anlamı yoktur. Çoğu sıkıştırma algoritması, en yaygın veya yeniden kullanılan veri parçalarını arayacak 'sözlük' olarak adlandırılan şeyi oluşturur. oradan sadece "kelimeyi" tekrar yazmak yerine sözlük girişine atıfta bulunacaktır. Bu şekilde, çoğu sıkıştırma işlemi zaten tüm dosyalardan gereksiz veya yinelenen verileri keser.
Örneğin, 1 MB'lık bir dosya alıp her seferinde farklı bir adla 100 kez kopyalarsanız (toplam 100 MB disk alanı), 7zip veya zip dosyasında sıkıştırırsanız, 1 MB'lık bir toplam zip dosyanız olacaktır. Bunun nedeni, tüm verilerinizin bir sözlük girişine konması ve 100 kez referans almasıdır, bu da çok az yer kaplar.
Bu, ne olduğuna dair çok basit bir açıklamadır, ancak nokta hala iyi bir şekilde iletilmektedir.
7-Zip, zip, gzip ve diğer tüm arşivleyiciler, aynı dosyanın içinde ya da farklı dosyaların içindeki farklı konumlara yerleştirilen, sadece birkaç megabayt ya da daha fazla gibi birbirinden uzak olan aynı alanları algılamaz.
Bu nedenle, hayır, normal arşivleyiciler bazı durumlarda exdupe ve diğerlerini iyi performans göstermez. Bazı sanal makineleri veya diğer şeyleri sıkıştırırsanız bunu görebilirsiniz.