Gzip kullanarak çok büyük bir dosyayı (~ 30 GB) sıkıştırmak mümkün mü? Öyleyse, hangi komutları, anahtarları ve seçenekleri kullanmalıyım?
Veya çok büyük dosyaları sıkıştırmak / sıkıştırmak için kullanabileceğim başka bir program (tercihen Ubuntu dağıtımlarında yaygın olarak kullanılan bir program) var mı? Bununla ilgili bir deneyiminiz var mı?
Yanıtlar:
AFAIK için boyut sınırı yoktur gzip- en az 30GB. Tabii ki, diskinizdeki sıkıştırılmış dosya için alana ihtiyacınız var, sıkıştırırken her iki sürüm de aynı anda orada olacak.
bzip2 dosyaları sıkıştırır (sadece büyük olanlar değil :-) daha iyi, ama (bazen çok) daha yavaştır.
pbzip- bu birden fazla CPU çekirdeği kullanacak. Ama yine de çok daha yavaş gzip.
pbzip2
iyi bir sıkıştırma oranına ihtiyacınız varsa lzma'yı deneyebilirsiniz. bzip2'den daha hızlı ve daha verimli ve gzip'ten bile daha hızlı olabilir (kesin olarak bilmiyorum)
http://www.thegeekstuff.com/2010/06/lzma-better-compression-than-bzip2-on-unix-linux/
lzmaşu xzan lehine önerilmiyor . Aynı algoritma, biraz farklı (geliştirilmiş?) Dosya formatı etrafına sarılmış. LZMA, gzip'ten daha yavaştır, ancak maksimum hızda, JSON verileri gibi aşırı yedekli şeyler üzerinde hala oldukça iyi bir sıkıştırmadır. ( xz -0)
Gzip formatı giriş boyutu modulo 2 ^ 32'yi temsil eder, bu nedenle
--listseçenek 4 GB ve daha büyük sıkıştırılmamış dosyalar için sıkıştırılmamış hatalı boyutları ve sıkıştırma oranlarını rapor eder.
Yani, bzip2(v1.0.2 ve üstü) veya xz.
En düşük sıkıştırmaya ayarlanmış XZ , hız ve sıkıştırma için gzip'i yenebilir .
pxz -9ve - <in >out.xzve PC'nizde bir tavuk pişireceksiniz, ancak sonuç gzip sonucunun yaklaşık% 60'ı olacaktır. Bunun için yaklaşık 7 GB'ye ihtiyacınız var.