UNIX'te zlib verilerini açmak nasıl?

Python'da zlib sıkıştırılmış veri oluşturdum, şöyle:

import zlib
s = '...'
z = zlib.compress(s)
with open('/tmp/data', 'w') as f:
    f.write(z)

(ya da kabuk içinde bir liner: echo -n '...' | python2 -c 'import sys,zlib; sys.stdout.write(zlib.compress(sys.stdin.read()))' > /tmp/data)

Şimdi, kabuktaki verileri açmak istiyorum. Ne iş ne zcatde uncompress:

$ cat /tmp/data | gzip -d -
gzip: stdin: not in gzip format

$ zcat /tmp/data 
gzip: /tmp/data.gz: not in gzip format

$ cat /tmp/data | uncompress -
gzip: stdin: not in gzip format

Görünüşe göre gzip benzeri bir dosya oluşturdum ama başlıkları olmadan. Ne yazık ki, gzip man sayfasında bu tür ham verileri açmak için herhangi bir seçenek görmüyorum ve zlib paketi herhangi bir çalıştırılabilir yardımcı program içermiyor.

Ham zlib verilerini açmak için bir yardımcı program var mı?

Eğer yoksa veya openssl veya başka araçlar kullanmak istiyorsanız standart shell-script + gzip kullanarak sıkıştırmasını açmak da mümkündür . İşin püf noktası, gzip magic numarasını hazırlamak ve yöntemi asıl verilere sıkıştırmaktır :
zlib.compress

printf "\x1f\x8b\x08\x00\x00\x00\x00\x00" |cat - /tmp/data |gzip -dc >/tmp/out

Düzenlemeler:
@ d0sboots yorum yaptı: RAW Deflate verileri için 2 boş bayt eklemeniz gerekir:
→"\x1f\x8b\x08\x00\x00\x00\x00\x00\x00\x00"

SO hakkındaki bu soru, bu yaklaşım hakkında daha fazla bilgi verir. Buradaki cevap, 8 baytlık bir altlığın da olduğunu göstermektedir.

Users @ Vitali-Kushner ve @ mark-bessey kesilmiş dosyalarla bile başarılı olduğunu bildirdi, bu yüzden bir gzip altbilgi kesinlikle gerekli görünmüyor.

@ tobias-kienzler bu işlevi bashrc için önerdi :
zlipd() (printf "\x1f\x8b\x08\x00\x00\x00\x00\x00" |cat - $@ |gzip -dc)

Kullanıcı @tino, OpenSSL yanıtının altında yorum yaptı, ancak bunun ayrı olması gerektiğini düşünüyorum:

zlib-flate -uncompress < FILE

Bunu denedim ve benim için çalıştı.

zlib-flatepaketinde bulunabilir qpdf(diğer cevaplardaki yorumlara göre, Debian Squeeze ve Fedora 23'te)

Bir çözüm buldum (muhtemel olanlardan biri), openssl kullanıyor :

$ openssl zlib -d < /tmp/data

veya

$ openssl zlib -d -in /tmp/data

* NOT: zlib işlevselliği, son openssl sürümlerinde> = 1.0.0 görünüşte mevcuttur (OpenSSL, zlib veya zlib-dinamik seçeneğiyle yapılandırılmış / oluşturulmuş olmalıdır, ikincisi varsayılandır)

Ben tavsiye pigz gelen Mark Adler , zlib sıkıştırma kütüphanesi ortak yazarlarından. pigzMevcut bayrakları görmek için yürütün .

Fark edeceksiniz:

-z --zlib Compress to zlib (.zz) instead of gzip format.

-dBayrağı kullanarak sıkıştırmayı açabilirsiniz :

-d --decompress --uncompress Decompress the compressed input.

'Test' adında bir dosya varsayarak:

• pigz -z test - test.zz adlı bir zlib sıkıştırılmış dosya oluşturur
• pigz -d -z test.zz - test.zz dosyasını sıkıştırılmış test dosyasına dönüştürür

OSX'te çalıştırabilirsiniz brew install pigz

zlibgzip tarafından kullanılan, ancak dosya formatı tarafından kullanılan sıkıştırmayı uygular. Bunun yerine, kullandığı gzipmodülü kullanmalısınız zlib.

import gzip
s = '...'
with gzip.open('/tmp/data', 'w') as f:
    f.write(s)

Bu yapabilir:

import glob
import zlib
import sys

for filename in sys.argv:
    with open(filename, 'rb') as compressed:
        with open(filename + '-decompressed', 'wb') as expanded:
            data = zlib.decompress(compressed.read())
            expanded.write(data)

Öyleyse şöyle yap:

$ python expander.py data/*

zpipe.c Burada Mark Adler'in kendisi tarafından bulunan örnek program (zlib kütüphanesinin kaynak dağıtımıyla birlikte gelir), ham zlib verileri içeren bu senaryolar için çok faydalıdır. İle derlemek cc -o zpipe zpipe.c -lzve sıkıştırmasını: zpipe -d < raw.zlib > decompressed. Ayrıca -dbayrak olmadan da sıkıştırma yapabilir .

Tam POSIX uyumlu bir UNIX olan (resmen onaylı!) Olan macOS'ta destek OpenSSLyok, hiçbir zlibdestek yok zlib-flateve ilk çözümün yanı sıra tüm Python çözümlerinin çalışmasına rağmen, ilk çözüm ZIP verilerinin bir dosyada olmasını gerektiriyor ve diğer tüm çözümler sizi bir Python betiği oluşturmaya zorlar.

İşte bir liner komut satırı olarak kullanılabilen, girişini STDIN borusu aracılığıyla alan ve yeni kurulmuş bir macOS ile kutudan çıkan Perl tabanlı bir çözüm:

cat file.compressed | perl -e 'use Compress::Raw::Zlib;my $d=new Compress::Raw::Zlib::Inflate();my $o;undef $/;$d->inflate(<>,$o);print $o;'

Daha hoş biçimlendirilmiş, Perl betiği şöyle görünür:

use Compress::Raw::Zlib;
my $decompressor = new Compress::Raw::Zlib::Inflate();
my $output;
undef $/;
$decompressor->inflate(<>, $output);
print $output;

Bunu zlib ile sıkıştırmak için kullanabilirsiniz:

openssl enc -z -none -e < /file/to/deflate

Ve bunu söndürmek için:

openssl enc -z -none -d < /file/to/deflate

zcat -f infile > outfile 

fedora25 benim için çalışıyor