Postgres'te büyük miktarda metin depolamak için sıkıştırma seçenekleri nelerdir?

Postgres, özellikle komut günlükleri ve uzun çalışan komutların çıktı büyük miktarda metin depolamak gerekir ve veri şeffaf bir şekilde zlib gibi bir araç veya bazı yerel yer tasarrufu yöntemleri ile sıkıştırmak yardımcı olabilir bazı ayarları olup olmadığını bilmek gerekir .

Veriler öncelikle salt okunur verilerdir, bu nedenle yazma sorunu değildir.

postgresql compression

— vfclists
kaynak

kılavuzdan : " Uzun dizeler sistem tarafından otomatik olarak sıkıştırılır " ve işte daha ayrıntılı bir açıklama: postgresql.org/docs/current/static/storage-toast.html

— a_horse_with_no_name 17:15

Yine de oldukça düşük oranlı bir sıkıştırma algoritması kullanıyoruz, çünkü CPU maliyeti düşük olmalıdır. Bu yüzden yine de başka bir sıkıştırma şekli yapmaya EXTERNALve sütunda depolama ayarlamaya değer olabilir .

— Craig Ringer

@CraigRinger Başka bir sıkıştırma biçimi söylediğinizde, ek bir Postgres seçeneği ayarlamak mı yoksa hazır bir kütüphane mi yoksa kendinizinkilerden birini mi eklemek istersiniz?

— vfclists

Varsayılan olarak Postgres otomatik olarak TEXT her şeyi sıkıştırır. Basit bir lzcompress algoritması kullanır:

https://www.postgresql.org/docs/9.3/storage-toast.html

TEXT için muhtemelen LZ4 sıkıştırma desteğine dönüşecek bir eklenti var:

https://github.com/zilder/pg_lz4

Sıkıştırmayı da destekleyen bir FDW var:

https://www.citusdata.com/blog/2014/04/03/columnar-store-for-analytics/

— kworr
kaynak