«avro» etiketlenmiş sorular

Apache Parquet'in özellikleri: Kendinden açıklayan Sütunlu biçim Dil bağımsız Avro, Sıra Dosyaları, RC Dosyası vb. İle karşılaştırıldığında Biçimlere genel bir bakış istiyorum. Zaten okudum: Impala Hadoop Dosya Biçimleriyle Nasıl Çalışır, biçimler hakkında bazı bilgiler verir, ancak bu biçimlerin her birinde verilere erişimin ve verilerin depolanmasının nasıl yapıldığını bilmek istiyorum. Parkenin …

137 file  hadoop  hdfs  avro  parquet 

Bunların tümü ikili serileştirme, RPC çerçeveleri ve IDL sağlar. Bunlar ve özellikler arasındaki temel farklarla ilgileniyorum (performans, kullanım kolaylığı, programlama dilleri desteği). Başka benzer teknolojiler biliyorsanız, lütfen bir cevapta belirtin.

124 protocol-buffers  thrift  asn.1  avro 

Hadoop ile ilgili projem için hadoop dosya formatlarından birini kullanmayı planlıyorum. Parkenin sütun tabanlı sorgulama için ve tam tarama için veya tüm sütun verilerine ihtiyacımız olduğunda avro için verimli olduğunu anlıyorum ! Devam etmeden ve dosya formatlarından birini seçmeden önce, birinin diğerine göre dezavantajlarının / dezavantajlarının neler olduğunu anlamak istiyorum. …

92 hadoop  avro  parquet