Perguntas com a marcação «avro»

As características do Apache Parquet são: Auto-descrição Formato colunar Independente do idioma Em comparação com o Avro, Sequence Files, RC File etc. Quero uma visão geral dos formatos. Eu já li: Como o Impala funciona com os formatos de arquivo Hadoop , ele fornece algumas informações sobre os formatos, mas …

136 file  hadoop  hdfs  avro  parquet 

Tudo isso fornece serialização binária, estruturas RPC e IDL. Estou interessado nas principais diferenças entre eles e as características (desempenho, facilidade de uso, suporte a linguagens de programação). Se você conhece outras tecnologias semelhantes, mencione-as em uma resposta.

124 protocol-buffers  thrift  asn.1  avro 

Estou planejando usar um dos formatos de arquivo hadoop para meu projeto relacionado ao hadoop. Eu entendo parquet é eficiente para consulta baseada em colunas e avro para varredura completa ou quando precisamos de todos os dados das colunas! Antes de prosseguir e escolher um dos formatos de arquivo, quero …

95 hadoop  avro  parquet