Perguntas com a marcação «h5py»

Eu tenho um código Python cuja saída é uma matriz dimensionada, cujas entradas são todas do tipo float. Se eu salvar com a extensão, .dato tamanho do arquivo é da ordem de 500 MB. Eu li que o uso h5pyreduz consideravelmente o tamanho do arquivo. Então, digamos que eu tenha …

100 python  arrays  numpy  h5py 

Estou processando grandes matrizes 3D, que frequentemente preciso dividir de várias maneiras para fazer uma variedade de análises de dados. Um "cubo" típico pode ter cerca de 100 GB (e provavelmente ficará maior no futuro) Parece que o formato de arquivo recomendado típico para grandes conjuntos de dados em python …

96 python  numpy  hdf5  pytables  h5py