Perguntas com a marcação «pandas»

Ambos são formatos de armazenamento em colunas (disco) para uso em sistemas de análise de dados. Ambos estão integrados no Apache Arrow ( pacote pyarrow para python) e são projetados para corresponder a Arrow como uma camada analítica em memória colunar. Como os dois formatos diferem? Você sempre deve preferir …

95 python  pandas  parquet  feather  pyarrow 

A documentação diz: http://pandas.pydata.org/pandas-docs/dev/basics.html "Valores contínuos podem ser discretizados usando as funções cut (bins baseados em valores) e qcut (bins baseados em quantis de amostra)" Parece muito abstrato para mim ... posso ver as diferenças no exemplo abaixo, mas o que qcut (quantil de amostra) realmente significa / significa? Quando …

94 python  pandas 

Como posso filtrar quais linhas de um CSV devem ser carregadas na memória usando o pandas? Esta parece ser uma opção que devemos encontrar read_csv. Estou esquecendo de algo? Exemplo: temos um CSV com uma coluna de carimbo de data / hora e gostaríamos de carregar apenas as linhas com …

94 python  pandas 

Questões Como faço para usar pd.concat? Qual é o levelsargumento para? Qual é o keysargumento para? Existem vários exemplos para ajudar a explicar como usar todos os argumentos? A concatfunção do Pandas é o canivete suíço dos utilitários em fusão. A variedade de situações em que é útil é numerosa. …

94 python  pandas 

Eu tenho um DataFrame do pandas como este: a b 2011-01-01 00:00:00 1.883381 -0.416629 2011-01-01 01:00:00 0.149948 -1.782170 2011-01-01 02:00:00 -0.407604 0.314168 2011-01-01 03:00:00 1.452354 NaN 2011-01-01 04:00:00 -1.224869 -0.947457 2011-01-01 05:00:00 0.498326 0.070416 2011-01-01 06:00:00 0.401665 NaN 2011-01-01 07:00:00 -0.019766 0.533641 2011-01-01 08:00:00 -1.101303 -1.408561 2011-01-01 09:00:00 1.671795 -0.764629 …

94 python  pandas 

Estou lendo duas colunas de um arquivo csv usando o pandas readcsv()e, em seguida, atribuindo os valores a um dicionário. As colunas contêm sequências de números e letras. Ocasionalmente, há casos em que uma célula está vazia. Em minha opinião, o valor lido para essa entrada do dicionário deveria ser, …

94 python  numpy  pandas  nan 

Tenho dois dataframes de pandas e gostaria de exibi-los no bloco de notas Jupyter. Fazendo algo como: display(df1) display(df2) Mostra um abaixo do outro: Eu gostaria de ter um segundo dataframe à direita do primeiro. Há uma pergunta semelhante , mas parece que uma pessoa está satisfeita em mesclá-los em …

94 pandas  ipython-notebook  jupyter-notebook 

Estou analisando dados de um arquivo Excel que tem espaço em branco extra em alguns títulos de coluna. Quando eu verifico as colunas do dataframe resultante, com df.columns, vejo: Index(['Year', 'Month ', 'Value']) ^ # Note the unwanted trailing space on 'Month ' Consequentemente, não posso fazer: df["Month"] Porque me …

94 python  pandas  whitespace 

Existe um método fácil em pandas para invocar groupbyem uma faixa de incrementos de valores? Por exemplo, dado o exemplo abaixo, posso categorizar e agrupar a coluna Bcom um 0.155incremento de modo que, por exemplo, o primeiro par de grupos na coluna Bseja dividido em intervalos entre '0 - 0,155, …

94 python  group-by  pandas 

Estou tentando transformar uma célula do pandas contendo uma lista em linhas para cada um desses valores. Então, pegue isto: Se eu gostaria de descompactar e empilhar os valores na nearest_neighborscoluna de forma que cada valor fosse uma linha dentro de cada opponentíndice, qual seria a melhor maneira de fazer …

93 python  pandas  dataframe 

Desejo obter linhas de grade horizontais e verticais em meu gráfico, mas apenas as linhas de grade horizontais aparecem por padrão. Estou usando uma pandas.DataFrameconsulta sql em python para gerar um gráfico de linha com datas no eixo x. Não sei por que eles não aparecem nas datas e tentei …

93 python  matplotlib  pandas 

Vou converter um Django QuerySet em um pandas da DataFrameseguinte maneira: qs = SomeModel.objects.select_related().filter(date__year=2012) q = qs.values('date', 'OtherField') df = pd.DataFrame.from_records(q) Funciona, mas existe uma maneira mais eficiente?

93 python  django  pandas 

É possível adicionar alguma meta-informação / metadados a um DataFrame do pandas? Por exemplo, o nome do instrumento usado para medir os dados, o instrumento responsável, etc. Uma solução alternativa seria criar uma coluna com essas informações, mas parece um desperdício armazenar uma única informação em cada linha!

93 python  pandas 

Tenho dataframe python pandas, em que uma coluna contém o nome do mês. Como posso fazer uma classificação personalizada usando um dicionário, por exemplo: custom_dict = {'March':0, 'April':1, 'Dec':3}

93 python  pandas 

Estou criando um mapa de calor a partir de uma pivot_table pandas conforme abaixo: table2 = pd.pivot_table(df,values='control',columns='Year',index='Region',aggfunc=np.sum) sns.heatmap(table2,annot=True,cmap='Blues') Ele cria um mapa de calor conforme mostrado abaixo. Você pode ver que os números não são enormes (máx. 750), mas estão sendo exibidos em notação científica. Se eu vejo a própria …

93 python  pandas  matplotlib  seaborn