Perguntas com a marcação «pandas»

Eu tenho um DataFramecom 4 colunas, das quais 2 contêm valores de seqüência de caracteres. Eu queria saber se havia uma maneira de selecionar linhas com base em uma correspondência de seqüência parcial contra uma coluna específica? Em outras palavras, uma função ou função lambda que faria algo como re.search(pattern, …

447 python  string  pandas  dataframe 

Eu tenho o seguinte DataFrame: Col1 Col2 Col3 Type 0 1 2 3 1 1 4 5 6 1 ... 20 7 8 9 2 21 10 11 12 2 ... 45 13 14 15 3 46 16 17 18 3 ... O DataFrame é lido de um arquivo CSV. …

439 python  pandas  dataframe  permutation  shuffle 

Eu tenho um quadro de dados dfe uso várias colunas para groupby: df['col1','col2','col3','col4'].groupby(['col1','col2']).mean() Da maneira acima, quase recebo a tabela (quadro de dados) necessária. O que está faltando é uma coluna adicional que contém o número de linhas em cada grupo. Em outras palavras, quero dizer, mas também gostaria de …

439 python  pandas  dataframe  group-by  pandas-groupby 

Como posso obter os equivalentes de SQL INeNOT IN ? Eu tenho uma lista com os valores necessários. Aqui está o cenário: df = pd.DataFrame({'countries':['US','UK','Germany','China']}) countries = ['UK','China'] # pseudo-code: df[df['countries'] not in countries] Minha maneira atual de fazer isso é a seguinte: df = pd.DataFrame({'countries':['US','UK','Germany','China']}) countries = pd.DataFrame({'countries':['UK','China'], 'matched':True}) …

434 python  pandas  dataframe  sql-function 

Estou executando um programa que está processando 30.000 arquivos semelhantes. Um número aleatório deles está parando e produzindo esse erro ... File "C:\Importer\src\dfman\importer.py", line 26, in import_chr data = pd.read_csv(filepath, names=fields) File "C:\Python33\lib\site-packages\pandas\io\parsers.py", line 400, in parser_f return _read(filepath_or_buffer, kwds) File "C:\Python33\lib\site-packages\pandas\io\parsers.py", line 205, in _read return parser.read() File "C:\Python33\lib\site-packages\pandas\io\parsers.py", …

411 python  pandas  csv  dataframe  unicode 

Estou tentando salvar um csv em uma pasta depois de fazer algumas edições no arquivo. Toda vez que eu uso pd.to_csv('C:/Path of file.csv')o arquivo csv, há uma coluna separada de índices. Quero evitar imprimir o índice em csv. Eu tentei: pd.read_csv('C:/Path to file to edit.csv', index_col = False) E para …

407 python  csv  indexing  pandas 

Gostaria de ler vários arquivos csv de um diretório para pandas e concatená-los em um grande DataFrame. Ainda não consegui descobrir. Aqui está o que eu tenho até agora: import glob import pandas as pd # get data file names path =r'C:\DRO\DCL_rawdata_files' filenames = glob.glob(path + "/*.csv") dfs = [] …

404 python  pandas  csv  dataframe  concatenation 

Estou curioso para saber por que df[2]não é suportado, enquanto df.ix[2]e df[2:3]ambos funcionam. In [26]: df.ix[2] Out[26]: A 1.027680 B 1.514210 C -1.466963 D -0.162339 Name: 2000-01-03 00:00:00 In [27]: df[2:3] Out[27]: A B C D 2000-01-03 1.02768 1.51421 -1.466963 -0.162339 Eu esperaria df[2]trabalhar da mesma maneira que df[2:3]seja consistente …

395 python  pandas  dataframe  indexing 

Esta pode ser uma pergunta simples, mas não consigo descobrir como fazer isso. Digamos que eu tenho duas variáveis ​​da seguinte maneira. a = 2 b = 3 Eu quero construir um DataFrame a partir disso: df2 = pd.DataFrame({'A':a,'B':b}) Isso gera um erro: ValueError: se estiver usando todos os valores …

370 python  pandas  dataframe  scalar 

Problema ao filtrar o quadro de dados do resultado com uma orcondição. Desejo que meu resultado dfextraia todos os varvalores da coluna acima de 0,25 e abaixo de -0,25. Essa lógica abaixo me fornece um valor de verdade ambíguo, mas funciona quando eu divido essa filtragem em duas operações separadas. …

369 python  pandas  dataframe  boolean  filtering 

Suponha que eu tenho um dfque tem colunas de 'ID', 'col_1', 'col_2'. E eu defino uma função: f = lambda x, y : my_function_expression. Agora eu quero aplicar o fa dfduas colunas 's 'col_1', 'col_2'para calcular elemento-wise uma nova coluna 'col_3', um pouco como: df['col_3'] = df[['col_1','col_2']].apply(f) # Pandas gives …

368 python  pandas  dataframe 

Como realizar uma junção ( LEFT| RIGHT| FULL) ( INNER| OUTER) com pandas? Como adicionar NaNs para linhas ausentes após a mesclagem? Como me livrar dos NaNs após a fusão? Posso mesclar no índice? Cruzar-se com pandas? Como mesclar vários DataFrames? merge? join? concat? update? Quem? O que? Por quê?! …

365 python  pandas  join  merge 

O que é pivô? Como eu giro? Isso é um pivô? Formato longo para formato amplo? Eu já vi muitas perguntas sobre tabelas dinâmicas. Mesmo que eles não saibam que estão perguntando sobre tabelas dinâmicas, geralmente o são. É praticamente impossível escrever uma pergunta e resposta canônica que abranja todos …

358 python  pandas  group-by  pivot  pandas-groupby 

Eu construí uma condição que extrai exatamente uma linha do meu quadro de dados: d2 = df[(df['l_ext']==l_ext) & (df['item']==item) & (df['wn']==wn) & (df['wd']==1)] Agora eu gostaria de pegar um valor de uma coluna específica: val = d2['col_name'] Mas, como resultado, recebo um quadro de dados que contém uma linha e …

344 python  pandas  dataframe 

Estou tentando usar pandas para manipular um arquivo .csv, mas recebo este erro: pandas.parser.CParserError: Erro ao tokenizar dados. Erro C: 2 campos esperados na linha 3, serra 12 Eu tentei ler os documentos dos pandas, mas não encontrei nada. Meu código é simples: path = 'GOOG Key Ratios.csv' #print(open(path).read()) data …

341 python  csv  pandas