Perguntas com a marcação «data.table»

Visão geral Estou relativamente familiarizado data.table, não muito dplyr. Eu li algumas dplyrvinhetas e exemplos que apareceram no SO, e até agora minhas conclusões são as seguintes: data.tablee dplyrsão comparáveis ​​em velocidade, exceto quando existem muitos grupos (ou seja,> 10-100K) e em outras circunstâncias (consulte os benchmarks abaixo) dplyr tem …

760 r  data.table  dplyr 

Para se livrar de uma coluna chamada "foo" em a data.frame, eu posso fazer: df <- df[-grep('foo', colnames(df))] No entanto, uma vez dfconvertido em um data.tableobjeto, não há como remover apenas uma coluna. Exemplo: df <- data.frame(id = 1:100, foo = rnorm(100)) df2 <- df[-grep('foo', colnames(df))] # works df3 <- …

195 r  data.table 

Estou com problemas para entender as propriedades de passagem por referência de data.table. Algumas operações parecem 'quebrar' a referência e eu gostaria de entender exatamente o que está acontecendo. Ao criar um a data.tablepartir de outro data.table(via <-, e atualizando a nova tabela por :=, a tabela original também é …

193 r  reference  copy  data.table  assignment-operator 

.SDparece útil, mas eu realmente não sei o que estou fazendo com isso. O que significa? Por que existe um período anterior (ponto final). O que está acontecendo quando eu o uso? Eu li: .SDé um data.tablecontendo o subconjunto de xdados de cada grupo, excluindo as colunas do grupo. Pode …

173 r  data.table 

Recentemente, deparei com a biblioteca de pandas para python, que de acordo com esse benchmark realiza fusões na memória muito rápidas. É ainda mais rápido que o pacote data.table no R (minha língua preferida para análise). Por que é pandasmuito mais rápido que data.table? É por causa de uma vantagem …

160 python  r  join  data.table  pandas 

A partir de uma trama de dados, existe uma maneira fácil para agregar ( sum, mean, maxet c) múltiplas variáveis simultaneamente? Abaixo estão alguns dados de exemplo: library(lubridate) days = 365*2 date = seq(as.Date("2000-01-01"), length = days, by = "day") year = year(date) month = month(date) x1 = cumsum(rnorm(days, 0.05)) …

154 r  dataframe  data.table  aggregate  r-faq 

Minha pergunta está relacionada à atribuição por referência versus cópia data.table. Quero saber se é possível excluir linhas por referência, semelhante a DT[ , someCol := NULL] Eu quero saber sobre DT[someRow := NULL, ] Eu acho que há uma boa razão para que essa função não exista, então talvez …

150 r  data.table 

Eu tenho um grande data.table , com muitos valores ausentes espalhados por suas ~ 200k linhas e 200 colunas. Gostaria de codificar novamente esses valores de NA para zeros da maneira mais eficiente possível. Eu vejo duas opções: 1: Converter em um data.frame e usar algo como este 2: Algum …

150 r  performance  dataframe  data.table 

Como podemos selecionar várias colunas usando um vetor de seus índices numéricos (posição) em data.table? É assim que faríamos com um data.frame: df <- data.frame(a = 1, b = 2, c = 3) df[ , 2:3] # b c # 1 2 3

143 r  data.table 

Em um data.frame (ou data.table), eu gostaria de "preencher" NAs com o valor anterior não NA mais próximo. Um exemplo simples, usando vetores (em vez de a data.frame) é o seguinte: > y <- c(NA, 2, 2, NA, NA, 3, NA, 4, NA, NA) Eu gostaria de uma função fill.NAs()que …

141 r  data.table  zoo  r-faq 

Estou examinando a documentação data.tablee também notei em algumas das conversas aqui no SO que rbindlistdeveriam ser melhores do que rbind. Gostaria de saber por que é rbindlistmelhor do que rbinde em quais cenários rbindlistrealmente supera rbind? Existe alguma vantagem em termos de utilização de memória?

135 r  data.table  rbind  rbindlist 

Qual é a melhor maneira de atribuir a várias colunas usando data.table? Por exemplo: f <- function(x) {c("hi", "hello")} x <- data.table(id = 1:10) Gostaria de fazer algo assim (é claro que esta sintaxe está incorreta): x[ , (col1, col2) := f(), by = "id"] E para estender isso, eu …

130 r  dataframe  data.table  variable-assignment  colon-equals 

Digamos que eu tenho o seguinte data.tableem R: library(data.table) DT = data.table(x=rep(c("b","a","c"),each=3), y=c(1,3,6), v=1:9) Quero ordená-lo por duas colunas (digamos colunas xe v). Eu usei isso: DT[order(x,v)] # sorts first by x then by v (both in ascending order) Mas agora, quero classificá-lo por x(em ordem decrescente) e ter o …

125 r  string  sorting  data.table  key 

Essa é uma pergunta filosófica sobre a sintaxe de junção data.table. Estou encontrando mais e mais usos para data.tables, mas ainda estou aprendendo ... O formato de junção X[Y]para data.tables é muito conciso, prático e eficiente, mas, tanto quanto posso dizer, ele suporta apenas junções internas e externas. Para obter …

123 r  join  data.table 

Gostaria de reordenar as colunas no meu data.table x, dado um vetor de caracteres de nomes de coluna neworder: library(data.table) x <- data.table(a = 1:3, b = 3:1, c = runif(3)) neworder <- c("c", "b", "a") Obviamente, eu poderia fazer: x[ , neworder, with = FALSE] # or x[ , …

118 r  data.table