Estatísticas e Big Data

Sei que isso prejudicaria a inferência estatística, mas estou realmente preocupado apenas em chegar o mais próximo possível de um modelo preciso. Eu tenho uma variável de resultado dicotômica, com um grande conjunto de preditores dicotômicos. Penso que gostaria de tentar usar o LASSO para selecionar quais variáveis ​​devo incluir …

10 model-selection  lasso  logit 

Se eu calculei a média para quatro conjuntos de dados (que têm tamanhos de amostra diferentes), posso obter uma "média geral" calculando a "média das médias"? Se sim, essa "média dos meios" será a mesma que se eu tivesse combinado os dados de todos os 4 conjuntos e calculado a …

10 mathematical-statistics  weighted-mean  mean 

Até onde eu sei, o k-means escolhe os centros iniciais aleatoriamente. Como eles são baseados em pura sorte, eles podem ser muito mal selecionados. O algoritmo K-means ++ tenta resolver esse problema, espalhando os centros iniciais uniformemente. Os dois algoritmos garantem os mesmos resultados? Ou é possível que os centróides …

10 k-means 

Fechadas. Esta questão está fora de tópico . No momento, não está aceitando respostas. Deseja melhorar esta pergunta? Atualize a pergunta para que ela esteja no tópico de Validação cruzada. Fechado há 4 anos . Estou treinando um modelo usando o caretpacote em R por quase 3 dias. Os cálculos …

10 r  machine-learning  svm  caret 

Como posso obter efeitos aleatórios agrupados para lmer após imputação múltipla? Estou usando mouses para atribuir múltiplos quadros de dados. E lme4 para um modelo misto com interceptação aleatória e inclinação aleatória. O pool de pool funciona bem, exceto que ele não combina os efeitos aleatórios. Eu procurei muito por …

10 r  lme4-nlme  multiple-imputation 

Eu tenho várias séries temporais em um VAR (1) e, como algumas delas não têm a mesma unidade de medida, eu gostaria de estimar o RMSE em porcentagem. Sei que isso poderia ser feito de várias maneiras (veja abaixo), mas não sei exatamente qual é a que melhor se adapta …

10 time-series  mse  rms 

Estou trabalhando na minha tese em que estou examinando a emoção que as pessoas demonstram em diferentes eventos. Meu problema é (1) que eu tenho MUITO pouca experiência com estatística e matemática, então estou meio perdido com todos os métodos diferentes e ficaria muito feliz se uma resposta 'fácil' pudesse …

10 time-series 

Estou usando ccfpara encontrar uma correlação entre duas séries temporais. Estou recebendo uma trama que se parece com isso: Observe que estou interessado principalmente na correlação para o atraso = 0. Questões: Interprete corretamente que existe uma correlação cruzada para o atraso = 0, pois para esse atraso a correlação …

10 r  interpretation  cross-correlation 

Eu tenho os dados com variáveis ​​categóricas e variáveis ​​contínuas, mas é a necessidade de encontrar o valor da informação na análise de dados explicativa. Apenas indique o motivo pelo qual estamos calculando o valor da informação para cada variável no início da análise dos dados e qual será o …

10 data-visualization 

Deste vídeo por Andrew Ng por volta das 5:00 Como são e ? De fato, o que significa? é obtido comparando com y, essa comparação não é possível para a saída de uma camada oculta, certo?δ3δ3\delta_3δ2δ2\delta_2δ3δ3\delta_3δ4δ4\delta_4

10 machine-learning  neural-networks  backpropagation 

A figura abaixo (Figura 1 da p. 646 deste artigo ) compara os valores observados com os valores esperados na distribuição de Poisson. Em seguida, ele executa um teste qui-quadrado para verificar se os valores observados diferem dos valores esperados na distribuição de Poisson. Usando R, como é possível gerar …

10 r  distributions  chi-squared  poisson-distribution 

Eu tenho oito variáveis ​​independentes e uma dependente. Eu corri uma matriz de correlação, e 5 deles têm uma baixa correlação com o DV. Em seguida, executei uma regressão múltipla passo a passo para ver se algum / todos os IVs podem prever o DV. A regressão mostrou que apenas …

10 regression  correlation  statistical-significance  feature-selection  predictor 

Sou relativamente novo em R e estou tentando ajustar um modelo aos dados que consistem em uma coluna categórica e uma coluna numérica (número inteiro). A variável dependente é um número contínuo. Os dados têm o seguinte formato: predCateg, predIntNum, ResponseVar Os dados são mais ou menos assim: ranking, age_in_years, …

10 r  generalized-linear-model 

Estou trabalhando com uma série temporal multivariada e usando o modelo VAR (Regressão automática de vetores) para previsão. Minha pergunta é o que realmente significa estacionariedade em uma estrutura multivariada. 1) Eu sei que, se na configuração do VAR, se o determinante do inverso da matriz | IA | tiver …

10 time-series  var  stationarity 

Estou ensinando álgebra linear a uma classe de engenheiros, cientistas sociais e programadores de computador. Acabamos de decompor o valor singular e temos um dia extra, então pensei em falar sobre a relação entre a decomposição do valor singular e a análise de componentes principais. Tenho a parte teórica da …

10 pca  dataset  teaching