Estatísticas e Big Data

É sensato converter erro padrão em desvio padrão? E se sim, essa fórmula é apropriada? SE=SDN−−√SE=SDNSE = \frac{SD}{\sqrt{N}}

26 standard-deviation  standard-error 

Parece que a maioria das autoridades concorda que linhas de grade escuras ou proeminentes em parcelas são "trechos do gráfico" por qualquer definição razoável e distraem o espectador da mensagem no corpo principal do gráfico. Portanto, não vou me preocupar em dar referências a esse ponto. Da mesma forma, todos …

26 data-visualization  ggplot2 

Eu tenho um modelo de regressão logística treinado que estou aplicando a um conjunto de dados de teste. A variável dependente é binária (booleana). Para cada amostra no conjunto de dados de teste, aplico o modelo de regressão logística para gerar uma% de probabilidade de que a variável dependente seja …

26 regression  logistic  r-squared 

Qual é a diferença entre uma ANOVA de medidas repetidas sobre algum fator (por exemplo, condição experimental) e uma MANOVA? Em particular, um site que encontrei sugeriu que o MANOVA não faz a mesma suposição de esfericidade que as medidas repetidas que o ANOVA faz, isso é verdade? Se sim, …

26 anova  repeated-measures  manova  sphericity 

Como contexto: ao trabalhar com um conjunto de dados muito grande, às vezes me perguntam se podemos criar um conjunto de dados sintético onde "conhecemos" o relacionamento entre os preditores e a variável de resposta, ou os relacionamentos entre os preditores. Ao longo dos anos, pareço encontrar conjuntos de dados …

26 modeling  reproducible-research  synthetic-data 

Em outras palavras, com base no seguinte, o que é p? Para tornar isso um problema de matemática em vez de antropologia ou ciências sociais, e para simplificar o problema, suponha que os parceiros sejam selecionados com igual probabilidade em toda a população, exceto que irmãos e primos em primeiro …

26 probability  stochastic-processes  genetics 

Bloqueado . Esta pergunta e suas respostas estão bloqueadas porque a questão está fora do tópico, mas tem um significado histórico. No momento, não está aceitando novas respostas ou interações. Gostaria de importar o preço das ações "Last Trade" do Yahoo finance para R. A intenção é trabalhar com dados …

26 r 

Passei por essa densidade outro dia. Alguém deu um nome a isso? f(x)=log(1+x−2)/2πf(x)=log⁡(1+x−2)/2πf(x) = \log(1 + x^{-2}) / 2\pi A densidade é infinita na origem e também possui caudas gordas. Eu o vi usado como uma distribuição anterior em um contexto em que muitas observações deveriam ser pequenas, embora grandes …

26 distributions  probability 

Eu tenho uma pergunta sobre uma regressão binomial negativa: Suponha que você tenha os seguintes comandos: require(MASS) attach(cars) mod.NB<-glm.nb(dist~speed) summary(mod.NB) detach(cars) (Observe que carros é um conjunto de dados disponível em R e eu realmente não me importo se esse modelo faz sentido.) O que eu gostaria de saber é: …

26 regression  generalized-linear-model  negative-binomial 

Eu tenho uma amostra de 6. Nesse caso, faz sentido testar a normalidade usando o teste de Kolmogorov-Smirnov? Eu usei o SPSS. Eu tenho um tamanho de amostra muito pequeno porque leva tempo para obter cada um. Se não faz sentido, quantas amostras é o número mais baixo que faz …

26 hypothesis-testing  normality-assumption  kolmogorov-smirnov  power 

Em uma pergunta em outro lugar neste site, várias respostas mencionaram que o AIC é equivalente à validação cruzada de não uso único (LOO) e que o BIC é equivalente à validação cruzada de dobras em K Existe uma maneira de demonstrar isso empiricamente em R, de modo que as …

26 r  aic  cross-validation  bic 

Vindo do campo da visão computacional, frequentemente utilizei o método RANSAC (Random Sample Consensus) para ajustar modelos a dados com muitos outliers. No entanto, nunca o vi usado por estatísticos, e sempre tive a impressão de que não era considerado um método "estatisticamente correto". Por que? É de natureza aleatória, …

26 outliers  bootstrap  robust 

Forneça um código R que permita realizar uma ANOVA entre sujeitos com -3, -1, 1, 3 contrastes. Entendo que há um debate sobre o tipo apropriado de soma de quadrados (SS) para essa análise. No entanto, como o tipo padrão de SS usado no SAS e SPSS (Tipo III) é …

26 r  anova  contrasts  sums-of-squares 

Estou interessado em obter alguns livros sobre análise multivariada e preciso de suas recomendações. Livros gratuitos são sempre bem-vindos, mas se você souber de algum ótimo livro MVA não gratuito, indique-o.

26 references  multivariate-analysis 

Eu sou novo em R, regressão logística ordenada e polr. A seção "Exemplos" na parte inferior da página de ajuda para polr (que se ajusta a um modelo de regressão logística ou de probit a uma resposta fatorial ordenada) mostra options(contrasts = c("contr.treatment", "contr.poly")) house.plr <- polr(Sat ~ Infl + …

26 r  logistic