Estatísticas e Big Data

Todos conhecemos estudos observacionais que tentam estabelecer um nexo de causalidade entre um preditor não aleatório X e um resultado, incluindo todos os possíveis fatores de confusão imagináveis ​​em um modelo de regressão múltipla. Ao “controlar” todos os fatores de confusão, diz o argumento, isolamos o efeito do preditor de …

45 multiple-regression  ancova  observational-study 

Minha pergunta principal é como interpretar a saída (coeficientes, F, P) ao realizar uma ANOVA tipo I (seqüencial)? Meu problema de pesquisa específico é um pouco mais complexo, então vou dividir meu exemplo em partes. Primeiro, se estou interessado no efeito da densidade da aranha (X1) no crescimento das plantas …

45 r  hypothesis-testing  anova  manova  sums-of-squares 

Existem muitas maneiras de medir quão semelhantes são as duas distribuições de probabilidade. Entre os métodos populares (em diferentes círculos) estão: a distância de Kolmogorov: a sup-distância entre as funções de distribuição; a distância Kantorovich-Rubinstein: a diferença máxima entre as expectativas em relação às duas distribuições de funções com a …

45 distributions  probability  hypothesis-testing  mathematical-statistics 

Esta pergunta vem à mente há mais de um mês. A edição de fevereiro de 2015 da Amstat News contém um artigo do professor Mark van der Laan, de Berkeley, que censura as pessoas por usarem modelos inexatos. Ele afirma que, usando modelos, a estatística é então uma arte e …

45 machine-learning  maximum-likelihood  modeling  nonparametric  parametric 

Fui perguntado em várias ocasiões a pergunta: O que é Big-Data? Tanto por estudantes quanto por meus parentes que estão começando a se interessar por estatísticas e ML. Encontrei este CV-post . E sinto que concordo com a única resposta lá. A página da Wikipedia também tem alguns comentários, mas …

44 large-data 

Eu queria saber se o recíproco de P (X = 1) representa algo em particular?

44 probability 

Estou tentando entender a parte da convolução das redes neurais convolucionais. Observando a figura a seguir: Não tenho problemas para entender a primeira camada de convolução, na qual temos 4 núcleos diferentes (de tamanho ), que convolvemos com a imagem de entrada para obter 4 mapas de recursos.k×kk×kk \times k …

44 machine-learning  neural-networks  deep-learning  conv-neural-network 

Os testes estatísticos tradicionais, como o teste t de duas amostras, concentram-se em tentar eliminar a hipótese de que não há diferença entre uma função de duas amostras independentes. Então, escolhemos um nível de confiança e dizemos que, se a diferença de médias estiver além do nível de 95%, podemos …

44 hypothesis-testing  statistical-significance  confidence-interval  equivalence  tost 

Este é um dos meus favoritos Este exemplo é bem-humorado (o crédito é de um ex-professor meu, Steven Gortmaker), mas também estou interessado em gráficos que você sente capturar e comunicar lindamente um insight ou método estatístico, juntamente com suas idéias sobre o mesmo. Uma entrada por resposta. Obviamente, essa …

44 data-visualization 

Li muitos artigos acadêmicos evolutivos / ecológicos, às vezes com o objetivo específico de ver como as estatísticas estão sendo usadas "no mundo real" fora do livro. Normalmente, tomo as estatísticas em documentos como evangelho e as uso para ajudar no meu aprendizado estatístico. Afinal, se um artigo levou anos …

44 publication-bias  academia 

Conhecemos a resposta para duas variáveis ​​independentes: V a r (XY) = E( X2Y2) - ( E( XY) ))2= V a r ( X) V a r ( Y) + V a r ( X) ( E( Y) ))2+ V a r ( Y) ( E( X) ))2Var(XY)=E(X2Y2)−(E(XY))2=Var(X)Var(Y)+Var(X)(E(Y))2+Var(Y)(E(X))2 {\rm Var}(XY) …

44 variance  random-variable  independence 

Recentemente, aprendi sobre o método de Fisher para combinar valores-p. Isso se baseia no fato de que o valor p sob o nulo segue uma distribuição uniforme e que que eu acho genial. Mas minha pergunta é por que seguir esse caminho complicado? e por que não (com o que …

44 hypothesis-testing  p-value  multiple-comparisons  central-limit-theorem  combining-p-values 

A estatística Kappa ( ) foi introduzida em 1960 por Cohen [1] para medir a concordância entre dois avaliadores. Sua variação, no entanto, havia sido uma fonte de contradições por algum tempo.κκ\kappa Minha pergunta é sobre qual é o melhor cálculo de variância a ser usado com amostras grandes. Estou …

44 estimation  variance  reliability  cohens-kappa 

Se o interesse é apenas estimar os parâmetros de um modelo (estimativa pontual e / ou intervalo) e as informações anteriores não são confiáveis, fracas (sei que isso é um pouco vago, mas estou tentando estabelecer um cenário em que a escolha de um prior é difícil) ... Por que …

44 bayesian  inference  prior  likelihood  information 

Quais são algumas objeções práticas ao uso de métodos estatísticos bayesianos em qualquer contexto? Não, não me refiro ao comentário habitual sobre a escolha do anterior. Ficarei encantado se isso não receber respostas.

44 bayesian