Estatísticas e Big Data

Estou lutando para entender a diferença entre o erro padrão e o desvio padrão. Como eles são diferentes e por que você precisa medir o erro padrão?

96 mean  standard-deviation  standard-error  intuition 

Certas hipóteses podem ser testadas usando o teste t de Student (talvez usando a correção de Welch para variações desiguais no caso de duas amostras) ou por um teste não-paramétrico, como o teste de ranking assinado emparelhado de Wilcoxon, o teste U de Wilcoxon-Mann-Whitney, ou o teste de sinal emparelhado. …

96 hypothesis-testing  t-test  nonparametric  small-sample  wilcoxon-mann-whitney 

Ao usar o SVM, precisamos selecionar um kernel. Gostaria de saber como selecionar um kernel. Algum critério na seleção do kernel?

96 machine-learning  svm  kernel-trick 

Existe algum documento de referência que forneça uma lista abrangente de funções de ativação em redes neurais, juntamente com seus prós / contras (e, idealmente, alguns indicadores para publicações em que foram bem-sucedidos ou não tão bem-sucedidos)?

95 neural-networks  references 

Muitos livros e tutoriais de redes neurais gastam muito tempo com o algoritmo de retropropagação, que é essencialmente uma ferramenta para calcular o gradiente. Vamos supor que estamos construindo um modelo com ~ 10K parâmetros / pesos. É possível executar a otimização usando alguns algoritmos de otimização sem gradiente? Eu …

94 machine-learning  neural-networks  optimization  backpropagation 

A frase p- hacking (também: "dragagem de dados" , "espionagem" ou "pesca") refere-se a vários tipos de negligência estatística nas quais os resultados se tornam artificialmente estatisticamente significativos. Existem várias maneiras de obter um resultado "mais significativo", incluindo, mas de forma alguma limitado a: analisando apenas um subconjunto "interessante" dos …

94 hypothesis-testing  statistical-significance  p-value  model-selection  reproducible-research 

Suponha que eu tenha um grande conjunto de dados multivariados com pelo menos três variáveis. Como posso encontrar os outliers? Os gráficos de dispersão em pares não funcionarão, pois é possível que um outlier exista em três dimensões que não seja um outlier em nenhum dos subespaços bidimensionais. Não estou …

94 multivariate-analysis  outliers 

Que livro você recomendaria para cientistas que não são estatísticos? Entrega clara é muito apreciada. Bem como a explicação das técnicas e métodos apropriados para tarefas típicas: análise de séries temporais, apresentação e agregação de grandes conjuntos de dados.

94 references 

No contexto das redes neurais, qual é a diferença entre a taxa de aprendizado e a queda de peso?

94 neural-networks  terminology 

Na minha função, muitas vezes trabalho com conjuntos de dados de outras pessoas, os não especialistas me trazem dados clínicos e os ajudo a resumir e executar testes estatísticos. O problema que estou tendo é que os conjuntos de dados que eu trouxe são quase sempre repletos de erros de …

93 dataset  outliers  checking 

Entendo que uma série temporal estacionária é aquela cuja média e variação são constantes ao longo do tempo. Alguém pode explicar por que precisamos garantir que nosso conjunto de dados esteja estacionário antes que possamos executar diferentes modelos ARIMA ou ARM nele? Isso também se aplica a modelos de regressão …

92 regression  time-series  stationarity 

Gostaria de saber como calcular precisão e recordar usando uma matriz de confusão para um problema de classificação de várias classes. Especificamente, uma observação só pode ser atribuída à sua classe / rótulo mais provável. Eu gostaria de calcular: Precisão = TP / (TP + FP) Rechamada = TP / …

92 machine-learning  classification  precision-recall  multi-class 

À medida que alguém se interessa por estatística, a dicotomia "Frequentista" vs. "Bayesiano" logo se torna comum (e quem nunca leu The Signal and the Noise , de Nate Silver , afinal?). Em palestras e cursos introdutórios, o ponto de vista é predominantemente freqüentador ( MLE , valores), mas tende …

92 bayesian  mathematical-statistics  inference  bayes  frequentist 

O que é covariância em linguagem simples e como ela está vinculada aos termos estrutura de dependência , correlação e variância-covariância em relação a projetos de medidas repetidas?

92 correlation  repeated-measures  terminology  covariance  independence 

Alguém poderia me explicar em detalhes sobre a estimativa de máxima verossimilhança (MLE) em termos leigos? Gostaria de conhecer o conceito subjacente antes de entrar em derivação ou equação matemática.

92 mathematical-statistics  maximum-likelihood  intuition  definition  philosophical