Estatísticas e Big Data

Em uma regressão, o termo de interação apaga os dois efeitos diretos relacionados. Abandono a interação ou relato o resultado? A interação não fazia parte da hipótese original.

25 regression  interaction 

Tenho várias frequências de consulta e preciso estimar o coeficiente da lei de Zipf. Estas são as principais frequências: 26486 12053 5052 3033 2536 2391 1444 1220 1152 1039

25 distributions  estimation  pareto-distribution  zipf 

Qual é a diferença prática entre a métrica de Wasserstein e a divergência de Kullback-Leibler ? A métrica de Wasserstein também é chamada de distância do motor da Terra . Da Wikipedia: A métrica de Wasserstein (ou Vaserstein) é uma função de distância definida entre distribuições de probabilidade em um …

25 distributions  kullback-leibler  metric  wasserstein 

Espero obter uma explicação intuitiva e acessível da regressão quantílica. Digamos que eu tenha um conjunto de dados simples do resultado YYY e preditores X1,X2X1,X2X_1, X_2 . Se, por exemplo, eu executar uma regressão quantílica em 0,25, 0,5, 0,75 e retornar β0,.25,β1,.25...β2,.75β0,.25,β1,.25...β2,.75\beta_{0,.25},\beta_{1,.25}...\beta_{2,.75} . Os valores de ββ\beta são encontrados simplesmente …

25 quantile-regression 

Fechadas. Esta questão está fora de tópico . No momento, não está aceitando respostas. Deseja melhorar esta pergunta? Atualize a pergunta para que ela esteja no tópico de Validação cruzada. Fechado há 6 meses . Eu estava trabalhando nos pacotes R nlme e lme4 , tentando especificar os modelos com …

25 r  random-effects-model  lme4-nlme 

Tenho dados de um experimento de pesquisa no qual os entrevistados foram aleatoriamente designados para um dos quatro grupos: > summary(df$Group) Control Treatment1 Treatment2 Treatment3 59 63 62 66 Enquanto os três grupos de tratamento variam ligeiramente no estímulo aplicado, a principal distinção com a qual me preocupo é entre …

25 r  logistic  categorical-data  interaction  interpretation 

Quais são os bons livros que introduzem análise causal? Estou pensando em uma introdução que explique os princípios da análise causal e mostre como diferentes métodos estatísticos podem ser usados ​​para aplicar esses princípios.

25 references  causality 

Considere um cenário em que você recebe as matrizes KnownLabel Matrix e PredictedLabel. Eu gostaria de medir a qualidade da matriz PredictedLabel em relação à matriz KnownLabel. Mas o desafio aqui é que a KnownLabel Matrix tem poucas linhas, apenas uma 1 e outras poucas linhas têm muitos 1's (essas …

25 machine-learning  data-mining  multilabel 

Eu tenho alguns pontos em e quero agrupar os pontos para que:X= { x1, . . . , xn}X={x1,...,xn}X=\{x_1,...,x_n\}RpRpR^p Cada grupo contém um número igual de elementos de . (Suponha que o número de clusters divida .)XXXnnn Cada agrupamento é "espacialmente coeso" em algum sentido, como os agrupamentos de -eans.kkk …

25 machine-learning  clustering  k-means  unsupervised-learning 

Estou um pouco confuso se uma variável independente (também chamada de preditor ou recurso) em um modelo estatístico, por exemplo, o na regressão linear , é uma variável aleatória?Y = β 0 + β 1 XXXXY=β0+β1XY=β0 0+β1XY=\beta_0+\beta_1 X

25 regression  random-variable  experiment-design  predictor 

Diz-se que a variação é uma medida do spread. Então, eu pensei que a variação de 3,5é igual à variação de, 3,3,5,5uma vez que os números são igualmente distribuídos. Mas este não é o caso, a variação de 3,5é 2enquanto a variação de 3,3,5,5é 1 1/3. Isso me intriga, dada …

25 variance 

Todos os exemplos de SVMs estão relacionados à classificação. Não entendo como um SVM para regressão (regressor de vetor de suporte) pode ser usado na regressão. Pelo meu entendimento, um SVM maximiza a margem entre duas classes para encontrar o hiperplano ideal. Como isso possivelmente funcionaria em um problema de …

25 regression  svm 

Estou fazendo validação cruzada aninhada. Li que a validação cruzada de exclusão única pode ser tendenciosa (não lembro o porquê). É melhor usar a validação cruzada 10 vezes ou a validação cruzada de exclusão única, além do tempo de execução mais longo para a validação cruzada de exclusão única?

25 machine-learning  cross-validation 

O que é um estudo de ablação? E existe uma maneira sistemática de realizá-lo? Por exemplo, eu tenho preditores em uma regressão linear que chamarei de modelo.nnn Como vou realizar um estudo de ablação para isso? Quais métricas devo usar? Uma fonte ou livro abrangente seria apreciado.

25 regression  machine-learning  neural-networks 

De acordo com esta e esta resposta, os auto-codificadores parecem ser uma técnica que utiliza redes neurais para redução de dimensão. Eu gostaria de saber adicionalmente o que é um autoencoder variacional (suas principais diferenças / benefícios em relação aos autoencoders "tradicionais") e também quais são as principais tarefas de …

24 machine-learning  bayesian  deep-learning  autoencoders  variational-bayes