Estatísticas e Big Data

Estou fazendo um curso de Introdução à Bayes e estou tendo dificuldades para entender as distribuições preditivas. Entendo por que eles são úteis e estou familiarizado com a definição, mas há algumas coisas que não entendo direito. 1) Como obter a distribuição preditiva correta para um vetor de novas observações …

9 bayesian  prediction 

Estou trabalhando na estimativa da auto-regressão vetorial (VARs) e da função de resposta ao impulso (IRFs) com base nos dados do painel com 33 indivíduos em 77 trimestres. Como esse tipo de situação deve ser analisado? Quais algoritmos existem para esse fim? Eu preferiria realizar essas análises em R, portanto, …

9 r  econometrics  panel-data  var  impulse-response 

Estou interessado em encontrar um procedimento para simular dados que sejam consistentes com um modelo de mediação especificado. De acordo com a estrutura geral do modelo de equações estruturais lineares para testar modelos de mediação, primeiro descritos por Barron e Kenny (1986) e descritos em outros lugares como Judd, Yzerbyt …

9 r  regression  simulation  random-generation  mediation 

Em Dixon, Coles ( 1997 ), eles usaram a estimativa de máxima verossimilhança para os dois modelos independentes de Poisson modificados em (4.3) para modelar as pontuações no futebol. Estou tentando usar R para "reproduzir" os parâmetros alfa e beta, bem como os parâmetros de efeito doméstico (pág. 274, Tabela …

9 r  modeling  maximum-likelihood  games 

Eu tenho um modelo dinâmico ingênuo de Bayes treinado em algumas variáveis ​​temporais. A saída do modelo é a previsão de P(Event) @ t+1, estimada em cada um t. O gráfico de P(Event)versus timeé como mostrado na figura abaixo. Nesta figura, a linha preta representa P(Event)como previsto pelo meu modelo; …

9 time-series  probability  prediction  model-comparison  model-evaluation 

Oi eu estou lutando para entender Ref.df na tela de saída em R: Approximate significance of smooth terms: edf Ref.df F p-value s(meangrain) 1.779 2.209 3.193 0.0451 * s(depth) 2.108 2.697 3.538 0.0254 * O que significa e é necessário incluir esse termo para apresentar os resultados do GAM em …

9 model  gam  degrees-of-freedom 

Estou usando o regressor RandomForest nos meus dados e pude ver que a pontuação oob foi obtida como 0,83. Não tenho certeza de como foi a situação. Quero dizer, minhas metas são valores altos no intervalo de 10 ^ 7. Portanto, se for MSE, deveria ter sido muito maior. Não …

9 regression  random-forest 

Eu tenho um conjunto de dados de informações de clientes de telefones celulares com duas colunas. A primeira coluna contém a categoria em que uma conta se enquadra (A, B ou C) e a segunda coluna contém um valor binário para o cancelamento da conta. por exemplo A | cancelled …

9 hypothesis-testing  equivalence 

Do ponto de vista matemático, o Teorema de Bayes faz todo sentido para mim (isto é, derivar e provar), mas o que não sei é se existe ou não um bom argumento geométrico ou gráfico que pode ser mostrado para explicar o Teorema de Bayes. Tentei pesquisar no Google para …

9 bayesian  bayes  geometry 

Estou analisando um conjunto de dados sobre comunidades entre marés. Os dados são cobertura percentual (de algas, cracas, mexilhões etc.) em quadrantes. Estou acostumado a pensar na análise de correspondência (CA) em termos de contagem de espécies e na análise de componentes principais (PCA) como algo mais útil para tendências …

9 r  pca  multivariate-analysis  correspondence-analysis 

Sei que essa pergunta foi feita antes: livro de referência para estudos ecológicos, mas não é o que estou procurando. O que estou procurando é se alguém poderia recomendar um bom livro (ou uma referência canônica) sobre ecologia estatística? Eu tenho um entendimento muito bom das estatísticas, então o livro …

9 self-study  references  ecology 

Atualmente, os algoritmos de aprendizado de máquina escalonáveis ​​parecem o burburinho. Toda empresa está lidando com nada além de big data . Existe um livro que discute quais algoritmos de aprendizado de máquina podem ser escalados usando arquiteturas paralelas como Map-Reduce e quais algoritmos não? Ou alguns documentos relevantes?

9 machine-learning  large-data 

Eu tenho os seguintes dados localizados aqui . Estou tentando calcular o intervalo de confiança de 95% sobre a pureza média quando a porcentagem de hidrocarbonetos é 1,0. Em R, insiro o seguinte. > predict(purity.lm, newdata=list(hydro=1.0), interval="confidence", level=.95) fit lwr upr 1 89.66431 87.51017 91.81845 No entanto, como posso obter …

9 r  regression  confidence-interval  prediction-interval 

Recentemente, recebi uma revisão do meu trabalho de pesquisa e o seguinte é o comentário do revisor no meu trabalho: os resultados obtidos em um modelo não são convincentes, especialmente a regressão linear geralmente apresenta deficiências ao lidar com valores extremos. Sugiro que os autores também tentem regressão logística e …

9 regression  logistic  multiple-regression 

Eu tenho um exemplo de conjunto de dados da seguinte maneira: Volume <- seq(1,20,0.1) var1 <- 100 x2 <- 1000000 x3 <- 30 x4 = sqrt(x2/pi) H = x3 - Volume r = (x4*H)/(H + Volume) Power = (var1*x2)/(100*(pi*Volume/3)*(x4*x4 + x4*r + r*r)) Power <- jitter(Power, factor = 1, amount …

9 r  hypothesis-testing  nonlinear-regression  goodness-of-fit  heteroscedasticity