Estatísticas e Big Data

Depois de mostrarmos que duas quantidades estão correlacionadas, como inferimos que o relacionamento é causal? E, além disso, qual causa o quê? Agora, em teoria, pode-se usar uma "atribuição aleatória" (seja qual for a palavra certa), para quebrar qualquer vínculo de acidente que possa existir entre duas variáveis. Mas, em …

9 correlation  causality 

Ao selecionar um número apropriado de nós para um GAM, convém levar em consideração o número de dados e incrementos no eixo x. E se tivermos 100 incrementos no eixo x com 1000 pontos de dados em cada incremento. A informação aqui diz: Se eles não forem fornecidos, os nós …

9 r  gam  splines 

Muitas referências (incluindo a wikipedia e http://www.atmos.washington.edu/~dennis/MatrixCalculus.pdf e http://michael.orlitzky.com/articles/the_derivative_of_a_quadratic_form.php ) definem a derivada de um função por um vetor como derivadas parciais da função organizada em uma linha (portanto, uma derivada de uma função com valor escalar é um vetor de linha). Nesta convenção, o gradiente e a derivada do …

9 linear-algebra  derivative 

Eu estava tentando reaprender as estatísticas bayesianas (toda vez que achava que finalmente as recebia, surge outra coisa que não havia considerado antes ...), mas não estava claro (para mim) o que o processo de geração de dados na estrutura bayesiana, na verdade é. A estrutura frequentista é clara para …

9 bayesian  modeling  prior  frequentist  randomness 

Eu tenho três variáveis ​​macroeconômicas (ICS - sentimento do consumidor, ER - taxa de emprego, DGO - pedido de bens duráveis) e executei testes de causalidade de Granger em R sobre eles. Eu realmente não sei como interpretar os resultados de um teste de Granger. Alguém poderia me ajudar com …

9 r  granger-causality 

Aprendi que o ajuste excessivo pode ser detectado plotando o erro de treinamento e o erro de teste versus as épocas. Como em: Eu estive lendo este post do blog onde eles dizem que a rede neural, net5 é excessiva e eles fornecem esta figura: O que é estranho para …

9 neural-networks  overfitting 

A distinção entre variáveis ​​estritamente aleatórias (que devem ser modeladas como tais) e variáveis ​​não aleatórias que alguns argumentam que poderiam ser modeladas como aleatórias se for um modelo hierárquico / multinível, é pouco clara para mim. Bates e Bolker exemplificam efeitos aleatórios com casos de verdadeira aleatoriedade, por exemplo, …

9 random-effects-model  mixed-model 

É verdade que uma verificação de normalidade deve ser usada apenas para dados contínuos (razão, nível de intervalo de medição) e não para dados categóricos (nominal, ordinal)? Existe alguma maneira de verificar a normalidade dos dados categóricos?

9 assumptions  normality-assumption 

Qual é a diferença entre "padrão ouro" e "verdade fundamental"? Os dois artigos da wiki (isto é, padrão-ouro e verdade do terreno ) relacionam os dois conceitos entre si em termos de precisão / exatidão do modelo. Essa é uma possibilidade. Mas também descobri que esses conceitos são usados ​​de …

9 classification  terminology 

Os dados: Para os fins desta pergunta / comunicação, podemos assumir que os dados se parecem com rnbinom(1000,size=0.1,prob=0.01)R, o que gera uma amostra aleatória de 1.000 observações a partir de uma distribuição binomial negativa (com size=0.1e probabilidade de sucesso prob=0.01). Essa é a parametrização em que a variável aleatória representa …

9 hypothesis-testing  goodness-of-fit 

Estou com problemas para obter resultados equivalentes entre um aovmodelo de medidas repetidas entre dentro e um lmermodelo misto. Meus dados e script têm a seguinte aparência data=read.csv("https://www.dropbox.com/s/zgle45tpyv5t781/fitness.csv?dl=1") data$id=factor(data$id) data id FITNESS TEST PULSE 1 1 pilates CYCLING 91 2 2 pilates CYCLING 82 3 3 pilates CYCLING 65 4 …

9 r  anova  mixed-model  repeated-measures  lme4-nlme 

Eu tenho uma distribuição de amostras com um pequeno número de valores em cada um (menos de ). Eu calculei a mediana para cada amostra, que quero comparar com um modelo e obter a diferença entre o modelo e a mediana de cada amostra. Para ter um resultado consistente, preciso …

9 confidence-interval  standard-error  median 

Quero calcular as taxas de incidência para apresentar as taxas de risco, a fim de apresentar medidas de risco relativas e absolutas. Vi em outros estudos que essas taxas de incidência podem ser calculadas usando modelos de Poisson com tempo de acompanhamento no modelo como um deslocamento. Então, eu tentei …

9 r  survival  cox-model  poisson-regression  incidence-rate-ratio 

Eu tenho uma pergunta metodológica e, portanto, nenhum conjunto de dados de amostra está anexado. Estou planejando fazer uma regressão de Cox ajustada no escore de propensão que visa examinar se um determinado medicamento reduzirá o risco de um resultado. O estudo é observacional, composto por 10.000 indivíduos. O conjunto …

9 survival  cox-model  propensity-scores  regression-strategies 

Devo incluir efeitos aleatórios em um modelo, mesmo que não sejam estatisticamente significativos? Eu tenho um desenho experimental de medidas repetidas, no qual cada indivíduo experimenta três tratamentos diferentes em ordem aleatória. Eu gostaria de controlar quaisquer efeitos individuais e de ordem, mas nenhum deles parece ser estatisticamente significativo em …

9 mixed-model  random-effects-model  glmm