Estatísticas e Big Data

Quais são algumas das principais armadilhas do uso de modelos lineares de efeitos mistos? Quais são as coisas mais importantes a serem testadas / observadas na avaliação da adequação do seu modelo? Ao comparar modelos do mesmo conjunto de dados, quais são as coisas mais importantes a serem procuradas?

18 mixed-model  model-comparison 

Obviamente, os eventos A e B são independentes se Pr = Pr Pr . Vamos definir uma quantidade relacionada Q:(A∩B)(A∩B)(A\cap B)(A)(A)(A)(B)(B)(B) Q≡Pr(A∩B)Pr(A)Pr(B)Q≡Pr(A∩B)Pr(A)Pr(B)Q\equiv\frac{\mathrm{Pr}(A\cap B)}{\mathrm{Pr}(A)\mathrm{Pr}(B)} Então A e B são independentes se Q = 1 (assumindo que o denominador é diferente de zero). Q realmente tem um nome? Eu sinto que isso …

18 probability  terminology  independence 

Em um modelo de logit, existe uma maneira mais inteligente de determinar o efeito de uma variável ordinal independente do que usar variáveis ​​fictícias para cada nível?

18 logistic  logit  ordinal-data 

Bloqueado . Esta pergunta e suas respostas estão bloqueadas porque a questão está fora do tópico, mas tem um significado histórico. No momento, não está aceitando novas respostas ou interações. Estou procurando conjuntos de dados de redes sociais (twitter, friendfeed, facebook, lastfm etc.) para tarefas de classificação, de preferência no …

18 classification  dataset 

Sei que falta uma fórmula fácil de manusear para o CDF de uma distribuição normal, devido à complicada função de erro nela. No entanto, gostaria de saber se existe uma boa fórmula para . Ou qual seria a aproximação do "estado da arte" para esse problema.N( c-≤ x < c+| …

18 normal-distribution  approximation 

Eu tenho dados como este: > table(A,B,C) , , C = FALSE B A FALSE TRUE FALSE 177 42 TRUE 6 8 , , C = TRUE B A FALSE TRUE FALSE 5 31 TRUE 4 10 Como plotar isso em um único gráfico, possivelmente sem impor nenhuma hierarquia?

18 data-visualization  contingency-tables 

Recentemente, li o livro de Skillicorn sobre decomposições matriciais e fiquei um pouco decepcionado, pois era direcionado a um público de graduação. Gostaria de compilar (para mim e para os outros) uma breve bibliografia de artigos essenciais (pesquisas, mas também artigos inovadores) sobre decomposições matriciais. O que eu tenho em …

18 matrix-decomposition  svd  numerics 

Usando o coeficiente de correlação de Pearson, tenho várias variáveis ​​altamente correlacionadas ( e para 2 pares de variáveis ​​que estão no meu modelo).ρ=0.978ρ=0.978\rho = 0.978ρ=0.989ρ=0,989\rho = 0.989 O motivo pelo qual algumas das variáveis ​​são altamente correlacionadas é porque uma variável é usada no cálculo para outra variável. Exemplo: …

18 regression  correlation  modeling 

Alguém pode me explicar a lógica matemática que ligaria duas afirmações (a) e (b)? Vamos ter um conjunto de valores (alguma distribuição). Agora, a) A mediana não depende de todo valor [depende apenas de um ou dois valores médios]; b) Mediana é o lugar geométrico da soma mínima dos desvios …

18 mean  median  robust  sensitivity-analysis 

Olá, tenho dois problemas que parecem candidatos naturais a modelos multiníveis / mistos, que nunca usei. O mais simples, e que espero tentar como introdução, é o seguinte: Os dados se parecem com muitas linhas do formulário x y innergroup outergroup onde x é uma covariável numérica na qual desejo …

18 r  mixed-model  maximum-likelihood  generalized-linear-model 

Bloqueado . Esta pergunta e suas respostas estão bloqueadas porque a questão está fora do tópico, mas tem um significado histórico. No momento, não está aceitando novas respostas ou interações. Considere o seguinte gráfico: x <- 1:100 y1 <- rnorm(100) y2 <- rnorm(100)+100 par(mar=c(5,5,5,5)) plot(x,y1,pch=0,type="b",col="red",yaxt="n",ylim=c(-8,2),ylab="") axis(side=2, at=c(-2,0,2)) mtext("red line", side …

18 r  data-visualization 

O poder de uma regressão logística e de um teste t é equivalente? Nesse caso, eles devem ser "equivalentes à densidade de dados", pelo que quero dizer que o mesmo número de observações subjacentes produz o mesmo poder, dado um alfa fixo de 0,05. Considere dois casos: [Teste t paramétrico]: …

18 logistic  t-test  power  power-analysis 

Sou o autor do pacote ez para R e estou trabalhando em uma atualização para incluir o cálculo automático das taxas de verossimilhança (LRs) na saída de ANOVAs. A idéia é fornecer uma LR para cada efeito que seja análogo ao teste desse efeito que a ANOVA alcança. Por exemplo, …

18 r  anova  likelihood-ratio 

Desejo decidir se devo fazer um curso chamado "INTRODUÇÃO A PROCESSOS ESTOCÁSTICOS", que será realizado no próximo semestre em minha universidade. Perguntei ao professor como estudar esse curso me ajudaria como estatístico, ele disse que, como é provável, conhece muito pouco de estatística e não sabe como responder à minha …

18 probability  stochastic-processes 

Quando trabalho em projetos de análise de dados, costumo armazenar dados em arquivos de dados separados por vírgula ou tabulação (CSV, TSV). Enquanto os dados geralmente pertencem a um sistema de gerenciamento de banco de dados dedicado. Para muitos dos meus aplicativos, isso seria exagero. Posso editar arquivos CSV e …

18 project-management