Estatísticas e Big Data

Eu gostaria de gerar uma matriz de correlação aleatória de modo que a distribuição de seus elementos fora da diagonal pareça aproximadamente normal. Como eu posso fazer isso? A motivação é essa. Para um conjunto de dados de séries temporais, a distribuição de correlação geralmente parece bastante próxima do normal. …

11 normal-distribution  random-generation  correlation-matrix 

A covariância entre duas variáveis ​​aleatórias define uma medida de quão estreitamente elas estão linearmente relacionadas entre si. Mas e se a distribuição conjunta for circular? Certamente há estrutura na distribuição. Como essa estrutura é extraída?

11 covariance-matrix 

Minhas tentativas: Não consegui intervalos de confiança em interaction.plot() e por outro lado plotmeans()do pacote 'gplot' não exibia dois gráficos. Além disso, eu não poderia impor dois plotmeans()gráficos um em cima do outro porque, por padrão, o eixo é diferente. Eu tive algum sucesso usando o plotCI()pacote 'gplot' e sobrepondo …

11 r  data-visualization  confidence-interval  interaction 

O que significa que um estudo está sobrecarregado? Minha impressão é que isso significa que os tamanhos das suas amostras são tão grandes que você tem o poder de detectar tamanhos de efeito minúsculos. Esses tamanhos de efeito são talvez tão pequenos que são mais propensos a resultar de pequenos …

11 statistical-significance  sample-size  effect-size  power-analysis  power 

Na ausência de boas suposições a priori sobre o número de componentes a serem solicitados na Análise de Componentes Independentes, estou procurando automatizar um processo de seleção. Eu acho que um critério razoável pode ser o número que minimiza a evidência global de correlação entre os componentes computados. Aqui está …

11 ica 

Tenho a seguinte pergunta para um curso em que estou trabalhando: Conduza um estudo de Monte Carlo para estimar as probabilidades de cobertura do intervalo de confiança normal de auto-inicialização e do intervalo básico de confiança. Amostra de uma população normal e verifique as taxas de cobertura empírica para a …

11 r  confidence-interval  self-study  bootstrap  monte-carlo 

Em R, se eu escrever lm(a ~ b + c + b*c) isso ainda seria uma regressão linear? Como fazer outros tipos de regressão em R? Gostaria de receber alguma recomendação para livros ou tutoriais?

11 r  regression 

Desenvolvi um modelo de logit para ser aplicado a seis conjuntos diferentes de dados transversais. O que estou tentando descobrir é se há alterações no efeito substantivo de uma determinada variável independente (IV) na variável dependente (DV) que controla outras explicações em momentos diferentes e ao longo do tempo. Minhas …

11 logistic  spss 

Eu venho das ciências sociais, onde p <0,05 é praticamente a norma, com p <0,1 ep <0,01 também aparecendo, mas eu queria saber: que campos de estudo, se houver, usam valores de p mais baixos como comum padrão?

11 statistical-significance  p-value 

Nos algoritmos de motivo de rede, parece bastante comum retornar um valor p e um escore Z para uma estatística: "A rede de entrada contém X cópias do subgrafo G". Um subgráfico é considerado um motivo se satisfizer valor p <A, Escore Z> B e X> C, para alguns A, …

11 hypothesis-testing  p-value  z-statistic 

Sou designer de software por profissão e estou trabalhando em um projeto para um cliente, e gostaria de garantir que minha análise seja estatisticamente correta. Considere o seguinte: Temos n anúncios (n <10) e queremos simplesmente saber qual anúncio apresenta o melhor desempenho. Nosso servidor de anúncios exibirá aleatoriamente um …

11 anova  sample-size  t-test  rule-of-thumb 

Seja A matriz de variáveis ​​independentes e B seja a matriz n × 1 correspondente dos valores dependentes. Na regressão cume, nós definimos um parâmetro λ de forma que: β = ( A T A + X I ) - 1 A T B . Agora vamos [USV] = SVD …

11 ridge-regression 

Bloqueado . Esta pergunta e suas respostas estão bloqueadas porque a questão está fora do tópico, mas tem um significado histórico. No momento, não está aceitando novas respostas ou interações. Preciso construir um boxplot sem nenhum eixo e adicioná-lo ao gráfico atual (curva ROC), mas preciso adicionar mais informações de …

11 r  boxplot 

Eu postei uma pergunta anterior , isso está relacionado, mas acho que é melhor iniciar outro tópico. Desta vez, estou pensando em como gerar pontos uniformemente distribuídos dentro da esfera da unidade 3-d e como verificar a distribuição visual e estatisticamente também? Não vejo as estratégias postadas lá diretamente transferíveis …

11 random-generation 

Eu realmente nunca encontrei um bom texto ou exemplos sobre como lidar com dados 'inexistentes' para entradas para qualquer tipo de classificador. Eu li muito sobre dados ausentes, mas o que pode ser feito sobre dados que não podem ou não existem em relação às entradas multivariadas. Entendo que esta …

11 missing-data