Estatísticas e Big Data

Como posso gerar manualmente um número aleatório a partir de uma determinada distribuição, como por exemplo, 10 realizações da distribuição normal padrão?

30 normal-distribution  simulation  monte-carlo  random-generation  randomness 

Estou confuso sobre o Modelo de Correção de Erros de Vetor ( VECM ). Formação técnica: O VECM oferece a possibilidade de aplicar o Modelo Autoregressivo de Vetor ( VAR ) a séries temporais multivariadas integradas. Nos livros didáticos, eles citam alguns problemas na aplicação de um VAR a séries …

30 time-series  forecasting  var  cointegration  vecm 

Fiquei me perguntando se alguém poderia me esclarecer sobre as diferenças atuais entre essas duas funções. Encontrei a seguinte pergunta: Como escolher a biblioteca nlme ou lme4 R para modelos de efeitos mistos? , mas isso data de alguns anos atrás. Essa é a vida inteira nos círculos de software. …

30 r  mixed-model  lme4-nlme 

Estou trabalhando com um grande conjunto de dados (confidencial, portanto não posso compartilhar muito) e concluí que seria necessária uma regressão binomial negativa. Eu nunca fiz uma regressão glm antes e não consigo encontrar nenhuma informação clara sobre quais são as suposições. Eles são iguais para a MLR? Posso transformar …

30 regression  generalized-linear-model  data-transformation  assumptions  negative-binomial 

Espero que esta seja uma pergunta que alguém aqui possa responder sobre a natureza da decomposição de somas de quadrados de um modelo de efeitos mistos adequado lmer(do pacote lme4 R). Primeiramente, devo dizer que estou ciente da controvérsia ao usar essa abordagem e, na prática, seria mais provável que …

30 r  anova  mixed-model  lme4-nlme 

Gostaria de saber se existe algum teste estatístico para "testar" o significado de uma distribuição bimodal. Quero dizer, quanto meus dados atendem à distribuição bimodal ou não? Em caso afirmativo, existe algum teste no programa R?

30 r  hypothesis-testing  distributions  bimodal 

Estou tentando montar um currículo de matemática auto-direcionado para me preparar para o aprendizado de mineração de dados e aprendizado de máquina. Isso é motivado pelo início da aula de aprendizado de máquina de Andrew Ng no Coursera e sentindo que, antes de prosseguir, eu precisava melhorar minhas habilidades matemáticas. …

30 machine-learning  references  data-mining 

Deixe- denotam a função de distribuição binomial (DF) com parâmetros e avaliada em : \ begin {equação} B (n, p, r) = \ sum_ {i = 0} ^ r \ binom {n} {i} p ^ i (1-p) ^ {ni}, \ end {equação } e deixe F (\ nu, r) denotar …

30 binomial  poisson-distribution  convergence  probability-inequalities 

Eu tenho um grande conjunto de dados e quero realizar uma redução de dimensionalidade. Agora, em todos os lugares que leio, posso usar o PCA para isso. No entanto, ainda não consigo entender o que fazer depois de calcular / executar o PCA. Em R isso é facilmente feito com …

30 r  pca 

Dado um conjunto de dados com instâncias juntamente com classes em que cada instância pertence exatamente a uma classexixix_iNNNxixix_iyiyiy_i um classificador multiclasse Após o treinamento e o teste, basicamente tenho uma tabela com a classe verdadeira e a classe prevista para cada instância no conjunto de testes. Portanto, para cada …

30 machine-learning  classification  multi-class 

Muitas vezes me deparei com avisos informais contra "espionagem de dados" (aqui está um exemplo divertido ), e acho que tenho uma ideia intuitiva do que isso significa e por que pode ser um problema. Por outro lado, "análise exploratória de dados" parece ser um procedimento perfeitamente respeitável em estatística, …

30 multiple-comparisons  interpretation  eda 

Eu tenho muitas sequências de endereços: 1600 Pennsylvania Ave, Washington, DC 20500 USA Eu quero analisá-los em seus componentes: street: 1600 Pennsylvania Ave city: Washington province: DC postcode: 20500 country: USA Mas é claro que os dados estão sujos: vêm de muitos países em vários idiomas, escritos de maneiras diferentes, …

30 machine-learning  text-mining 

Eu tenho um manuscrito sobre um método de inicialização para testar hipóteses de uma média e gostaria de enviá-lo para publicação, mas tenho um dilema moral. Eu assinei o protesto contra a Elsevier por suas práticas comerciais antiéticas, e a leitura de toda a questão realmente me fez questionar a …

30 hypothesis-testing  bootstrap  journals 

Sou muito novo com R e estatísticas em geral, mas preciso fazer um gráfico de dispersão que acho que pode estar além das capacidades nativas. Eu tenho alguns vetores de observações e quero fazer um gráfico de dispersão com eles, e cada par se enquadra em uma de três categorias. …

30 r  data-visualization  scatterplot 

Aprendi que uma estatística é um atributo que você pode obter de amostras. Pegando muitas amostras do mesmo tamanho, calculando esse atributo para todas elas e plotando o pdf, obtemos a distribuição do atributo correspondente ou a distribuição das estatísticas correspondentes. Também ouvi dizer que as estatísticas são feitas para …

30 terminology  estimators  definition