Estatísticas e Big Data

Frequentemente, nas ciências sociais, aparece que variáveis ​​que deveriam ser distribuídas de alguma forma, digamos normalmente, acabam tendo uma descontinuidade em sua distribuição em torno de certos pontos. Por exemplo, se houver pontos de corte específicos, como "aprovação / reprovação" e se essas medidas estiverem sujeitas a distorção, pode haver …

10 normal-distribution  pdf 

Basicamente, tudo o que quero fazer é prever uma resposta escalar usando algumas curvas. Eu tenho tanto quanto fazer uma regressão (usando fRegress do pacote fda), mas não tenho idéia de como aplicar os resultados a um novo conjunto de curvas (para previsão). Eu tenho N = 536 curvas e …

10 r  functional-data-analysis 

Seja e Y duas variáveis ​​aleatórias independentes com a mesma distribuição uniforme U ( 0 , 1 ) com densidadeXXXYYYU(0,1)U(0,1)U(0,1) se 0 ≤ x ≤ 1 (e 0 em outro lugar).f(x)=1f(x)=1f(x)=10≤x≤10≤x≤10≤x≤1000 Seja uma variável aleatória real definida por:ZZZ se X > Y (e 0 em outro lugar).Z=X−YZ=X−YZ=X-YX>YX>YX>Y000 Derivar a distribuição …

10 self-study  random-variable 

Inspirado por esta pergunta e pelo "Problema 3" em particular: As distribuições posteriores são um pouco mais difíceis de incorporar em uma meta-análise, a menos que uma descrição paramétrica e freqüentista da distribuição tenha sido fornecida. Recentemente, estive pensando bastante em incorporar a meta-análise a um modelo bayesiano - principalmente …

10 bayesian  meta-analysis 

Atualmente, estou fazendo minha primeira aula de regressão linear aplicada no nível de pós-graduação e estou lutando com transformações de variáveis ​​preditivas em regressão linear múltipla. O texto que estou usando, Kutner e outros "Modelos Estatísticos Lineares Aplicados", não parece cobrir a pergunta que estou tendo. (além de sugerir que …

10 data-transformation  multiple-regression 

Eu tenho um monte de variáveis ​​que contêm dados longitudinais do dia 0 ao dia 7. Estou procurando uma abordagem de cluster apropriada que possa agrupar essas variáveis ​​longitudinais (não casos) em grupos diferentes. Tentei analisar esses dados separadamente por tempo, mas o resultado foi bastante difícil de ser razoavelmente …

10 clustering 

No meu tempo livre, estou trabalhando em um pequeno sistema baseado na Web que coleta relatórios de falhas (mas não outros relatórios de erros sem falhas) que são enviados a partir de aplicativos Delphi para Windows. Para solução de problemas, os usuários gostariam de ter um recurso de mineração de …

10 data-mining 

Eu criei alguns modelos de regressão de Cox e gostaria de ver o desempenho desses modelos e pensei que talvez uma curva ROC ou uma estatística c possa ser útil semelhante ao uso deste artigo: JN Armitage e JH van der Meulen, “Identificando comorbidades em pacientes cirúrgicos usando dados administrativos …

10 r  survival  roc 

Pensando em um problema supostamente simples, mas interessante, eu gostaria de escrever um código para prever consumíveis necessários em um futuro próximo, considerando o histórico completo de minhas compras anteriores. Tenho certeza de que esse tipo de problema tem uma definição mais genérica e bem estudada (alguém sugeriu que isso …

10 time-series  machine-learning  forecasting 

Na minha pesquisa, encontrei o seguinte problema geral: tenho duas distribuições e no mesmo domínio e um grande (mas finito) número de amostras dessas distribuições. As amostras são distribuídas de forma independente e idêntica a partir de uma dessas duas distribuições (embora as distribuições possam estar relacionadas: por exemplo, pode …

10 hypothesis-testing  mathematical-statistics  kullback-leibler  information-theory  bounds 

Trabalho há meses na previsão de carga de curto prazo e no uso de dados climáticos / climáticos para melhorar a precisão. Eu tenho formação em ciência da computação e, por esse motivo, estou tentando não cometer grandes erros e comparações injustas trabalhando com ferramentas de estatística como os modelos …

10 time-series  forecasting  arima 

Já tive cursos suficientes de estatística durante meus anos de escola e na universidade. Eu tenho um entendimento justo dos conceitos, como IC, valores de p, interpretação da significância estatística, testes múltiplos, correlação, regressão linear simples (com mínimos quadrados) (modelos lineares gerais) e todos os testes de hipótese. Eu tinha …

10 bayesian  references  maximum-likelihood  generalized-linear-model 

Estou tentando entender o cálculo de potência para o caso do teste t de duas amostras independentes (não assumindo variações iguais, então usei Satterthwaite). Aqui está um diagrama que eu encontrei para ajudar a entender o processo: Então, assumi que, considerando o seguinte sobre as duas populações e os tamanhos …

10 power-analysis 

Alguém pode esclarecer como os modelos de Markov ocultos estão relacionados à maximização de expectativas? Passei por muitos links, mas não consegui ter uma visão clara. Obrigado!

10 markov-process  expectation-maximization  hidden-markov-model 

É difícil dizer o que está sendo pedido aqui. Essa pergunta é ambígua, vaga, incompleta, excessivamente ampla ou retórica e não pode ser razoavelmente respondida em sua forma atual. Para obter ajuda para esclarecer esta questão para que possa ser reaberta, visite o centro de ajuda . Fechado há 7 …

10 nonlinear-regression  goodness-of-fit  deviance