Estatísticas e Big Data

Eu sei que existem muitos materiais que explicam o valor p. No entanto, o conceito não é fácil de entender com firmeza sem maiores esclarecimentos. Aqui está a definição de p-value da Wikipedia: O valor p é a probabilidade de obter uma estatística de teste pelo menos tão extrema quanto …

33 hypothesis-testing  p-value  interpretation 

Eu tenho um conjunto de dados de streaming, exemplos estão disponíveis um de cada vez. Eu precisaria fazer uma classificação multi-classe neles. Assim que forneço um exemplo de treinamento para o processo de aprendizado, tenho que descartar o exemplo. Simultaneamente, também estou usando o modelo mais recente para realizar previsões …

33 machine-learning  svm  neural-networks 

Uma das contribuições tardias de RA Fisher foram os intervalos fiduciais e os argumentos fiduciais de princípios . Essa abordagem, no entanto, não é nem de longe tão popular quanto os argumentos de princípios freqüentistas ou bayesianos. Qual é o argumento fiducial e por que não foi aceito?

33 inference  philosophical  fiducial 

Qual é a razão pela qual usamos logaritmo natural (ln) em vez de logar na base 10 na especificação de funções em econometria?

33 econometrics 

Entendo que, para determinados conjuntos de dados, como a votação, ele tem um desempenho melhor. Por que a regressão de Poisson é usada sobre regressão linear comum ou regressão logística? Qual é a motivação matemática para isso?

33 count-data  poisson-regression 

Eu tenho quatro séries temporais diferentes de medições horárias: O consumo de calor dentro de uma casa A temperatura fora de casa A radiação solar A velocidade do vento Quero poder prever o consumo de calor dentro de casa. Existe uma clara tendência sazonal, tanto anualmente como diariamente. Como existe …

33 time-series  modeling  arima 

As notícias dizem que o CERN anunciará amanhã que o bóson de Higgs foi detectado experimentalmente com 5 σσ\sigma evidência. Segundo esse artigo: 5 σσ\sigma equivale a 99,9994% de chance dos dados que os detectores CMS e ATLAS estão vendo não são apenas ruídos aleatórios - e 0,00006% de chance …

33 hypothesis-testing  p-value  history 

Estou procurando um bom livro / tutorial para aprender sobre análise de sobrevivência. Também estou interessado em referências sobre como fazer análise de sobrevivência em R.

33 r  survival  references 

Gostaria de saber se existe uma variante boxplot adaptada aos dados distribuídos de Poisson (ou possivelmente outras distribuições)? Com uma distribuição gaussiana, bigodes colocados em L = Q1 - 1,5 IQR e U = Q3 + 1,5 IQR, o boxplot tem a propriedade de que haverá aproximadamente tantos outliers baixos …

33 data-visualization  poisson-distribution  boxplot 

Estou prestes a ajudar a ensinar estatística para estudantes de medicina neste semestre. Já ouvi muitas histórias de horror sobre o medo desses alunos ao aprender estatística. Alguém pode sugerir o que fazer com esse medo? (Links para pessoas que estão discutindo isso ou oferecem sugestões de sua própria experiência)

33 teaching 

Estou tentando entender o erro padrão "clustering" e como executar no R (é trivial no Stata). No RI, não obtive sucesso usando plmou escrevendo minha própria função. Vou usar os diamondsdados do ggplot2pacote. Eu posso fazer efeitos fixos com variáveis ​​fictícias > library(plyr) > library(ggplot2) > library(lmtest) > library(sandwich) > …

33 r  panel-data  standard-error  fixed-effects-model  clustered-standard-errors 

Dados dois histogramas, como avaliamos se são semelhantes ou não? É suficiente simplesmente olhar para os dois histogramas? O mapeamento simples de um para um tem o problema de que, se um histograma for ligeiramente diferente e ligeiramente alterado, não obteremos o resultado desejado. Alguma sugestão?

33 histogram  image-processing 

Eu escrevi um programa de computador que pode detectar moedas em uma imagem estática (.jpeg, .png, etc.) usando algumas técnicas padrão de visão computacional (Gaussian Blur, limiar, Hough-Transform etc.). Usando as proporções das moedas retiradas de uma determinada imagem, posso estabelecer com certeza quais são as moedas. No entanto, desejo …

33 image-processing 

Digamos que temos a variável aleatória com variação e média conhecidas. A questão é: qual é a variação de para alguma função dada f. O único método geral que eu conheço é o método delta, mas fornece apenas uma aproximação. Agora estou interessado em , mas também seria bom conhecer …

33 variance  random-variable  delta-method 

Existem várias implementações da família de modelos GBDT, como: GBM XGBoost LightGBM Catboost. Quais são as diferenças matemáticas entre essas diferentes implementações? O Catboost parece ter um desempenho superior às outras implementações, mesmo usando apenas seus parâmetros padrão de acordo com essa marca de referência , mas ainda é muito …

33 boosting  xgboost