Estatísticas e Big Data

Aqui está um problema que surgiu em um exame semestral em nossa universidade, alguns anos atrás, e estou lutando para resolver. Se são variáveis ​​aleatórias independentes com densidades e respectivamente, mostram que segue . β β ( n 1 , n 2 ) β ( n 1 + 1X1,X2X1,X2X_1,X_2ββ\betaβ(n1,n2)β(n1,n2)\beta(n_1,n_2)√β(n1+12,n2)β(n1+12,n2)\beta(n_1+\dfrac{1}{2},n_2) β(2n1,2n2)X1X2−−−−−√X1X2\sqrt{X_1X_2}β(2n1,2n2)β(2n1,2n2)\beta(2n_1,2n_2) …

9 self-study  random-variable  beta-distribution  distributions  jacobian 

A perda de L2, juntamente com a perda de L0 e L1, são três funções de perda "padrão" muito comuns usadas ao resumir uma posterior pela mínima perda posterior esperada. Uma razão para isso é talvez o fato de serem relativamente fáceis de calcular (pelo menos para distribuições 1d), L0 …

9 bayes  teaching  decision-theory  loss-functions 

Estou tentando entender melhor os campos receptivos da CNN. Para fazer isso, gostaria de calcular o campo receptivo de cada neurônio no LeNet. Para um MLP normal, é bastante fácil (consulte http://deeplearning.net/tutorial/lenet.html#sparse-connectivity ), mas é mais difícil calcular o campo receptivo de um neurônio em uma camada após uma ou …

9 deep-learning  conv-neural-network 

Eu tenho um modelo de mistura no qual desejo encontrar o estimador de probabilidade máxima de um dado conjunto de dados e um conjunto de dados parcialmente observados . Eu implementei a etapa E (calculando a expectativa de z dado x e os parâmetros atuais \ theta ^ k ) …

9 maximum-likelihood  mixture  expectation-maximization 

Tenho um conjunto de dados de uma pesquisa de clientes. Quero implantar um teste estatístico para verificar se há diferença de significância entre o produto 1 e o produto 2. Aqui está um conjunto de dados de avaliações de clientes. A taxa é de muito ruim, ruim, ok, boa e …

9 statistical-significance  categorical-data  repeated-measures  ordinal-data 

Para testes t, de acordo com a maioria dos textos, há uma suposição de que os dados da população são normalmente distribuídos. Não vejo por que isso é. Um teste t não exige apenas que a distribuição amostral da média amostral seja normalmente distribuída, e não a população? Se o …

9 hypothesis-testing  t-test  assumptions  normality-assumption  central-limit-theorem 

Na CNN, aprenderemos filtros para produzir um mapa de características na camada convolucional. No Autoencoder, a única unidade oculta de cada camada pode ser considerada como filtro. Qual a diferença entre os filtros aprendidos nessas duas redes?

9 machine-learning  neural-networks  conv-neural-network  autoencoders 

Uso a decomposefunção Re crio os três componentes da minha série temporal mensal (tendência, sazonal e aleatória). Se plotar o gráfico ou olhar para a tabela, posso ver claramente que a série temporal é afetada pela sazonalidade. No entanto, quando regredo a série temporal para as 11 variáveis ​​fictícias sazonais, …

9 r  regression  time-series 

Na filogenética, as árvores filogenéticas são frequentemente construídas usando MLE ou análise bayesiana. Muitas vezes, um plano prévio é usado na estimativa bayesiana. Pelo que entendi, uma estimativa bayesiana é uma estimativa de probabilidade que incorpora uma prévia. Minha pergunta é: se você usa um flat anterior, é diferente de …

9 bayesian  confidence-interval  maximum-likelihood  likelihood  phylogeny 

Estou tentando entender a forma normalizada de informações mútuas pontuais. n p m i = p m i ( x , y)l o g( p ( x , y) ))npmEu=pmEu(x,y)euog(p(x,y))npmi = \frac{pmi(x,y)}{log(p(x,y))} Por que a probabilidade conjunta de log normaliza as informações mútuas pontuais entre [-1, 1]? As informações mútuas …

9 entropy  information-theory  mutual-information 

Um tópico recente de discussão recente diz respeito a uma revista que proíbe o uso de "procedimentos de teste estatístico de hipóteses nulas (NHSTPs)" de artigos submetidos à revista. Vejo esse termo usado por alguns escritores, mas não entendo que distinção eles estão tentando fazer. Um NHSTP é algo diferente …

9 hypothesis-testing  statistical-significance  terminology 

Estou procurando um pacote para me ajudar a resolver alguns problemas de otimização quadrática e vejo que há pelo menos meia dúzia de pacotes diferentes. De acordo com esta página: QP (programação quadrática, 90C20): cplexAPI , kernlab , limSolve , LowRankQP , quadprog , Rcplex , Rmosek Alguns deles (Rmosek …

9 r  optimization 

Eu tenho um conjunto de dados com todas as chamadas feitas para um serviço de emergência e os tempos de resposta do departamento de ambulância. Eles admitiram que existem alguns erros nos tempos de resposta, pois há casos em que eles não começaram a gravar (portanto, o valor é 0) …

9 mean  outliers  median  trimmed-mean 

Eu tenho um conjunto de dados tridimensionais e estou tentando usar a análise do fator externo externo para identificar os valores mais únicos ou estranhos. Como alguém decide o valor k a ser usado na análise LOF? Entendo o que o valor k determina e, portanto, não estou surpreso por …

9 data-mining  outliers 

Eu nunca tive um curso formal de estatística, mas devido à minha linha de pesquisa, estou constantemente encontrando artigos que aplicam vários conceitos estatísticos. Muitas vezes, vejo uma descrição de um processo de Monte Carlo aplicado a uma determinada situação e, pelo que consigo reunir 9 em 10 vezes, tudo …

9 monte-carlo  random-generation