Estatísticas e Big Data

Perguntas e respostas para pessoas interessadas em estatística, aprendizado de máquina, análise de dados, mineração de dados e visualização de dados


1
É possível que AIC = BIC?
Duas medidas bem conhecidas (e relacionadas) da complexidade do modelo a partir das estatísticas são o Critério de Informação de Akaike (AIC) e o Critério de Informação Bayesiano (BIC). Quando AIC = BIC?
8 aic  bic 



2
Como é ?
Comecei a ler sobre o estimador de máxima verossimilhança e as estatísticas bayesianas recentemente. Eu entendo que, dado um modelo estatístico onde pertence a um grande espaço de parâmetros , a divergência KL entre e ( é a verdadeira O parâmetro que gostaríamos de encontrar) é minimizado para o que …

1
Modelos Mistos: Como derivar as equações de modelo misto de Henderson?
No contexto dos melhores preditores imparciais não lineares (BLUP), Henderson especificou as equações do modelo misto (ver Henderson (1950): Estimation of Genetic Parameters. Annals of Mathematics Statistics, 21, 309-310). Vamos assumir o seguinte modelo de efeitos mistos: y=Xβ+Zu+ey=Xβ+Zu+ey = X\beta+Zu+e Onde yyy é um vetor de n variáveis ​​aleatórias observáveis, …


2
Formular regressão quantílica como problema de programação linear?
Como formular regressão quantílica como um problema de programação linear? Ao olhar para o problema mediano dos quantis, sei que é minimize transforms into minimize s.t.∑i=1n|β0+Xiβ1−Yi|∑i=1neiei≥β0+Xiβ1−Yiei≥−(β0+Xiβ1−Yi)minimize ∑i=1n|β0+Xiβ1−Yi|transforms into minimize ∑i=1neis.t.ei≥β0+Xiβ1−Yiei≥−(β0+Xiβ1−Yi)\begin{align} \text{minimize } & \sum_{i=1}^n |\beta_0 + X_i \beta_1-Y_i|\\ \text{transforms into } & \\ \text{minimize } & \sum_{i=1}^n e_i\\ \text{s.t.} & …


3
Regressão e causalidade em econometria
Na regressão em geral e na regressão linear, em particular, a interpretação causal sobre parâmetros é às vezes permitida. Pelo menos na literatura econométrica, mas não somente quando a interpretação causal é permitida, não é tão claro; Para uma discussão, você pode ver: Regressão e Causação: Um Exame Crítico de …

4
Verifique se uma sequência de caracteres não é aleatória
Antecedentes Digamos que temos um alfabeto de A,B, C, D, em seguida, examinamos alguns dados e encontramos uma "palavra" que é DDDDDDDDCDDDDDDa chance de encontrar essa aleatória me parece baixa, enquanto a descoberta BABDCABCDACDBACDparece menos aleatória. Pergunta Como devo verificar se as strings que encontro não são aleatórias? Eu tentei …

1
Regressão linear esparsa 0-norma e 1-norma
Temos uma resposta e preditoresY∈RnY∈RnY \in \Bbb R^nX=(x1,x2,⋯,xm)T∈Rn×mX=(x1,x2,⋯,xm)T∈Rn×mX = (x_1, x_2, \cdots, x_m)^T \in \Bbb R^{n \times m} O problema que queremos resolver é argmink∈Rm(∥Y−Xk∥22+λ∥k∥0)→k0argmink∈Rm(‖Y−Xk‖22+λ‖k‖0)→k0\text{argmin}_{k \in \Bbb R^{m}} (\Vert Y - Xk \Vert_2^2 + \lambda \Vert k \Vert_0) \rightarrow k_0 No entanto, é difícil para NP; portanto, resolvemos argmink∈Rm(∥Y−Xk∥22+λ∥k∥1)→k1argmink∈Rm(‖Y−Xk‖22+λ‖k‖1)→k1\text{argmin}_{k \in …




Ao utilizar nosso site, você reconhece que leu e compreendeu nossa Política de Cookies e nossa Política de Privacidade.
Licensed under cc by-sa 3.0 with attribution required.