Estatísticas e Big Data

Na minha aula de aprendizado de máquina, aprendemos sobre como a regressão LASSO é muito boa para executar a seleção de recursos, uma vez que faz uso da regularização .l1l1l_1 Minha pergunta: as pessoas normalmente usam o modelo LASSO apenas para fazer a seleção de recursos (e depois despejam esses …

10 feature-selection  lasso  regression-strategies 

É possível treinar redes neurais para desenhar em determinado estilo? (Por isso, ele pega uma imagem e a redesenha no estilo para o qual foi treinada.) Existe alguma tecnologia aprovada para esse tipo de coisa? Eu sei sobre o algoritmo DeepArt. É bom preencher a imagem principal com certo padrão …

10 machine-learning  neural-networks  deep-learning 

Seja uma sequência de variáveis ​​aleatórias iid amostradas de uma distribuição alfa estável , com os parâmetros . α = 1,5 ,X1 1, X2, … , X3 nX1 1,X2,…,X3nX_1, X_2, \ldots, X_{3n}α = 1,5 ,β= 0 ,c = 1,0 ,μ = 1,0α=1.5,β=0 0,c=1.0,μ=1.0\alpha = 1.5, \; \beta = 0, \; …

10 probability  self-study  monte-carlo  convergence  order-statistics 

Eu tenho um conjunto de dados de 482 observações. data=Populationfull Vou fazer uma análise de associação de genótipo para 3 SNPs. Estou tentando construir um modelo para minha análise e estou usando o aov (y ~ x, data = ...). Para uma característica, tenho vários efeitos fixos e covariáveis ​​que …

10 r  anova 

No teste de hipóteses, uma pergunta comum é qual é a variação da população? Minha pergunta é como podemos saber a variação da população? Se soubéssemos toda a distribuição, poderíamos conhecer a média de toda a população. Então, qual é o objetivo do teste de hipóteses?

10 hypothesis-testing  variance  t-test  z-test 

Tentei implementar uma estimativa numérica da divergência Kullback-Leibler para duas amostras. Para depurar a implementação, extrair as amostras de duas distribuições normais e .N(0,1)N(0,1)\mathcal N (0,1)N(1,2)N(1,2)\mathcal N (1,2) Para uma estimativa simples, gerei dois histogramas e tentei aproximar numericamente a integral. Fiquei preso ao lidar com aquelas partes do histograma …

10 estimation  intuition  kullback-leibler  numerics 

Eu tenho duas variáveis ​​categóricas / nominais. Cada um deles pode ter apenas dois valores distintos (então, eu tenho 4 combinações no total). Cada combinação de valores vem com um conjunto de valores numéricos. Então, eu tenho 4 conjuntos de números. Para torná-lo mais concreto, digamos que eu tenho male …

10 hypothesis-testing  p-value  nonparametric  permutation-test 

Existe um equivalente da fórmula média: mean=1N∑i=1NXimean=1N∑i=1NXi\begin{equation} \mathrm{mean} = \cfrac{1}{N} \sum_{i=1}^{N} X_i \end{equation} para mediana?

10 median  definition 

Eu entendo que na regressão linear os erros são assumidos como sendo normalmente distribuídos, dependendo do valor previsto de y. Então, olhamos para os resíduos como uma espécie de proxy para os erros. É frequentemente recomendada para gerar uma saída como esta: . No entanto, não entendo qual é o …

10 regression  assumptions 

Como exemplo, muitas vezes eu encontro estudantes que sabem que a observada é um estimador tendencioso da População R 2 . Então, ao escrever seus relatórios, eles dizem coisas como:R2R2R^2R2R2R^2 "I calculado Observado e ajustado R 2 , e elas foram bastante semelhantes, sugerindo que apenas uma pequena quantidade de …

10 mathematical-statistics  terminology  bias  estimators 

Estou tentando treinar uma rede neural profunda para classificação, usando propagação de volta. Especificamente, estou usando uma rede neural convolucional para classificação de imagens, usando a biblioteca Tensor Flow. Durante o treinamento, estou passando por um comportamento estranho e estou me perguntando se isso é típico ou se posso estar …

10 machine-learning  classification  neural-networks  conv-neural-network  tensorflow 

No PCA, faz diferença se escolhermos os principais componentes da matriz de covariância inversa OU se deixarmos cair autovetores da matriz de covariância correspondentes a grandes valores próprios? Isso está relacionado à discussão neste post .

10 machine-learning  pca  computational-statistics 

Breve pergunta: Existe uma distribuição de dedos gordos? Tenho certeza de que, se existir, ele terá um nome diferente. Não sei como formulá-lo como uma função analítica. Você pode me ajudar a encontrar uma versão existente ou começar a formulá-la em algo mais limpo do que uma simulação gigante? É …

10 distributions  simulation 

Estou tentando entrar um pouco nas estatísticas, mas estou preso a alguma coisa. Meus dados são os seguintes: Year Number_of_genes 1990 1 1991 1 1993 3 1995 4 Agora, quero construir um modelo de regressão para poder prever o número de genes para um determinado ano com base nos dados. …

10 regression  count-data  poisson-regression 

Pergunta rápida: Eu vi o d de Cohen calculado de duas maneiras diferentes para um teste t de amostras dependentes (por exemplo, projeto dentro das amostras testando a eficácia de um medicamento com pontos de tempo pré / pós). Usando o desvio padrão da pontuação da mudança no denominador da …

10 t-test  effect-size