Estatísticas e Big Data

Estou um pouco confuso sobre a aprendizagem de conjuntos. Em poucas palavras, ele executa os modelos k e obtém a média desses k modelos. Como se pode garantir que a média dos modelos k seria melhor do que qualquer um deles por si só? Eu entendo que o viés é …

16 machine-learning  ensemble 

Aprendi que a distribuição normal padrão é única porque a média e a variação são fixadas em 0 e 1, respectivamente. Por esse fato, pergunto-me se duas variáveis ​​aleatórias padrão devem ser independentes.

16 normal-distribution  independence 

Quais abordagens teóricas da causalidade eu devo conhecer como estatístico / economista aplicado? Eu sei o (um pouquinho) Modelo causal de Neyman – Rubin (e Roy , Haavelmo etc.) O trabalho de Pearl sobre causalidade Causalidade de Granger (embora menos orientada para o tratamento) De quais conceitos sinto falta ou …

16 machine-learning  causality  theory  treatment-effect 

Esse problema está relacionado à pesquisa do meu laboratório em cobertura robótica: Desenhe aleatoriamente nnn números do conjunto {1,2,…,m}{1,2,…,m}\{1,2,\ldots,m\} sem substituição e classifique os números em ordem crescente. 1≤n≤m1≤n≤m1\le n\le m . A partir dessa lista ordenada de números {a(1),a(2),…,a(n)}{a(1),a(2),…,a(n)}\{a_{(1)},a_{(2)},…,a_{(n)}\} , gere a diferença entre números consecutivos e os limites: …

16 probability  mathematical-statistics  uniform  combinatorics  order-statistics 

Na literatura de redes neurais, frequentemente encontramos a palavra "tensor". É diferente de um vetor? E de uma matriz? Você tem algum exemplo específico que esclareça sua definição? Estou um pouco confuso sobre sua definição. A Wikipedia não ajuda e às vezes tenho a impressão de que sua definição depende …

16 neural-networks  terminology  definition  tensor 

Li as seguintes postagens para validação cruzada aninhada e ainda não tenho 100% de certeza do que devo fazer com a seleção de modelo com validação cruzada aninhada: Validação cruzada aninhada para seleção de modelo Seleção de modelos e validação cruzada: o caminho certo Para explicar minha confusão, deixe-me tentar …

16 cross-validation  scikit-learn  hyperparameter 

Antecedentes: Muitas pesquisas modernas nos últimos ~ 4 anos (pós- alexnet ) parecem ter deixado de usar o pré-treinamento generativo para redes neurais para obter resultados de classificação de ponta. Por exemplo, os principais resultados para o mnist aqui incluem apenas 2 artigos dos 50 principais que parecem usar modelos …

16 references  deep-learning  rbm  generative-models 

Eu tento reproduzir com optimos resultados de uma regressão linear simples ajustada com glmou até nlsfunções R. As estimativas de parâmetros são as mesmas, mas a estimativa de variação residual e os erros padrão dos outros parâmetros não são os mesmos, principalmente quando o tamanho da amostra é baixo. Suponho …

16 r  maximum-likelihood  optimization 

Estou tentando entender a alegação geral apresentada em Taleb, 2016, A meta-distribuição de valores-p padrão . Nele, Taleb apresenta o seguinte argumento para a falta de confiabilidade do valor-p (como eu o entendo): Um procedimento de estimativa operando em pontos de dados provenientes de alguma distribuição gera um valor de …

16 hypothesis-testing  statistical-significance  p-value 

Considere um problema de regressão OLS padrão : Eu tenho matrizes e \ X e quero encontrar \ B para minimizar L = \ | \ Y- \ X \ B \ | ^ 2. A solução é dada por \ hat \ B = \ argmin_ \ B \ …

16 regression  least-squares  ridge-regression 

Portanto, sabemos que uma soma de nnn poissons com o parâmetro λλ\lambda é em si um poisson com nλnλn\lambda . Assim, hipoteticamente, uma pode demorar x∼poisson(λ=1)x∼poisson(λ=1)x \sim poisson(\lambda = 1) e dizem que é realmente ∑n1xi∼poisson(λ=1)∑1nxi∼poisson(λ=1)\sum_1^n x_i \sim poisson(\lambda = 1) onde cada xixix_i é: xi∼poisson(λ=1/n)xi∼poisson(λ=1/n)x_i \sim poisson(\lambda = 1/n) …

16 poisson-distribution  central-limit-theorem  asymptotics 

Estou confuso sobre a equação que serve como a definição da taxa de risco. Tenho a ideia de qual é a taxa de risco, mas não vejo como a equação expressa essa intuição. Se é uma variável aleatória que representa o ponto do tempo de morte de alguém em um …

16 survival  intuition  hazard 

Por que o teste F para diferença de variação é tão sensível à suposição de distribuição normal, mesmo para grande ?NNN Tentei pesquisar na web e visitei a biblioteca, mas nada disso deu boas respostas. Ele diz que o teste é muito sensível por violar a suposição de distribuição normal, …

16 normality-assumption  f-test 

(Originalmente publicado em MSE.) Já vi muitas discussões heurísticas do teorema clássico do limite central falar da distribuição normal (ou de qualquer das distribuições estáveis) como um "atrator" no espaço das densidades de probabilidade. Por exemplo, considere estas frases no topo do tratamento da Wikipedia : Em uso mais geral, …

16 probability  mathematical-statistics  convergence  central-limit-theorem  convolution 

Alguém além de Egon Pearson acessou o relatório de William Sealy Gosset, de 1904, "A aplicação da 'lei do erro' ao trabalho da cervejaria"? Eu acho que é propriedade do Guinness, mas, dado seu significado histórico, teria sido uma leitura muito interessante, se alguém soubesse como colocá-lo em suas mãos.

16 statistical-significance  history