Estatísticas e Big Data

Estou trabalhando para aprender a política ideal de comunicação para os clientes (quais notificações enviar, quantas enviar e quando enviar). Tenho dados históricos de notificações passadas enviadas (com timestamps) e seus desempenhos. Estava tentando aplicar a RL a esse problema para aprender a política ideal. No entanto, uma restrição importante …

8 reinforcement-learning 

Suponha que é um vetor de variáveis ​​aleatórias. Então, por favor verificar que .k × 1XXXk × 1k×1k\times 1EX′( EXX′)- 1EX≤ 1EX′(EXX′)−1EX≤1EX^{\prime}(EXX^{\prime})^{-1}EX\leq 1 Quando este é um resultado bem conhecido que . Mas como devo reivindicar isso em geral?( E X ) 2 ≤ E X 2K= 1K=1K=1( EX)2≤ EX2(EX)2≤EX2(EX)^{2}\leq …

8 self-study  mathematical-statistics  expected-value  matrix  covariance-matrix 

Eu sou bastante novo em aprendizado de máquina e estatística, mas estava me perguntando por que a otimização bayesiana não é referida com mais frequência on-line quando se aprende que o aprendizado de máquina otimiza seus hiperparâmetros de algoritmo? Por exemplo, usando uma estrutura como esta: https://github.com/fmfn/BayesianOptimization A otimização bayesiana …

8 machine-learning  optimization  hyperparameter  bayesian-optimization 

No "Guia do praticante para modelos lineares generalizados" no parágrafo 1.83, afirma-se que: "No caso particular de um GLM multiplicativo de Poisson, pode ser demonstrado que a reivindicação de modelagem conta com um termo de compensação igual ao logaritmo da exposição produziu resultados idênticos aos da modelagem de frequências de …

8 generalized-linear-model  modeling  poisson-regression  weights  offset 

O laço e a rede elástica não são capazes de lidar com variáveis ​​com mais de duas categorias e, portanto, uma divisão de variáveis ​​categóricas em manequins é necessária para a aplicação desses métodos. Isso pode resultar em vários problemas e, portanto, existem extensões para o laço para o laço …

8 machine-learning  categorical-data  feature-selection  lasso  elastic-net 

Eu estou querendo saber como integrar splines cúbicos restritos (como no pacote rms) nos modelos de imputação no pacote de imputação de ratos R. Contexto : estou fazendo pesquisa biomédica e tenho acesso a um conjunto de dados que consiste em características do paciente e dados sobre a progressão da …

8 data-imputation  multiple-imputation  splines 

Nos semana 5 notas de aula para Coursera Máquina Classe Aprendizagem de Andrew Ng , a fórmula seguinte é dado para calcular o valor de usado para inicializar Θ com valores aleatórios:ϵϵ\epsilonΘΘ\Theta No exercício , esclarecimentos adicionais são fornecidos: Uma estratégia eficaz para a escolha de é ter por base …

8 machine-learning  neural-networks  random-generation 

Consulte a imagem acima, claramente um círculo pode separar as duas classes (imagem à esquerda). Por que se esforçar tanto para mapeá-lo para uma função para torná-lo linearmente separável (imagem à direita)? Alguém pode explicar? Eu realmente não consegui encontrar nada na Web ou no YouTube sobre o porquê

8 machine-learning  classification  svm  separation 

No aprendizado profundo e na aplicação à visão computacional, é possível dizer que tipo de recursos esses dois tipos de extrato de pooling? Por exemplo, é possível dizer que max pool extrai arestas? Podemos dizer algo semelhante em relação ao agrupamento médio? PS fique à vontade para recomendar se o …

8 machine-learning  deep-learning  feature-construction  computer-vision 

O que as estatísticas têm a dizer sobre esse leigo: Leigo A: O fato de John ter derramado sua taça de vinho na mesa naquele exato momento é peculiar. Nunca vi um homem tão habilidoso com seu copo. Leigo B: Bem, então, estatisticamente, é hora de ele sofrer um acidente. …

8 uncertainty 

Tenho uma amostra pequena de 15. Quero ver se há uma diferença na ingestão de nutrientes entre duas variáveis ​​independentes, grupo 1 n = 11, grupo 2 n = 4. Os dados não são normalmente distribuídos. Qual teste é mais apropriado, o teste Mann Whitney U ou Kolmogorov-Smirnov Z? O …

8 mean  wilcoxon-mann-whitney  small-sample  median  kolmogorov-smirnov 

Suponha que e são dois RVs positivos e . Isso implica que , ou são necessárias mais informações?Y C O v ( X , Y ) &gt; 0 C O v ( X , 1 / Y ) &lt; 0XXXYYYCov(X,Y)&gt;0Cov(X,Y)&gt;0Cov(X,Y)>0Cov(X,1/Y)&lt;0Cov(X,1/Y)&lt;0Cov(X,1/Y)<0

8 covariance 

A covariância de duas variáveis ​​foi calculada como -150. o que as estatísticas dizem sobre o relacionamento entre duas variáveis?

8 covariance 

Pesquisei perguntas sobre distinções de teste paramétricas e não paramétricas e parece que todas as perguntas estão focadas em um teste muito específico, problema de dados ou alguma distinção técnica. Não estou interessado na questão de testar suposições (não; examine em vez disso) ou nas questões de poder ou taxas …

8 hypothesis-testing  nonparametric  interpretation  parametric 

Estou lendo sobre erros de decisão no teste de hipóteses. Minha pergunta é por que um "erro tipo II" é considerado algum erro? Pelo que entendi, surge quando deixamos de rejeitar uma hipótese nula falsa. Quando falhamos em rejeitar a hipótese nula, significa simplesmente que não temos fortes evidências para …

8 hypothesis-testing  statistical-significance  p-value