Estatísticas e Big Data

O algoritmo de bandido mais conhecido é o limite superior de confiança (UCB), que popularizou essa classe de algoritmos. Desde então, presumo que agora existem algoritmos melhores. Qual é o melhor algoritmo atual (em termos de desempenho empírico ou limites teóricos)? Esse algoritmo é ideal em algum sentido?

27 machine-learning  algorithms  theory  reinforcement-learning  multiarmed-bandit 

Embora eu saiba que há uma série de funções para gerar mapas de calor em R, o problema é que não consigo produzir mapas visualmente atraentes. Por exemplo, as imagens abaixo são bons exemplos de mapas de calor que eu quero evitar. O primeiro claramente carece de detalhes, enquanto o …

27 r  data-visualization  spatial 

É sabido, especialmente no processamento de linguagem natural, que o aprendizado de máquina deve prosseguir em duas etapas, uma etapa de treinamento e uma etapa de avaliação, e eles devem usar dados diferentes. Por que é isso? Intuitivamente, esse processo ajuda a evitar o ajuste excessivo dos dados, mas não …

27 machine-learning  cross-validation 

Vi muitas vezes alegações de que elas precisam ser exaustivas (os exemplos nesses livros sempre foram definidos dessa maneira, de fato); por outro lado, também vi muitas vezes livros afirmando que deveriam ser exclusivos ( por exemplo, como μ 1 = μ 2 e H 1 como μ 1 > …

27 hypothesis-testing 

Esta pergunta foi migrada do Mathematics Stack Exchange porque pode ser respondida em Validação cruzada. Migrou há 8 anos . Quando executo uma regressão linear em alguns pacotes de software (por exemplo, Mathematica), obtenho valores de p associados aos parâmetros individuais no modelo. Por exemplo, os resultados de uma regressão …

27 probability  regression 

Fechadas. Esta questão está fora de tópico . No momento, não está aceitando respostas. Deseja melhorar esta pergunta? Atualize a pergunta para que ela esteja no tópico de Validação cruzada. Fechado no ano passado . Existe alguma ferramenta de linha de comando que aceite o fluxo de números (no formato …

27 descriptive-statistics  computational-statistics  computing 

Na classificação de texto, tenho um conjunto de treinamento com cerca de 800 amostras e um conjunto de testes com cerca de 150 amostras. O conjunto de teste nunca foi usado e aguarda para ser usado até o final. Estou usando todo o conjunto de treinamento de 800 amostras, com …

27 machine-learning  classification  cross-validation  text-mining 

Considere um Jeffreys anterior onde p(θ)∝|i(θ)|−−−−√p(θ)∝|i(θ)|p(\theta) \propto \sqrt{|i(\theta)|}, ondeiiié a informação de Fisher. Eu continuo vendo esse prior sendo mencionado como um prior não informativo, mas nunca vi um argumento sobre por que ele não é informativo. Afinal, não é um constante constante, então deve haver outro argumento. Entendo que …

27 bayesian  prior 

Esta pergunta foi migrada do Mathematics Stack Exchange porque pode ser respondida em Validação cruzada. Migrou há 7 anos . Tenho uma pergunta sobre algo que meu professor de estatística disse sobre o seguinte problema. Minha pergunta nem é sobre a ocorrência do paradoxo de Simpson nessa situação. Minha pergunta …

27 self-study  confounding  simpsons-paradox 

Esta é uma pergunta sobre terminologia. Um "anterior vago" é o mesmo que um anterior não informativo ou existe alguma diferença entre os dois? Minha impressão é de que são iguais (de procurar vagas e não informativas juntas), mas não tenho certeza.

27 bayesian  prior  terminology 

Bloqueado . Esta pergunta e suas respostas estão bloqueadas porque a questão está fora do tópico, mas tem um significado histórico. No momento, não está aceitando novas respostas ou interações. Eu queria saber se é possível fazer computação simbólica em R? Por exemplo, Eu esperava obter o inverso de uma …

27 r 

Estou usando o AIC (critério de informações de Akaike) para comparar modelos não lineares em R. É válido comparar os AICs de diferentes tipos de modelo? Especificamente, estou comparando um modelo ajustado pelo glm versus um modelo com um termo de efeito aleatório ajustado pelo glmer (lme4). Caso contrário, existe …

27 lme4-nlme  model-selection  aic 

Eu sou novo no R e na análise de séries temporais. Estou tentando encontrar a tendência de uma longa série temporal de temperatura diária (40 anos) e tentei aproximações diferentes. O primeiro é apenas uma regressão linear simples e o segundo é a Decomposição Sazonal de Séries Temporais por Loess. …

27 r  time-series  trend 

Todas as minhas variáveis ​​são contínuas. Não há níveis. É possível ter interação entre as variáveis?

27 regression  modeling  interaction 

Ao construir um modelo CART (especificamente árvore de classificação) usando rpart (em R), geralmente é interessante saber qual é a importância das várias variáveis ​​introduzidas no modelo. Assim, minha pergunta é: Que medidas comuns existem para classificar / medir a importância das variáveis ​​participantes de um modelo CART? E como …

27 r  classification  model-selection  cart  rpart