Perguntas com a marcação «regression-strategies»

Estou procurando uma distribuição melhor comportada para a variável independente em questão, ou para reduzir o efeito de outliers ou algo mais?

164 regression  distributions  data-transformation  logarithm  regression-strategies 

Eu estou querendo saber qual é o valor em pegar uma variável preditora contínua e dividi-la (por exemplo, em quintis), antes de usá-la em um modelo. Parece-me que, ao separar a variável, perdemos informações. É só assim que podemos modelar efeitos não lineares? Se mantivéssemos a variável contínua e não …

78 regression  modeling  continuous-data  binning  regression-strategies 

Como a RF pode lidar com a não linearidade, mas não pode fornecer coeficientes, seria aconselhável usar a floresta aleatória para reunir os recursos mais importantes e depois conectá-los a um modelo de regressão linear múltipla para obter seus coeficientes?

50 regression  machine-learning  feature-selection  random-forest  regression-strategies 

É possível superajustar um modelo de regressão logística? Vi um vídeo dizendo que, se minha área sob a curva ROC for superior a 95%, é muito provável que ela esteja excessivamente ajustada, mas é possível ajustar demais um modelo de regressão logística?

28 logistic  overfitting  regression-strategies 

Estou refletindo sobre a discussão em torno desta questão e, em particular, o comentário de Frank Harrell de que a estimativa de variação em um modelo reduzido (ou seja, do qual várias variáveis ​​explicativas foram testadas e rejeitadas) deve usar os graus de liberdade generalizados de Ye . O professor …

27 r  regression  model-selection  regression-strategies 

Como todos sabemos, existem 2 métodos para avaliar o modelo de regressão logística e eles estão testando coisas muito diferentes Poder preditivo: Obtenha uma estatística que mede o quão bem você pode prever a variável dependente com base nas variáveis ​​independentes. Os bem conhecidos Pseudo R ^ 2 são McFadden …

24 r  logistic  goodness-of-fit  regression-strategies  model-evaluation 

Suponha que eu tenha treinado vários modelos no conjunto de treinamento, escolha o melhor usando o conjunto de validação cruzada e o desempenho medido no conjunto de teste. Então agora eu tenho um melhor modelo final. Devo treiná-lo novamente em todos os dados disponíveis ou enviar soluções treinadas apenas no …

23 machine-learning  validation  regression-strategies 

Além de algumas circunstâncias únicas em que devemos absolutamente entender a relação média condicional, quais são as situações em que um pesquisador deve escolher o OLS em vez da regressão quantílica? Não quero que a resposta seja "se não houver utilidade para entender os relacionamentos da cauda", pois poderíamos usar …

22 least-squares  econometrics  regression-strategies  quantile-regression  semiparametric 

Dediquei muito tempo ao desenvolvimento de métodos e softwares para validar modelos preditivos no domínio estatístico freqüentista tradicional. Ao colocar mais idéias bayesianas em prática e ensinar, vejo algumas diferenças importantes a serem adotadas. Primeiro, a modelagem preditiva bayesiana pede ao analista que pense muito sobre distribuições anteriores que podem …

20 bayesian  cross-validation  predictive-models  validation  regression-strategies 

Os métodos de seleção de variáveis ​​algorítmicas passo a passo tendem a selecionar modelos que enviesam mais ou menos todas as estimativas em modelos de regressão ( ββ\beta s e seus SEs, valores de p , estatísticas F , etc.) e têm a probabilidade de excluir preditores verdadeiros como incluir …

18 regression  feature-selection  lasso  regression-strategies  stepwise-regression 

Frank Harrell iniciou um blog ( Statistical Thinking) . Em seu post principal , ele lista algumas características principais de sua filosofia estatística. Entre outros itens, inclui: Torne o tamanho da amostra uma variável aleatória sempre que possível O que significa "tornar o tamanho da amostra uma variável aleatória"? Quais …

18 sample-size  random-variable  regression-strategies 

Esta é a minha primeira postagem no StackExchange, mas eu a uso como um recurso há um bom tempo, farei o possível para usar o formato apropriado e fazer as edições apropriadas. Além disso, esta é uma pergunta com várias partes. Eu não tinha certeza se deveria dividir a pergunta …

17 r  logistic  model-selection  regression-strategies 

Depois de procurar esclarecimentos sobre os coeficientes do modelo linear aqui , tenho uma pergunta de acompanhamento referente a não-significativo (alto valor de p) para coeficientes de níveis de fatores. Exemplo: se meu modelo linear incluir um fator com 10 níveis e apenas 3 desses níveis tiverem valores significativos de …

15 statistical-significance  linear-model  model-selection  regression-coefficients  regression-strategies 

Na análise discriminante, a variável dependente é categórica, mas posso usar uma variável categórica (por exemplo, status residencial: rural, urbano) juntamente com alguma outra variável contínua como variável independente na análise discriminante linear?

15 logistic  categorical-data  discriminant-analysis  regression-strategies 

Usando estes dados: head(USArrests) nrow(USArrests) Eu posso fazer um PCA da seguinte maneira: plot(USArrests) otherPCA <- princomp(USArrests) Eu posso obter os novos componentes em otherPCA$scores ea proporção de variância explicada pelos componentes com summary(otherPCA) Mas e se eu quiser saber quais variáveis ​​são explicadas principalmente por quais componentes principais? E …

14 r  pca  dimensionality-reduction  regression-strategies