Perguntas com a marcação «multiple-comparisons»

Sabemos que devemos aplicar correções do tipo Benjamini Hochberg para testes de múltiplas hipóteses a experimentos com base em um único conjunto de dados, a fim de controlar a taxa de falsas descobertas, caso contrário, todos os experimentos que dão um resultado positivo podem ser falsos. Mas por que não …

24 hypothesis-testing  multiple-comparisons  bonferroni  false-discovery-rate 

Eu tenho valores de p em muitos testes e gostaria de saber se há realmente algo significativo após a correção para vários testes. A complicação: meus testes não são independentes. O método em que estou pensando (uma variante do Método do Produto de Fisher, Zaykin et al., Genet Epidemiol , …

24 correlation  multiple-comparisons  statistical-significance  genetics 

Li o seguinte artigo: Perneger (1998) O que há de errado com os ajustes de Bonferroni . O autor resumiu dizendo que o ajuste de Bonferroni tem, na melhor das hipóteses, aplicações limitadas na pesquisa biomédica e não deve ser usado na avaliação de evidências sobre hipóteses específicas: Resumo pontos: …

23 hypothesis-testing  multiple-comparisons  bonferroni 

Estou usando o JMP para examinar as diferenças na cobertura vegetal em grupos de formas de crescimento (árvores, arbustos, arbustos, etc.) antes e depois de três tratamentos com controle. O tamanho da minha amostra é pequeno (n = 5) e a maioria das minhas distribuições não é normalmente distribuída. Para …

23 multiple-comparisons  nonparametric  tukey-hsd 

Andrew Gelman escreveu um extenso artigo sobre o motivo pelo qual o teste Bayesiano AB não exige correção de múltiplas hipóteses: Por que geralmente não precisamos nos preocupar com comparações múltiplas , 2012. Não entendo bem: por que os métodos bayesianos não exigem várias correções de teste? A ~ Distribution1 …

22 hypothesis-testing  bayesian  multiple-comparisons 

Estou executando NNN testes estatísticos independentes com a mesma hipótese nula e gostaria de combinar os resultados em um valor ppp . Parece que existem dois métodos "aceitos": o método de Fisher e o método de Stouffer . Minha pergunta é sobre o método de Stouffer. Para cada teste separado, …

22 hypothesis-testing  chi-squared  p-value  multiple-comparisons  combining-p-values 

Quando realizamos experimentos (em amostras pequenas (geralmente o tamanho da amostra por grupo de tratamento é de 7 a 8)) em dois grupos, usamos um teste t para testar a diferença. No entanto, quando realizamos uma ANOVA (obviamente para mais de dois grupos), usamos algo como Bonferroni (LSD / # …

22 anova  multiple-comparisons  post-hoc  bonferroni  fishers-lsd 

Tenho duas perguntas sobre quando usar um ajuste Bonferroni: É apropriado usar um ajuste Bonferroni em todos os casos de testes múltiplos? Se alguém realiza um teste em um conjunto de dados, divide-o em níveis mais refinados (por exemplo, divide os dados por sexo) e realiza os mesmos testes, como …

21 multiple-comparisons  bonferroni  type-i-and-ii-errors 

Depois de executar a análise de componentes principais (PCA), quero projetar um novo vetor no espaço do PCA (ou seja, encontrar suas coordenadas no sistema de coordenadas do PCA). Eu calculei o PCA na linguagem R usando prcomp. Agora eu devo poder multiplicar meu vetor pela matriz de rotação PCA. …

21 r  pca  r  variance  heteroscedasticity  misspecification  distributions  time-series  data-visualization  modeling  histogram  kolmogorov-smirnov  negative-binomial  likelihood-ratio  econometrics  panel-data  categorical-data  scales  survey  distributions  pdf  histogram  correlation  algorithms  r  gpu  parallel-computing  approximation  mean  median  references  sample-size  normality-assumption  central-limit-theorem  rule-of-thumb  confidence-interval  estimation  mixed-model  psychometrics  random-effects-model  hypothesis-testing  sample-size  dataset  large-data  regression  standard-deviation  variance  approximation  hypothesis-testing  variance  central-limit-theorem  kernel-trick  kernel-smoothing  error  sampling  hypothesis-testing  normality-assumption  philosophical  confidence-interval  modeling  model-selection  experiment-design  hypothesis-testing  statistical-significance  power  asymptotics  information-retrieval  anova  multiple-comparisons  ancova  classification  clustering  factor-analysis  psychometrics  r  sampling  expectation-maximization  markov-process  r  data-visualization  correlation  regression  statistical-significance  degrees-of-freedom  experiment-design  r  regression  curve-fitting  change-point  loess  machine-learning  classification  self-study  monte-carlo  markov-process  references  mathematical-statistics  data-visualization  python  cart  boosting  regression  classification  robust  cart  survey  binomial  psychometrics  likert  psychology  asymptotics  multinomial 

Estou revendo um artigo que realizou mais de 15 testes separados 2x2 Chi Square. Sugeri que eles precisam corrigir várias comparações, mas eles responderam dizendo que todas as comparações foram planejadas e, portanto, isso não é necessário. Sinto que isso não deve estar correto, mas não consigo encontrar recursos que …

20 hypothesis-testing  multiple-comparisons 

Qual é o método preferido para a realização de post-hocs para testes dentro dos sujeitos? Vi trabalhos publicados nos quais o HSD de Tukey é empregado, mas uma revisão de Keppel e Maxwell & Delaney sugere que a provável violação da esfericidade nesses projetos torna o termo do erro incorreto …

20 r  repeated-measures  multiple-comparisons  post-hoc  sphericity 

Ouvi dizer que quando muitas especificações de modelo de regressão (por exemplo, no OLS) são consideradas como possibilidades para um conjunto de dados, isso causa vários problemas de comparação e os valores de p e os intervalos de confiança não são mais confiáveis. Um exemplo extremo disso é a regressão …

20 regression  frequentist  multiple-comparisons 

Eu li este excelente artigo de David Colquhoun: Uma investigação sobre a taxa de falsas descobertas e a má interpretação dos valores-p (2014). Em essência, ele explica por que a taxa de falsas descobertas (FDR) pode chegar a , apesar de controlarmos o erro do tipo I com30 %30%30\% .α …

19 hypothesis-testing  statistical-significance  p-value  multiple-comparisons  false-discovery-rate 

Quão conservadora é a correção de testes múltiplos de Benjamini-Hochberg em relação ao número total de comparações? Por exemplo, se eu tiver uma lista de 18.000 recursos para dois grupos e executar um teste de Wilcoxon para obter um valor-p. Eu ajusto esse valor-p usando Benjamini-Hochberg e quase nada sai …

19 multiple-comparisons  p-value 

Este é um exercício apresentado na Teoria da Probabilidade: A Lógica da Ciência por Edwin Jaynes, 2003. Há uma solução parcial aqui . Eu elaborei uma solução parcial mais geral e queria saber se mais alguém a resolveu. Vou esperar um pouco antes de postar minha resposta, para dar uma …

19 independence  likelihood-ratio  hypothesis-testing  multiple-comparisons