Como quantificar a insignificância estatística?

Sou relativamente novo em estatística e entendo que minha pergunta pode estar completamente errada. Estou testando meu próprio algoritmo versus outro. Embora as saídas não sejam idênticas, quero mostrar que as diferenças são "estatisticamente insignificantes". Como posso quantificar isso, para expressar meu argumento?

correlation statistical-significance dataset

— Adam_G
fonte

Isso dependerá de quais tipos de dados você está lidando e do tamanho de suas amostras. Você pode editar sua postagem para incluir uma resposta mais detalhada?

— Naft101 22/03/12

O teste de equivalência é enviado para rejeitar a não equivalência. Obriga você a escolher o tamanho da amostra grande o suficiente para ter energia. Sem reverter a hipótese nula e alternativa em amostras pequenas, você teria muito pouca mudança de rejeitar a hipótese nula de nenhuma diferença. Mas não rejeitar não é o mesmo que aceitar por causa da falta de poder. É por isso que Blackwelder faz da não-equavalência a hipótese nula e mostrar equivalência requer rejeitar a nula.

— Michael R. Chernick

Observe que a hipótese nula é que a diferença de médias é maior que um delta especificado (a janela de equivalência).

— Michael R. Chernick

Se você está comparando dois grupos e deseja mostrar nenhuma diferença significativa, isso é chamado de teste de equivalência. Inverte essencialmente as hipóteses nulas e alternativas. A idéia é definir um intervalo de insignificância chamado janela de equivalência. Isso é muito usado ao tentar mostrar que um medicamento genérico é um substituto adequado para um medicamento comercializado. Uma boa fonte para ler sobre isso é o artigo de William Blackwelder, intitulado "Proving the nypypesis" em ensaios clínicos .

— Michael R. Chernick
fonte

Obrigado Michael. Acho que preciso trabalhar mais para poder declarar os dados "significativos" ou "insignificantes". Vou começar a investigar isso e informar a vocês se tiver alguma dúvida, o que tenho certeza que terei.

— 22412 Adam_G

Apenas um último comentário. A versão unilateral da equivalência é chamada não inferioridade. Muitas vezes, os fabricantes de medicamentos podem levar ao mercado um medicamento chamado "eu também" que nem precisa ser tão eficaz quanto o concorrente comercializado, desde que não seja muito pior (definido por um delta que é uma janela para a não inferioridade). . Isso pode ser feito porque o produto oferece alguma outra vantagem para o consumidor, como menos doses por dia ou, como no caso de um anticoagulante não precisar ter INR monitorado.

— Michael R. Chernick