Suponha que cada um dos especialistas em solicite a classificação de um conjunto de objetos em ordem ou preferência. Vamos permitir empates nos rankings.
John Kemeny e Laurie Snell em seu livro de 1962, "Modelos matemáticos nas ciências sociais", propõem resolver o próximo problema:
PROJETO . Desenvolva uma medida da confiabilidade de um ranking de consenso por especialistas. Por exemplo, isso pode ser baseado na maior mudança possível que pode ser obtida com a alteração da classificação de um único especialista. (Deve-se prestar atenção à possibilidade de múltiplas classificações de consenso.) Prove alguns teoremas relativos aos consensos mais e menos confiáveis possíveis para um determinado .
O livro fornece notação para classificações e método para agregação de classificações (ou seja, obter uma classificação "coletiva" de muitos "indivíduos"). Mas nenhuma resposta dada para o problema acima.
Primeiro, pensei no coeficiente de concordância de Kendall , mas parece que não combina. Todas as idéias são bem-vindas!