Sobre correlação de classificação na avaliação de recuperação de informações

Alguns métodos para correlação de classificação na avaliação são examinados e suas vantagens e desvantagens relativas são discutidas. Em particular, sugere-se que diferentes estatísticas de teste devem ser usadas para fornecer informações adicionais sobre os experimentos além daquelas fornecidas pelo teste de significância estatística. O τ de Kendall é frequentemente usado para testar correlação de classificação, no entanto, é pouco apropriado se o objetivo do teste for diferente do que o τ foi projetado para. Em particular, deve-se prestar atenção à hipótese nula. Outras medidas para correlação de classificação são descritas. Se uma estatística de teste sugere rejeitar uma hipótese, outras estatísticas de teste devem ser usadas para apoiar ou revisar a decisão. O artigo então se concentra na correlação de classificação entre listas de páginas da web ordenadas por PageRank para aplicar as reflexões gerais sobre essas estatísticas de teste. Uma interpretação do comportamento do PageRank é fornecida com base na discussão das estatísticas de teste para correlação de classificação.