Comment démarrer avec la notation et le classement basés sur des données de concurrence par paire?

19

Je suis intéressé à apprendre comment évaluer et classer les individus d'un groupe qui n'interagissent / ne concurrencent que par paires (c'est-à-dire des systèmes comme le système de notation ELO pour les échecs).

  • Existe-t-il des méthodes de référence ou des méthodes plus précises et avancées?
  • Existe-t-il des packages R qui facilitent la mise en œuvre?
  • Existe-t-il des méthodes qui peuvent utiliser des informations auxiliaires ainsi que le résultat d'un match / match?
  • Existe-t-il des méthodes qui peuvent mieux utiliser les informations de la marge gagnante par opposition au gain / perte dichotomique?
  • Que dois-je rechercher dans la littérature?
dcl
la source

Réponses:

13

En ce qui concerne "comment le faire dans R", le package prefmod http://cran.r-project.org/web/packages/prefmod/index.html est destiné à l'analyse des préférences avec des comparaisons, classements et notes appariés. Il convient aux modèles Bradley-Terry et aux modèles de modèle avec des covariables objet et sujet. Voir ma réponse ici Comment adapter le modèle Bradley – Terry – Luce en R, sans formule compliquée? pour une courte introduction, ou cet article http://www.jstatsoft.org/v48/i10 pour plus d'informations.

Momo
la source
1
En outre, il est un peu fastidieux, mais pas très difficile à intégrer BT et modèles connexes « manuellement » dans . R
cardinal
8

Je viens de terminer un assez bon livre sur ce sujet. Il aborde ELO ainsi que de nombreuses autres méthodes de classement comme Massey, Colley et Keener. La plupart des méthodes du livre utilisent des matchs de sport comme exemple et utilisent à la fois la victoire / la perte et la marge de victoire comme entrées.

James
la source
4
Une critique de ce livre par @ Xi'an.
4

Depuis que j'ai posé cette question, j'ai trouvé que j'avais beaucoup de succès avec le package PlayerRatings pour R. Cela rend la création d'ELO / Glicko et de la méthode de notation des performances des auteurs très facile.

dcl
la source
2

Ce livre ne fonctionne pas avec des marges mais fournit la théorie des équipes de classement basée sur des comparaisons appariées. La méthode de comparaison par paires par Herbert A. David http://www.amazon.com/Method-Paired-Comparisons-Statistical-Monograph/dp/0852640137/ref=sr_1_1?s=books&ie=UTF8&qid=1340424897&sr=1-1&keywords= La + méthode + de + comparaisons + appariées

En ce qui concerne les marges de victoire, je crois que certaines des méthodes informatiques utilisées pour le BCS combinent des méthodes de comparaison par paires telles que le modèle Bradley-Terry avec des marges de victoire.

Michael R. Chernick
la source
Bravo, je vais les regarder.
dcl
5
@dcl Si vous êtes intéressé par les modèles Bradley-Terry, deux packages R utiles sont BradleyTerry et BradleyTerry2 créés par David Firth .
2
Je voulais ajouter que l'utilisation des marges de victoire dans les classements est controversée car elle peut être plus un facteur de stratégie qu'une véritable mesure de compétence. Certains entraîneurs ne laisseront pas leurs équipes augmenter le score après avoir obtenu une avance confortable tandis que d'autres peuvent délibérément le faire pour améliorer leur classement. C'était très courant dans le football universitaire.
Michael R. Chernick
2
Le texte de David est un très bon classique à regarder. La BCS n'autorise pas l'intégration de la marge de victoire au classement informatique depuis plusieurs années.
cardinal
1
Il serait intéressant de voir comment ces méthodes qui n'impliquent pas de marge gagnante se comparent aux systèmes plus modernes conçus pour les échecs et d'autres jeux, à savoir Glicko, les échecs et la vraie compétence.
dcl