Detection d'anomalies de jugement BW

Les juges sont anonymises (Juge 1 = premier score dans le classement open marking, etc.). Les numeros de couples correspondent aux numeros de dossard officiels. L'agregat Linum (valeur en gras) utilise une formule proprietaire non documentee. L'outil travaille directement sur les scores individuels des juges.

Correlation Spearman (ρ) — mesure si le juge classe les couples dans le meme ordre que le classement officiel final. Une valeur proche de 1.0 indique un parfait accord; une valeur faible (seuil configurable, par defaut 0.70) signale que ce juge etablit un classement tres different du resultat officiel.
Ecarts IQR detectes — nombre de couples et criteres pour lesquels ce juge a donne un score statistiquement aberrant (trop haut ou trop bas) par rapport aux autres juges. Voir section 3 pour le detail.
Biais systematiques — nombre de criteres sur lesquels ce juge note de maniere consistamment plus haute (genereux) ou plus basse (strict) que la mediane des juges, sur l'ensemble des couples. Voir section 4 pour le detail.

Somme des points attribues par chaque juge a chaque couple, sur l'ensemble des criteres qui lui sont assignes (tous tours confondus). Permet de comparer en un coup d'oeil si un juge est globalement plus genereux ou plus strict sur certains couples. La colonne "Total officiel" est le score final publie par Linum.

Pour chaque juge, cette table montre le rang qu'il aurait attribue a chaque couple, deduit de la somme de ses scores normalises sur tous les criteres qui lui sont assignes. On le compare au classement officiel final. Un ecart important indique que ce juge a classe ce couple tres differemment des autres, ce qui peut meriter verification.

Colonne IQR — plage de scores "normaux" calculee par la methode de l'ecart interquartile (IQR). Un score en dehors de cette plage est statistiquement aberrant pour ce couple et ce critere. Avec 3 juges seulement, la methode MAD (ecart a la mediane) est utilisee a la place: le seuil est affiche sous la forme ±valeur.
Agr. Linum — valeur en gras affichee par Linum. C'est un agregat proprietaire non documente; il n'est pas utilise dans les calculs de detection, uniquement affiche comme reference.

Pour chaque juge et chaque critere, on calcule l'ecart moyen entre les scores de ce juge et la mediane du groupe de juges, sur l'ensemble des couples. Un ecart positif persistant signifie que le juge note generalement plus haut que ses collegues sur ce critere (genereux). Un ecart negatif signifie qu'il note generalement plus bas (strict). Un biais est signale (fond jaune) lorsque l'ecart moyen depasse le seuil configurable (10% de la plage maximale par defaut). Un biais modere est normal; un biais fort et constant sur plusieurs criteres merite attention.

Le coefficient de variation (CV) mesure le degre de desaccord entre les juges pour un couple et un critere donnes. Un CV eleve signifie que les scores sont tres disperses: certains juges ont donne une note tres haute et d'autres une note tres basse sur le meme critere pour le meme couple. Cela peut indiquer une difficulte d'interpretation du critere, ou une prestation ambigue. Seuls les couples depassant le seuil (40% par defaut) sont affiches.