Kappa est un moyen d'évaluer la fiabilité d'un système en le comparant à un système de mesure théorique, pour voir si notre système est plus ou moins performant que l'attente que l'on en a (généralement pour les décisions go/nogo).Par exemple, si vous achetez un détecteur de mensonge, mesurer le kappa vous indiquera la performance de votre système par comparaison à un système qui donnerait le résultat (il ment/il dit la vérité) au hasard.Kappa = 0 signifie que vous étiez aussi performant que le hasard (50%)Kappa < 0 signifie que vous étiez moins performant que le hasard (moins de 50% correct)Kappa > 0 signifie que vous étiez plus performant que le hasard (plus de 50% correct)Kappa = 1 signifie que vous étiez correct 100% du tempsLa formule pour calculer kappa est la suivante :
Où Po est la probabilité réelle d'occurrence, et Pe est une probabilité théorique d'occurrence.Dans notre exemple, Pe = 0,50 et P0 le nombre de bonnes réponses lors d'une expérimentation.
