Cohens Kappa

(Formelabkürzung = κ.) [engl. Cohen's kappa], syn. Cohens κ, [FSE], ist der am häufigsten verwendete Koeffizient zur Berechnung der Übereinstimmungen zw. zwei Beurteilern für kategoriale Daten. Cohens Kappa wird berechnet als Quotient aus der Differenz zw. beobachteter und zufallsbedingt zu erwartender Übereinstimmung und der Differenz aus max. möglicher und zufallsbedingt zu erwartender Übereinstimmung. Die Berechnungsformel lautet:

s = Kategorienanzahl

 = relative Häufigkeit, mit der beide Beurteiler Kategorie j wählen

 bzw.  = relative Häufigkeit, mit der Rater 1 bzw. 2 Kategorie j wählt.

κ besitzt die wünschenswerte Eigenschaft, dass eine Quantifizierung der systematischen Beurteilungsgüte unabhängig von der Häufigkeit zufällig zu erwartender Übereinstimmung erfolgen kann. Würde eine solche Korrektur nicht erfolgen, so würde durch die prozentuale Übereinstimmung stets eine systematische und verzerrte Überschätzung der Qualität von Beurteilungen vorgespiegelt, die umso gravierender ausfiele, je stärker die Prävalenz des Merkmals von 50% abweicht. κ kann max. Werte von +1 annehmen. Im Falle ungleicher Randsummenverteilungen (Häufigkeit der Kategorienwahl für einzelne Beurteiler) ist der max. Wert von κ kleiner 1. Als Faustregel zur Beurteilung der Güte der Übereinstimmung kann angegeben werden, dass Werte bis ,40 als Indikator für schwache, zw. ,40 und ,59 für mäßige, zw. ,60 und ,74 für gute und Werte ab ,75 für sehr gute Übereinstimmung gewertet werden können. Das gewichtete κ. ermöglicht bei mehrstufigen Skalenformaten eine differenzierte Gewichtung unterschiedlich gravierender Nichtübereinstimmungen. Beurteilerübereinstimmung.