Hallo Maxqda-Community,
ich verwende Maxqda für meine Masterarbeit im Fach Politikwissenschaft. Ich habe ca. 150 Politikerreden qualitativ analysiert und entsprechende Codes zugeordnet. Jede Rede ist als einzelnes Dokument in Maxqda geladen. Ich habe die Kodierung durch einen zweiten Kodierer "simuliert", indem ich alle Dokumente selbst nochmal nach 14 Tagen kodiert habe (mir blieb keine andere Wahl, da ich alleine an dem Projekt arbeite). Dabei sind im zweiten Kodierdurchgang exakt die selben Segmente verwendet worden, wie beim ersten Mal. Nun würde ich gerne Cohens Kappa für mein gesamtes Projekt berechnen (mir ist bewusst, dass dies in der qualitativen Forschung nicht zwangsläufig notwendig ist, aber meine Betreuerin hätte es gerne so). Da man in Maxqda ja nur jeweils zwei einzelne Dokumente miteinander vergleichen kann, möchte ich gerne eine Excel-Tabelle mit allen Kappa-Werten für alle 150 Dokumenten-Paare erstellen und dann den Mittelwert des Kappa-Maßes berechnen. [b:gncwh5w3]Meine erste Frage ist schlicht, ob das so Sinn macht oder wird das Ergebnis durch dieses Vorgehen fehlerhaft?[/b:gncwh5w3]
Meine zweite Frage bezieht sich auf das von Maxqda angezeigte Kappa-Maß. Wenn ich die Übereinstimmung von zwei Dokumente vergleiche, kann ich ja über die Ergebnistabelle zur Kappa-Berechnung gelangen. Dort finden sich jedoch zwei unterschiedliche Kappa-Werte. Während in der oberen Zeile der normale Wert erscheint, wird er in der untersten Zeile das Kappa-Maß als "In case of missing values or in case of comparing one code“ ausgegeben. Ich verstehe leider nicht genau den Unterschied der beiden Werte und ich konnte im Handbuch auch keine passende Information diesbezüglich finden. Worauf beziehen sich die „missing values“? In einem anderen Beitrag habe ich gelesen, dass man dann den letztgenannten Wert nehmen sollte, wenn pro Segment mehrere Kategorien vergeben werden können. Dies ist in meinem Projekt der Fall. [b:gncwh5w3]Ist diese Information richtig? Ist für mein Projekt nur der zweite Kappa-Wert relevant?[/b:gncwh5w3]
Über die Beantwortung der beiden Fragen würde ich mich sehr freuen!
Liebe Grüße
Version: MAXQDA 12
System: Mac OS X 10.11 (El Capitan)