Heutzutage gibt es für so ziemlich alles eine Umfrage. Wie wahrscheinlich ist es, dass Sie wählen gehen? Wie sehr unterstützen Sie diesen und jenen Kandidaten? Wie effektiv war der Kundenservice, den Sie von unserem Unternehmen erhalten haben? Wie anfällig sind Sie für Ängste? Wie wahrscheinlich ist es, dass Sie Geld für einen bestimmten Gegenstand ausgeben würden? Wie effektiv war der Lehrer bei der Vermittlung der Kursinhalte? Und mehr …
Alle möglichen Leute beschäftigen sich mit der Messung psychologischer Variablen. Was die wenigsten wissen, ist Folgendes: Ein gutes psychologisches Maß zu erstellen ist nicht so einfach, wie es scheinen mag.
Aus der Perspektive von jemandem, der im Laufe der Jahre alle Arten von Maßen für eine breite Palette von psychologischen Konzepten erstellt hat, kann ich mit Sicherheit sagen, dass die meisten Leute bei der Entwicklung von Umfragen das Boot verpassen. Eine Ausbildung in Psychometrie (psychologische Messung) und/oder psychologischen Forschungsmethoden hilft tatsächlich sehr dabei, bessere Messinstrumente zu entwickeln – ganz gleich, ob Sie eine Skala zur Messung einiger psychologischer Eigenschaften erstellen oder ob Sie Kunden einer Bank fragen, wie zufrieden sie mit einem Produkt sind. Und alles, was dazwischen liegt.
Nachfolgend finden Sie fünf Tipps, die Ihnen helfen, bei Ihrer Arbeit bessere Umfragen zu erstellen.
1. Legen Sie die Items auf die gleiche Skala wie die anderen.
Wenn Sie eine Reihe von Items haben, die beispielsweise die Zufriedenheit mit einem Produkt messen, sollten Sie alle Items auf die gleiche Skala legen. Zum Beispiel könnten Sie drei Items haben, die alle auf einer Skala von 1 bis 5 liegen, wobei 1 für „stimme überhaupt nicht zu“, 3 für „neutral“ und 5 für „stimme voll zu“ steht. Mit einer solchen Skala können Sie dann alle Arten von Items über Ihr Produkt in einem Format formen, das mit dieser Skala funktioniert. Zum Beispiel können Sie die Leute bitten, den Grad ihrer Zustimmung zu den folgenden drei Punkten zu bewerten:
- Ich bin froh, dass ich das Produkt gekauft habe.
Starke Ablehnung 1 2 3 4 5 Starke Zustimmung
- Ich würde das Produkt einem Freund empfehlen.
Starke Ablehnung 1 2 3 4 5 Starke Zustimmung
- Das Produkt funktioniert so, wie es beworben wurde.
Strongly Disagree 1 2 3 4 5 Strongly Agree
Wenn alle Items auf der gleichen Skala liegen, können Sie alle möglichen Dinge tun, wie z.B. die Punktzahlen über die Items hinweg addieren, um eine Gesamtpunktzahl zu erhalten, die Durchschnittspunktzahlen über die einzelnen Items hinweg direkt miteinander vergleichen, usw.
2. Umgekehrte Bewertung einiger Items.
Nicht jeder liebt es, eine Umfrage durchzuführen. Manchmal versuchen die Leute, eine Umfrage achtlos zu überfliegen. Eine Möglichkeit, diesen Punkt zu adressieren, ist die umgekehrte Bewertung einiger Items. Dies ist eigentlich eine einfache Idee. Es bedeutet lediglich, dass für eine Untergruppe von Items das, was einer hohen Punktzahl entspricht, numerisch umgekehrt kodiert wird, wie es für andere Items der Fall ist. Bei der Produktzufriedenheitsmessung, mit der wir im vorherigen Abschnitt gearbeitet haben, würde dies einfach bedeuten, dass man einige Items hinzufügt, bei denen hohe Punktzahlen einer negativen Einstellung zum Produkt entsprechen und niedrige Punktzahlen einer positiven Einstellung zum Produkt entsprechen. Sie könnten z.B. diese beiden Items hinzufügen:
- Ich fand das Produkt von sehr geringer Qualität.
Starke Ablehnung 1 2 3 4 5 Starke Zustimmung
- Ich bedaure, dass ich das Produkt gekauft habe.
Strongly Disagree 1 2 3 4 5 Strongly Agree
Das Einzige, was Sie beachten müssen, wenn Sie umgekehrt bewertete Items einbeziehen, ist, dass Sie später, wenn Sie die Punktzahlen über die Items summieren, die Items aus den umgekehrt bewerteten Items neu kodieren müssen. Im aktuellen Fall würden Sie beispielsweise vor dem Aufsummieren der Werte für die einzelnen Items, um einen Gesamteindruck von der Einstellung eines bestimmten Kunden zum Produkt zu erhalten, mit den umgekehrt bewerteten Items arbeiten und 1 in 5, 2 in 4, 4 in 2 und 5 in 1 umwandeln (und 3 als 3 belassen). Dadurch würde sichergestellt, dass alle Bewertungen quantitativ in die gleiche Richtung gehen. Wichtig ist, dass dieser Umkodierungsprozess in der Phase der Datenanalyse durchgeführt wird (nachdem Sie alle Daten gesammelt haben).
3. Wenn Sie eine Variable als kontinuierliche Variable messen können, sollten Sie das tun.
Variablen gibt es in allen möglichen Varianten. Und manchmal kann man dieselbe Variable auf mehrere Arten messen. In Bezug auf den sozioökonomischen Status einer Person könnten wir zum Beispiel eine der folgenden Möglichkeiten nutzen:
Die erste Option (A) wäre das, was wir als kontinuierliche Variable bezeichnen könnten – die Messung der Variable mit so vielen möglichen Differenzierungsgraden über die Scores hinweg wie möglich. Die zweite Option (B) wäre eine ordinale Variable – sie misst die Variable in Bezug auf die Reihenfolge, in der das Einkommen einer Person innerhalb vorgegebener Kategorien liegt (niedrigstes, zweitniedrigstes, drittniedrigstes usw.). Das letzte Maß, das übrigens furchtbar wäre, wäre eine kategoriale Variable – die Menschen werden einfach in zwei einfache Kategorien eingeteilt.
Um wirklich ins Detail zu gehen, müssten Sie einen Kurs in Statistik belegen (oder Sie können Sara Hall und mein Buch „Straightforward Statistics“ lesen) Aber die Kurzversion ist folgende: Wenn Sie ein echtes kontinuierliches Maß für eine Variable verwenden können, sollten Sie das tun, da Sie auf diese Weise die meisten Informationen erhalten. Und die Statistiken, die wir für kontinuierliche Variablen verwenden, sind leistungsfähiger als die Statistiken, die für diese anderen Arten von Variablen verwendet werden. Mit anderen Worten: Auch wenn Option B (oben) am besten erscheint, ist sie es nicht. Wählen Sie Option A. Wählen Sie kontinuierliche Maße für Ihre Variablen, wenn dies möglich ist.
4. Vermeiden Sie doppelte Items, die zwei verschiedene Fragen stellen.
Es kommt häufig vor, dass Leute Items in Umfragen einfügen, die nach zwei verschiedenen Dingen fragen. Stellen Sie sich zum Beispiel in einer Umfrage zu dem hier als Beispiel verwendeten Produkt ein Item wie folgt vor:
- Das Produkt ist wirklich toll und sehr günstig.
Starke Ablehnung 1 2 3 4 5 Starke Zustimmung
Sehen Sie das Problem? Manche Produkte sind wirklich toll, aber nicht wirklich erschwinglich (denken Sie an einen Ferrari!). Die Qualität des Artikels ist konzeptionell von seiner Erschwinglichkeit getrennt. Und die Fragen in Ihrer Umfrage sollten diese Tatsache widerspiegeln. Andernfalls können Sie nicht wirklich sicher sein, wie die Befragten Ihre Frage interpretieren. Versuchen Sie, dass jedes einzelne Element in Ihrer Umfrage eine eindeutige Bedeutung hat.
5. Denken Sie bei jedem Schritt der Umfrageentwicklung darüber nach, wie Sie die Daten verwenden werden.
Wenn Leute eine Umfrage irgendeiner Art machen, sind sie oft aufgeregt. Und ich kann es ihnen nicht verdenken. Es ist ein lustiger Prozess! Dennoch ist es sehr wichtig, sich immer zu überlegen, wie die einzelnen Elemente Ihrer Umfrage verwendet werden sollen. Sollen Sie die Teilnehmer bitten, den Bildungsstand ihrer Eltern zu beschreiben? Sollen Sie sie bitten, die geografische Region zu nennen, in der sie leben? Sollen Sie sie fragen, ob sie Kinder haben? Ob sie verheiratet sind?
Die Antwort auf jede dieser Fragen lautet wie folgt: Es kommt darauf an, was Sie erreichen wollen. Eine ansonsten gute Umfrage kann durch zu viele Fragen schnell ruiniert werden. Versuchen Sie, Ihre Maßnahme kurz und bündig zu halten – und nehmen Sie nur Punkte auf, für die Sie eine gute Begründung haben. Wenn Sie keinen Grund haben, nach dem Familienstand der Teilnehmer zu fragen, und Sie keine konkreten Pläne haben, die Daten zu analysieren, die Sie durch ein solches Item erhalten würden, dann tun Sie allen einen Gefallen und lassen Sie es weg. Ihre Umfrage sollte zielgerichtet sein und vollständig von dem angetrieben werden, was Sie dazu veranlasst hat, die Messung überhaupt zu erstellen.
Unterm Strich
Das Erstellen von psychologischen Messungen ist eines dieser Dinge, die einfacher erscheinen als sie sind. Um dies gut zu machen, muss man tatsächlich eine ganze Menge Wissen über Statistik und Forschungsmethodik haben. Die hier beschriebenen fünf Punkte sollten als guter Anfang dienen. Viel Erfolg bei der Erstellung Ihrer Umfrage. Und denken Sie immer daran, dass die Personen, die Ihre Umfrage ausfüllen, Menschen sind, genau wie Sie und ich. Wenn Sie effiziente, schlanke und qualitativ hochwertige Umfragen erstellen, verringert sich die Wahrscheinlichkeit, dass Sie die Zeit der Teilnehmer vergeuden.