Das Wichtigste in Kürze
- Eine Idee pro Frage. Wer in einer Zeile nach „Schnelligkeit und Genauigkeit“ fragt, macht jede Antwort mehrdeutig. Teilen Sie die Frage. In unserer eigenen Vorlagenbibliothek ist das das häufigste Muster.
- Die Formulierung verschiebt die Zahl, nicht nur die Stimmung. In Split-Sample-Experimenten verschob ein einziger Zusatz über Opfer die Zustimmung zu einem Militäreinsatz von 68 Prozent auf 43 Prozent. Gleiches Thema, gleiche Woche, anderer Satz.
- Ersetzen Sie vage Mengenangaben durch Zeitangaben. „Kürzlich“ und „oft“ bedeuten für verschiedene Menschen Verschiedenes. „In den letzten 30 Tagen“ bedeutet eines.
- Fragen Sie nur, woraus Sie auch Konsequenzen ziehen. Wenn Sie keine Entscheidung nennen können, die eine Antwort verändert, kostet die Frage Sie umsonst Abschlüsse.
- Hier ist nichts gesperrt. Die Fragensammlung lässt sich per Klick kopieren und die Checkliste per Klick drucken. Kein Formular, keine E-Mail-Adresse.
Beginnen Sie mit der Frage, die Sie bereits geschrieben haben
Um eine Frage für eine Umfrage zu formulieren, beginnen Sie mit der Entscheidung, die die Antwort beeinflussen soll. Fragen Sie nach genau einer Sache, verwenden Sie einfache Wörter und einen klaren Zeitraum, und wählen Sie dann Antwortoptionen, die die wahrscheinlichen Antworten ohne Überschneidung abdecken. Wenn Sie schon einen Entwurf haben, finden Sie mit den Prüfungen unten heraus, was sich ändern muss.
Lesen Sie Ihren Fragenentwurf einmal durch und achten Sie auf diese sechs Anzeichen. Trifft mehr als eines zu, beheben Sie sie in der aufgeführten Reihenfolge: Eine Doppelfrage lässt sich durch bessere Formulierung erst reparieren, wenn sie geteilt ist.
- DoppelfrageDas Wort „und“ oder „oder“ verbindet zwei Dinge, die man unterschiedlich sehen kann.
- SuggestivEin Adjektiv oder eine Behauptung darüber, was andere denken, steckt in der Frage.
- UnterstellendWer überhaupt antwortet, akzeptiert etwas, das nie geprüft wurde.
- Vage„Oft“, „kürzlich“, „regelmäßig“. Kein Datum, keine Anzahl, kein Bezugspunkt.
- Fehlerhafte OptionenBereiche überschneiden sich, eine häufige Antwort fehlt oder die Skala ist einseitig.
- Doppelte VerneinungMan muss zweimal lesen, um zu verstehen, welche Richtung Zustimmung bedeutet.
Was eine gute Frage für Umfragen ausmacht
Eine gute Frage ist keine raffinierte Frage. Es ist eine, bei der alle Teilnehmer dieselben Wörter lesen und dasselbe verstehen und bei der die Antwort verändert, was Sie als Nächstes tun. Das ist die ganze Aufgabe. Vier Eigenschaften bringen Sie dorthin.
- Sie benennt genau eine Sache. „Wie zufrieden sind Sie mit unserem Service?“ lädt zu sechs verschiedenen Definitionen von Service ein. „Wie zufrieden sind Sie damit, wie schnell Ihre letzte Support-Anfrage beantwortet wurde?“ lädt zu einer ein.
- Sie enthält keine eigene Meinung. Jedes Adjektiv in der Frage („einfach“, „hilfreich“, „preisgekrönt“) verrät den Befragten, was Sie hören möchten. Überlassen Sie die Spannbreite stattdessen den Antwortoptionen.
- Sie versteht sich beim ersten Lesen. Wenn jemand den Satz neu zerlegen muss, messen Sie Leseaufwand ebenso wie Meinung. Halten Sie sich an einen einzigen Teilsatz und einfache Wörter.
- Sie hängt an einer Entscheidung. Schreiben Sie auf, was Sie tun würden, wenn die Antwort niedrig ausfällt, und was, wenn sie hoch ausfällt. Ist beides dasselbe, streichen Sie die Frage.
Das gewählte Format ist weniger wichtig als diese vier Eigenschaften, aber es ist nicht beliebig. Geschlossene Formate sind schneller zu beantworten und schneller auszuwerten; offene Formate verraten Ihnen Dinge, nach denen Sie gar nicht zu fragen dachten. Die Tabelle unten dient als Wegweiser, und jedes Format hat auf dieser Website einen eigenen Leitfaden mit ausgearbeiteten Beispielen.
| Format | Geeignet, wenn Sie Folgendes brauchen | Beispielfrage | Hauptnachteil |
|---|---|---|---|
| Single-Choice-Liste | Personen in Gruppen einteilen | „Was beschreibt Ihre Rolle am besten?“ | Sie müssen die Optionen im Voraus kennen |
| Mehrfachauswahl | Mehrere Antworten können gleichzeitig zutreffen | „Welche davon haben Sie in den letzten 30 Tagen genutzt?“ | Reihenfolgeeffekte; spätere Optionen werden seltener gewählt |
| Zustimmungsaussagen | Einstellungen, die Sie über die Zeit verfolgen | „Die Tools, die ich täglich nutze, tun, was ich brauche.“ | Manche Menschen stimmen fast allem zu |
| Numerische Skala | Ein Wert, den Sie vergleichen oder als Trend verfolgen | „Wie wahrscheinlich ist es, dass Sie uns weiterempfehlen?“ | Werte verschieben sich mit der Formulierung der Beschriftungen |
| Kurzer offener Text | Der Grund hinter einem Wert | „Was ist der Hauptgrund für Ihre Bewertung?“ | Langsamer zu beantworten und zu codieren |
| Matrix aus Aussagen | Viele Items auf einer gemeinsamen Skala | „Bewerten Sie jede davon von 1 bis 5.“ | Mühsam am Smartphone; verleitet zu Straightlining |
Mehr zu einzelnen Formaten: siehe Fragetypen mit Einfach- und Mehrfachauswahl, Zustimmungsskalen und wie viele Stufen sinnvoll sind, numerische Skalen und ihre Beschriftungen sowie offene und geschlossene Fragen. Für Alter, Geschlecht, Einkommen und ähnliche Items gelten bei demografischen Fragen eigene Regeln zu Platzierung und Freiwilligkeit.
Sechs Arten, wie Fragen in Umfragen scheitern, und jeweils die korrigierte Fassung
Diese sechs Muster decken fast jede schlechte Frage ab, die wir sehen. Unten finden Sie jeweils die fehlerhafte Fassung, die Neufassung und eine Anmerkung, warum die Änderung wichtig ist. Die Neufassungen sind keine Stilvorlieben. In jedem Fall liefert das Original eine Antwort, die Sie nicht deuten können, und die Korrektur eine, die Sie deuten können.
Doppelfragen fragen zwei Dinge und lassen nur eine Antwort zu
Eine Doppelfrage packt zwei Themen in einen Satz. Wer mit dem einen begeistert und vom anderen genervt ist, kann nicht ehrlich antworten, also ist jede Wahl nur Rauschen.
Wie zufrieden sind Sie mit der Schnelligkeit und Genauigkeit Ihrer Lieferung?
Wie zufrieden sind Sie damit, wie schnell Ihre Bestellung angekommen ist?
Stellen Sie die zweite Hälfte dann als eigene Frage. Eine Bestellung, die schnell, aber falsch ankommt, sollte bei der einen hoch und bei der anderen niedrig abschneiden, und das sehen Sie nicht, wenn sich beide eine Zeile teilen.
War unser Support-Team freundlich und hat es Ihr Problem gelöst?
Wurde Ihr Problem gelöst?
Ergebnis und Umgangston sind getrennte Messgrößen. Teams, die freundlich, aber wirkungslos sind, sehen genauso aus wie Teams, die wirksam, aber schroff sind, wenn Sie beides zusammenlegen.
Wie nützlich und leicht verständlich war die Schulung?
Wie viel von der Schulung konnten Sie ohne Hilfe nachvollziehen?
Klar, aber nutzlos ist ein echtes Ergebnis. Ebenso verwirrend, aber wertvoll. Wer beides zusammenlegt, verbirgt genau das, was ein Schulungsteam wissen muss.
Suggestivfragen verraten, welche Antwort Sie hören wollen
Eine Suggestivfrage lenkt durch wertende Adjektive oder durch eine Behauptung darüber, was andere bereits denken. Wer widersprechen will, muss gegen den Satz ankämpfen, und die meisten machen sich diese Mühe nicht.
Wie zufrieden sind Sie mit unserem preisgekrönten Support-Team?
Wie bewerten Sie den Support, den Sie erhalten haben?
„Preisgekrönt“ schmeichelt dem Team, bevor sich die befragte Person eine Meinung gebildet hat. Es rahmt außerdem unbemerkt die Skala: Wer jetzt widerspricht, widerspricht einer Auszeichnung.
Die meisten unserer Nutzer fanden die Einrichtung unkompliziert. Wie einfach fanden Sie sie?
Wie leicht oder schwer war die Einrichtung Ihres Kontos?
Zwei Korrekturen in einer. Der Verweis auf andere ist weg, und der Fragestamm nennt jetzt beide Richtungen, sodass „leicht“ nicht mehr die Standardlesart ist.
Wie sehr hat Ihnen unser neu gestalteter Bezahlvorgang gefallen?
Wie würden Sie den Bezahlvorgang im Vergleich zum letzten Mal beschreiben?
„Wie sehr hat Ihnen ... gefallen“ lässt nichts unterhalb von „ein wenig“ zu. Wer es furchtbar fand, kann nicht zutreffend antworten, also fällt der Durchschnitt schon durch die Konstruktion positiv aus.
Unterstellende Fragen zwingen Sie, etwas zu akzeptieren, um überhaupt zu antworten
Eine unterstellende Frage schmuggelt eine Annahme ein. Jede verfügbare Antwort bestätigt sie, die Daten sind also falsch, bevor jemand sie liest. Dieses Muster übersehen Menschen in ihren eigenen Entwürfen am häufigsten, weil die Annahme meist auf die Person zutrifft, die die Frage schreibt.
Wohin gehen Sie gern, wenn Sie auswärts essen?
Wie oft haben Sie in den letzten 30 Tagen in einem Restaurant gegessen?
Stellen Sie diese Frage zuerst und zeigen Sie die Frage nach dem „Wohin“ nur denen, die mehr als „Keinmal“ angegeben haben. Wer nie auswärts isst, erfindet sonst eine Antwort.
Auf welche Probleme sind Sie beim Onboarding gestoßen?
Wie ist das Onboarding für Sie gelaufen?
Das Original unterstellt Probleme. Wer keine hatte, überspringt die Frage oder erfindet hilfsbereit eine kleine Beschwerde, und beides lässt das Onboarding schlechter aussehen, als es ist.
Wie hat unsere neue Preisgestaltung Ihrem Team geholfen, Geld zu sparen?
Sind die Ausgaben Ihres Teams bei uns seit der Preisänderung gestiegen, gesunken oder gleich geblieben?
Im Original ist kein Platz für „es hat uns mehr gekostet“. Auch „Nicht sicher“ ist wichtig: Ohne diese Option müssen Personen, die es wirklich nicht wissen, raten, und geratene Antworten sehen genauso aus wie Daten.
Vage Fragen werden mit unterschiedlichen Maßstäben gemessen
Wörter wie „oft“, „regelmäßig“ und „kürzlich“ wirken beim Schreiben präzise und bedeuten beim Lesen nichts Gemeinsames. Zwei Personen mit identischem Verhalten geben unterschiedliche Antworten, sodass die gemessene Streuung von der Sprache kommt, nicht vom Leben.
Treiben Sie regelmäßig Sport?
An wie vielen Tagen treiben Sie in einer typischen Woche mindestens 20 Minuten Sport?
„Regelmäßig“ erledigt drei Aufgaben auf einmal: wie oft, wie lange und wie beständig. Die Neufassung behebt alle drei und liefert eine Zahl, die Sie als Trend verfolgen können.
Haben Sie sich kürzlich an den Support gewandt?
Haben Sie sich in den letzten 90 Tagen an den Support gewandt?
Wählen Sie ein Zeitfenster, an das sich die Befragten tatsächlich erinnern können. Nach etwa drei Monaten verdichten und vertauschen Menschen Ereignisse, ein längeres Zeitfenster erkauft also Reichweite auf Kosten der Genauigkeit.
Wie bewerten Sie den Wert unseres Produkts?
Wie bewerten Sie das, was Sie für Ihr Geld bekommen?
„Wert“ kann je nach Leser Preis, Nutzen oder Qualität bedeuten. Wer das Verhältnis von Preis und Leistung ausdrücklich benennt, sorgt dafür, dass alle dieselbe Frage beantworten.
Fehlerhafte Antwortoptionen ruinieren Fragen, die eigentlich gut waren
Auch ein gut formulierter Fragestamm scheitert, wenn sich die Optionen überschneiden, Lücken lassen oder in eine Richtung kippen. Dieses Muster ist am leichtesten zu finden und wird trotzdem am häufigsten veröffentlicht, weil man die Frage Korrektur liest und die Liste darunter nur überfliegt.
Wie hoch ist Ihr jährliches Haushaltseinkommen? Unter 25.000 US$ / 25.000 bis 50.000 US$ / 50.000 bis 75.000 US$ / 75.000 bis 100.000 US$
Wie hoch ist Ihr jährliches Haushaltseinkommen vor Steuern?
Drei Fehler behoben: Die Spannen überschneiden sich nicht mehr bei 25.000, 50.000 und 75.000 US$; es gibt jetzt eine oberste Spanne; und Personen können die Angabe verweigern, statt die Umfrage abzubrechen.
Wie bewerten Sie unseren Service? Gut / Sehr gut / Ausgezeichnet / Hervorragend
Wie bewerten Sie unseren Service?
Eine unausgewogene Skala garantiert einen positiven Durchschnitt, egal was die Menschen denken. Eine ausgewogene hat auf beiden Seiten eines neutralen Mittelpunkts gleich viele Stufen.
Welche unserer Funktionen nutzen Sie am meisten? Dashboards / Berichte / Benachrichtigungen
Welche davon haben Sie in den letzten 30 Tagen genutzt? Wählen Sie alle zutreffenden Optionen aus.
Das Original erzwingt eine Wahl von Personen, die keine der drei nutzen, und verbirgt Personen, die alle drei nutzen. „Nichts davon“ ist kein Füllmaterial; es ist der Unterschied zwischen einer echten Null und einer vorgetäuschten Vorliebe.
Doppelte Verneinungen messen die Lesegeschwindigkeit
Zwei Ebenen der Verneinung zwingen die befragte Person, vor dem Antworten ein kleines Logikrätsel zu lösen. Die meisten tun das nicht. Sie raten die Richtung und machen weiter, wodurch das Item zu einem Münzwurf wird, der wie eine Meinung aussieht.
Lehnen Sie die Aussage ab, dass die Rückerstattungsrichtlinie nicht flexibel genug ist?
Wie flexibel ist die Rückerstattungsrichtlinie?
Fragen Sie nach der Sache selbst. Die Richtung gehört in die Antwortoptionen, wo die befragte Person sie vollständig auf einen Blick sieht, statt sie im Kopf behalten zu müssen.
Sollten wir die Möglichkeit, das Onboarding zu überspringen, nicht abschaffen?
Sollte man das Onboarding überspringen können?
„Sollten wir ... nicht abschaffen“ enthält zwei Verneinungen und einen Vorschlag für eine Regelung. Niemand beantwortet das zutreffend, auch nicht die Person, die es geschrieben hat.
Ich finde die Berichte nie nutzlos. Stimmen Sie zu oder nicht?
Wie hilfreich sind die Berichte?
„Nie“ plus „nutzlos“ ist eine verkleidete doppelte Verneinung. Die Umformulierung in ein direktes Item beseitigt außerdem das Zustimmungsformat, dem manche Menschen unabhängig vom Inhalt zustimmen.
Wie Sie neutrale Fragen für Umfragen formulieren
Wer die sechs Muster behebt, beseitigt den größten Schaden. Diese vier Gewohnheiten fangen den Rest ab und kosten etwa eine Minute pro Frage.
- Nennen Sie einen Zeitraum. „In den letzten 30 Tagen“ ist „kürzlich“ jedes Mal überlegen, und es ist die ergiebigste Änderung auf dieser Liste.
- Nennen Sie beide Enden im Fragestamm. „Wie leicht oder schwer“ statt „wie leicht“. Wer nur nach der erhofften Richtung fragt, zieht die Antworten dorthin.
- Bieten Sie einen ehrlichen Ausweg. „Nicht zutreffend“, „Weiß nicht“ und „Keine Angabe“ verwandeln erzwungene Schätzungen in ehrliche Lücken. Eine Lücke, die Sie sehen, ist besser als eine Schätzung, die Sie nicht erkennen.
- Lesen Sie die Frage jemandem außerhalb des Projekts vor. Alles, was Sie erklären müssen, ist eine Frage, die Fremde anders verstehen werden. Schreiben Sie sie um, statt sie zu erläutern.
Verzerrung entsteht auch dadurch, wer antwortet und wie sich die Personen nach dem Start verhalten, nicht nur durch die Formulierung. Diese Seite des Problems behandelt der Leitfaden zur Antwortverzerrung, und wer überhaupt in Ihrer Stichprobe landet, behandeln die Methoden der Stichprobenziehung.
Wie 799 echte Fragen aus Umfragen tatsächlich aussehen
Ratschläge zu Fragen in Umfragen werden meist aus dem Gedächtnis geschrieben. Wir konnten unsere an etwas Echtem prüfen, also haben wir es getan. Jede aktive Vorlage der SuperSurvey-Bibliothek wurde aus der Datenbank geholt, jede Frage darin maschinell klassifiziert, und die markierten wurden von Hand gelesen. Das sind 87 Umfragen und 799 Fragen. Die Methode ist am Ende dieser Seite beschrieben, damit Sie sie hinterfragen können.
Der wichtigste Befund ist nicht der erwartete. Von den sechs Fehlermustern oben fehlen fünf in unserer eigenen Bibliothek nahezu. Eines ist überall.
Die Anteile beziehen sich auf die 636 geschlossenen Fragen (Skala und Single Choice). Offener Text ist ausgenommen, weil eine zweiteilige Aufforderung in einem Textfeld kein Fehler ist: Die befragte Person kann beide Hälften beantworten. Der Wert für Doppelfragen ist eine manuell geprüfte Schätzung; der reine Musterabgleich fand 170 Fragen, und eine Prüfung einer systematischen Auswahl von Hand ergab, dass etwa ein Viertel davon feste Wendungen wie „Rolle und Verantwortlichkeiten“ waren und keine echten Fehler.
Die Zahlen hinter dem Diagramm anzeigen
| Muster | Markiert | Basis | Anteil | Von Hand geprüft? |
|---|---|---|---|---|
| Zwei Themen in einer Frage | etwa 124 | 636 geschlossene | 20% | Ja, Auswahl von 21 der 145 Treffer bei Skalen |
| Undefiniertes Häufigkeitswort in einem Zustimmungs-Item | 15 | 636 geschlossene | 2.4% | Ja, alle 15 |
| „Wie oft“ ohne Zeitraum in Fragestamm oder Optionen | 7 | 636 geschlossene | 1.1% | Ja, alle 7 |
| Absolute Formulierung („alle“, „immer“) | 2 | 636 geschlossene | 0.3% | Ja, beide |
| Suggestives Adjektiv im Fragestamm | 1 | 636 geschlossene | 0.2% | Ja |
| Doppelte Verneinung | 0 | 799, alle Fragen | 0% | Ja, alle 799 durchsucht |
| Fragestamm länger als 25 Wörter | 0 | 799, alle Fragen | 0% | Der längste Fragestamm der Bibliothek hat 22 Wörter |
Sehen Sie sich das Diagramm noch einmal an, denn es kehrt den üblichen Rat um. Die Suggestivfrage, mit der fast jeder Leitfaden zu diesem Thema beginnt, kommt in 636 geschlossenen Fragen einmal vor. Die Doppelfrage, der die meisten Leitfäden einen Absatz widmen, steckt in etwa jeder fünften. Wenn Ihre Zeit für die Überprüfung knapp ist, suchen Sie nach dem Wort „und“.
- 9Fragen pro Vorlage im Median. Alle 87 liegen zwischen 7 und 14.
- 9,3Wörter pro Frage im Mittel. Keine der 799 ist länger als 25 Wörter.
- 37 %aller 799 Fragen nutzen dieselbe Zustimmungsskala, meist mit denselben beiden Endpunkten.
- 0Fragen nutzen eine Skala von 0 bis 10, obwohl 23 fragen, ob Sie etwas weiterempfehlen würden.
Zwei davon verdienen einen Hinweis darauf, was sie bedeuten und was nicht. Der Median von 9 Fragen ist eine Hausregel, keine Entdeckung über Umfragen im Allgemeinen: Wir haben einen einzigen Erstellungsprozess untersucht, nicht die Welt. Und die 37 Prozent sind Kritik an uns selbst. Wenn mehr als ein Drittel einer Bibliothek dasselbe Element mit denselben beiden Endpunkten ist, wird das Format aus Gewohnheit gewählt und nicht danach, was die Frage braucht.
Die Null ist hier die nützlichste Zahl. Dreiundzwanzig Fragen in der Bibliothek stellen eine Variante von „Würden Sie das weiterempfehlen?“, und keine davon nutzt die Skala von 0 bis 10, auf der die Weiterempfehlungskennzahl definiert ist. Wenn Sie eine dieser Fragen in einen Bericht übernehmen und das Ergebnis einen Weiterempfehlungswert nennen, bedeutet die Zahl nicht, was Ihr Publikum glaubt. Passen Sie die Skala an die Kennzahl an, die Sie angeben wollen.
Wir haben unsere eigene Bibliothek an unserem eigenen Rat geprüft
Diese Seite rät, mit etwas Themenbezogenem zu beginnen und die Fragen zur Person bis zum Schluss aufzuheben. Unsere Bibliothek tut das meistens, aber nicht immer.
Von den 87 Vorlagen beginnen 70 Prozent mit einer echten Frage zum Thema, und 84 Prozent der demografischen Fragen stehen im letzten Viertel ihrer Umfrage. Doch 13 Vorlagen beginnen noch immer mit der Frage, wer Sie sind, und fünf mit einem Verwaltungsfeld. Eine fragt nach Ihrem vollständigen Namen, bevor sie irgendetwas zum Thema fragt. Diese stehen auf unserer Liste zur Korrektur, und sie hier zu nennen ist billiger, als so zu tun, als läge die Zahl bei 100 Prozent.
Die durchschnittliche Position erzählt dieselbe Geschichte genauer. Auf einer Skala, auf der 0 die erste und 1 die letzte Frage ist, liegen Bewertungsskalen im Schnitt bei 0,33, Single-Choice-Fragen bei 0,61, offener Text bei 0,68 und demografische Fragen bei 0,78. Das ist die richtige Form: Einfaches und Themenbezogenes zuerst, Aufwendiges später, Persönliches zuletzt.
Wie stark verschiebt die Formulierung die Antwort tatsächlich?
Fast jeder Leitfaden zu diesem Thema rät, Suggestivfragen zu vermeiden. Fast keiner sagt, was es kostet, wenn man es nicht tut. Diese Lücke ist wichtig, denn „diese Formulierung ist etwas besser“ und „diese Formulierung verschiebt das Ergebnis um vierzehn Punkte“ verlangen sehr unterschiedlich viel Aufmerksamkeit.
Die Tabelle unten sammelt die Formulierungsexperimente, die wir überprüfen konnten, mit dem gemessenen Effekt und einem Evidenzgrad. Wo die Evidenz umstritten ist, steht das dabei.
| Änderung | Gemessener Effekt | Evidenzgrad | Quelle |
|---|---|---|---|
| „Verbieten“ statt „erlauben“ | Die Antworten verschieben sich über alle seit 1940 veröffentlichten Experimente um durchschnittlich 14 Punkte. Die Streuung ist groß: Bei den meisten Fragen liegt der Abstand irgendwo zwischen minus 6 und plus 34 Punkten. | A | Holleman, 19991 |
| Ein Zusatz über Folgen | Die Zustimmung zu einem Militäreinsatz fiel von 68 Prozent auf 43 Prozent, als die Frage den Zusatz erhielt: „selbst wenn das bedeuten würde, dass US-Streitkräfte Tausende Opfer erleiden könnten“. | B | Pew Research Center2 |
| Ein zusätzliches Adjektiv | „Gibt es reichlich verfügbare Arbeitsplätze?“ erhielt 60 Prozent Ja. „Reichlich gute Arbeitsplätze“ erhielt 48 Prozent. Gleiche Woche, gleiches Stichprobendesign. | B | Pew Research Center, 20193 |
| Zustimmungsskalen statt direkter Fragen | Menschen stimmen derselben Idee eher zu, als sie abzulehnen, gleich in welcher Richtung sie formuliert ist – eine eingebaute Ja-Tendenz von etwa 10 Punkten, zusammengefasst über 25 Studien. | A | Krosnick und Presser, 20104 |
| Ein Zustimmungs-Item als direkte Frage umschreiben | Die Messqualität stieg bei direkten Fragen auf etwa 0,75 gegenüber 0,18 bis 0,40 bei der entsprechenden Zustimmungsfassung, über 14 Länder hinweg. | A | Saris und andere, 20105 |
| Eine Frage mit zwei Themen in zwei teilen | Von 8 getesteten Items mit zwei Themen lieferten 6 signifikant andere Ergebnisse, sobald jede Hälfte einzeln gefragt wurde. | B | Menold, 20206 |
| Eine Antwort vorgeben statt offen zu lassen | 58 Prozent wählten „die Wirtschaft“, wenn sie in einer Liste angeboten wurde. Nur 35 Prozent nannten sie von sich aus, wenn dieselbe Frage offen war. Offene Antworten lagen zudem in 43 Prozent der Fälle außerhalb der angebotenen Liste. | B | Pew Research Center2 |
| „Alle zutreffenden auswählen“ statt Ja oder Nein pro Item | Mehrfachauswahl unterschätzt im Schnitt um etwa 8 Punkte und bei einzelnen Items um bis zu 16 Punkte, über 4.581 Teilnehmer hinweg. | B | Pew Research Center, 20197 |
| Mehr Skalenstufen | Die Reliabilität steigt von 2 Stufen bis etwa 7 steil an und flacht dann ab. Menschen nutzen nur etwa die Hälfte der angebotenen Stufen, höchstens etwa 9. | A | Krosnick und Presser, 20104 |
| „Keine Meinung“ anbieten | Der Anteil, der diese Option wählte, stieg von 15 Prozent auf 38 Prozent, aber das Meinungsbild unter allen anderen veränderte sich überhaupt nicht. | A | Presser und Schuman, 19758 |
| Wo eine Option in der Liste steht | Eye-Tracking ergab, dass nur 54 Prozent der Menschen die letzte Option einer 5-stufigen Skala überhaupt ansehen, und 60 Prozent wählten aus der ersten Hälfte einer Liste mit 12 Einträgen. | B | Galesic und andere, 20089 |
| Eine Definition hinter einem Mouseover verstecken | 10 Prozent der Menschen lasen eine Definition, die ein Mouseover erforderte. 78 Prozent lasen dieselbe Definition, wenn sie immer sichtbar war. | B | Galesic und andere, 20089 |
| 56 Fragen zu einem Fragebogen hinzufügen | Die Rücklaufquote sank um 2,7 Punkte, und der gesamte Rückgang betraf Papierfragebögen. Bei Online-Teilnehmern gab es keinen Unterschied, und auch die Antwortqualität sank nicht. | B | Sandelin, 202210 |
| Eine Skala von 0 bis 10 statt von minus 5 bis plus 5 nummerieren | Eine Studie von 1991 fand eine Verschiebung um 21 Punkte. Eine länderübergreifende Replikation von 2025 fand den Effekt in umgekehrter Richtung. Betrachten Sie diesen als ungeklärt. | C | Schwarz und andere, 1991; Bottoni und Aizpurua, 202511 |
- A Metaanalyse oder über Studien hinweg repliziert
- B eine starke Studie
- C bekannt, aber umstritten oder veraltet
Aus dieser Tabelle ergeben sich drei Dinge, nach denen Sie schon heute handeln sollten.
Erstens ist die Zustimmungsskala in fast jedem Umfrage-Tool die Standardeinstellung, auch in unserem, und sie ist das schwächste Format auf der Liste. „Die Berichte sind nützlich“ mit einer Skala von Zustimmung bis Ablehnung in „Wie nützlich sind die Berichte?“ mit einer Skala von „überhaupt nicht“ bis „äußerst“ umzuschreiben, kostet Sie nichts und bringt viel Messqualität.5 Wenn Sie beim Zustimmungsformat bleiben, dann mit fünf Stufen.12
Zweitens wird die letzte Option Ihrer Skala von etwa der Hälfte Ihrer Teilnehmer nicht gelesen.9 Das spricht für kurze Listen, dafür, die Option, die am genauesten gemessen werden soll, nicht ganz ans Ende zu setzen, und dafür, die Reihenfolge zu randomisieren, wo die Liste keine natürliche Abfolge hat.
Drittens, und am unbequemsten: Die Länge ist weniger wichtig, als die meisten Ratschläge behaupten. 56 zusätzliche Fragen kosteten weniger als drei Punkte Rücklaufquote und bei Online-Teilnehmern überhaupt nichts.10 Streichen Sie Fragen, weil keine Entscheidung dahintersteht, nicht weil Sie gelesen haben, dass eine lange Umfrage Ihre Rücklaufquote zerstört.
Zahlen, die wir bewusst nicht verwendet haben
Vier Werte kursieren ständig in Texten über Umfragen. Wir haben jeden bis zu seinem Ursprung verfolgt und alle vier weggelassen. Falls Sie sie anderswo zitiert gesehen haben, ist das der Grund.
- „Die durchschnittliche Aufmerksamkeitsspanne beträgt 8 Sekunden, kürzer als bei einem Goldfisch.“
- Wird meist Microsoft, 2015, zugeschrieben. Microsoft hat sie nicht gemessen. Der Bericht schreibt den Wert einer externen Statistik-Website zu und datiert ihn auf 2013, und Microsofts eigene Studie maß Erkennungszahlen und Reaktionszeiten, aus denen sich keine Zahl in Sekunden ergeben kann. Journalisten, die die beiden als eigentliche Quellen genannten Organisationen kontaktierten, stellten fest, dass keine von beiden irgendwelche Unterlagen zu der Forschung hatte.13 Stand August 2026 ist die Website, die die Zahl geliefert hat, gar nicht mehr erreichbar. Das Gedächtnis von Fischen wird übrigens seit 1908 erforscht.
- „Menschen können nur 7 plus/minus 2 Dinge im Gedächtnis behalten, also höchstens sieben Antwortoptionen.“
- Millers Aufsatz von 1956 ist echt und wichtig, und er sagt das Gegenteil. Er beschreibt drei verschiedene Grenzen und warnt im eigenen Text davor, sie als einen einzigen Prozess zu behandeln, das sei „ein grundlegender Fehler“. Miller nannte die Zahl selbst einen Zufall. Vor allem aber sind Antwortoptionen beim Auswählen auf dem Bildschirm sichtbar, es muss also gar nichts im Gedächtnis behalten werden. Wie viele Skalenstufen sinnvoll sind, ist eine Messfrage, und die Antwort aus der Messung steht in der Tabelle oben.14
- „Die Rücklaufquoten von Umfragen sind auf 3 Prozent gefallen.“
- Es gibt nicht die eine Rücklaufquote, die fallen könnte. Die Quoten unterscheiden sich je nach Kontaktweg um mehr als eine Größenordnung. Wirklich eingebrochen sind Telefonumfragen: Pews eigene Reihe reicht von 36 Prozent im Jahr 1997 bis 6 Prozent im Jahr 2018.15 Staatliche persönliche Befragungen gingen im selben Zeitraum weit weniger stark zurück. Nennen Sie eine Rücklaufquote nur zusammen mit der Methode.
- „Umfragen über 7 bis 8 Minuten verlieren 5 bis 20 Prozent der Abschlüsse.“
- Das geht auf zwei undatierte Blogbeiträge eines Anbieters vom selben Autor zurück. Einer enthält die Prozentspanne ohne Zeitraum, ohne Auswahlregel und ohne Datensatz. Der andere enthält die Methodik und keine Prozentzahlen. Beim Weitererzählen werden beide vermischt. Von keiner der beiden Analysen gibt es eine begutachtete Fassung. Der in einem randomisierten Experiment gemessene Effekt beträgt 2,7 Punkte für 56 zusätzliche Fragen, und online null.10
Das Muster hinter allen vieren ist mehr wert als die Korrekturen. Zwei gehen auf Webseiten zurück, die nicht mehr existieren, und beide wirkten ordentlich belegt, bis jemand dem Link folgte. Der Rest sind Anbieterseiten, die andere Anbieterseiten zitieren. Wo es zu diesen Fragen begutachtete Forschung gibt, ist sie durchweg weniger dramatisch als die Legenden.
70 Beispielfragen für Umfragen zum Kopieren
Jede Frage unten folgt den vier Eigenschaften oben: ein Thema, keine eingebaute Meinung, ein angegebener Zeitraum, wo nötig, und eine Entscheidung dahinter. Wählen Sie eine Kategorie und übernehmen Sie dann mit der Kopierschaltfläche die ganze Liste als reinen Text. Nichts ist gesperrt, und es gibt kein Formular.
70 Fragen in 6 Kategorien. Das Antwortformat unter jeder Frage ist ein Vorschlag, keine Regel. Kopiert wird der sichtbare Tab, eine Frage pro Zeile.
- Wie wahrscheinlich ist es, dass Sie uns einem Freund oder Kollegen empfehlen?
- Was ist der Hauptgrund für Ihre Bewertung?
- Wie leicht oder schwer war es, heute zu bekommen, was Sie brauchten?
- Wie zufrieden sind Sie damit, wie schnell Ihre Anfrage bearbeitet wurde?
- Wurde Ihr Problem gelöst?
- Wie oft mussten Sie sich wegen dieses einen Anliegens melden?
- Wie war es diesmal im Vergleich zu Ihrem letzten Kauf bei uns?
- Welcher Teil des Ablaufs hat am längsten gedauert?
- Wie oft haben Sie uns in den letzten 30 Tagen genutzt?
- Wie bewerten Sie das, was Sie für Ihr Geld bekommen?
- Wie gut entsprach das, was ankam, Ihren Erwartungen?
- Wenn wir vor Ihrer nächsten Bestellung eine Sache ändern könnten, welche sollte es sein?
- Wie wahrscheinlich ist es, dass Sie wieder bei uns kaufen?
- Gibt es etwas, das wir getan haben und das wir Ihrer Meinung nach nicht ändern sollten?
- Wie klar ist Ihnen, was Sie in diesem Quartal liefern sollen?
- Wie viele Stunden gehen in einer typischen Woche für Arbeit drauf, die Sie als wenig wertvoll bezeichnen würden?
- Die Tools, die ich täglich nutze, tun, was ich brauche.
- Wenn Sie ein Problem ansprechen, wie oft ändert sich etwas?
- Wie wohl würden Sie sich dabei fühlen, Ihrer Führungskraft in einer Besprechung zu widersprechen?
- Hatten Sie in den letzten 3 Monaten ein Gespräch über Ihre Entwicklung?
- Wie gut ist Ihr derzeitiges Arbeitspensum zu bewältigen?
- Was würde Ihnen die nächste Woche leichter machen?
- Wie gut verstehen Sie, wie Ihre Arbeit mit den Unternehmenszielen zusammenhängt?
- Wie wahrscheinlich ist es, dass Sie in 12 Monaten noch hier sind?
- Was davon hat Sie in den letzten 30 Tagen behindert? Wählen Sie alle zutreffenden Optionen aus.
- Gibt es etwas, das die Unternehmensleitung hören sollte und nach dem diese Umfrage nicht gefragt hat?
- Welche davon haben Sie in den letzten 30 Tagen genutzt? Wählen Sie alle zutreffenden Optionen aus.
- Wie enttäuscht wären Sie, wenn Sie das nicht mehr nutzen könnten?
- Was wollten Sie tun, als Sie heute die App geöffnet haben?
- Wie gut erfüllt diese Funktion die Aufgabe, für die Sie sie brauchten?
- Wo sind Sie hängen geblieben, falls überhaupt?
- Wie viel von der Einrichtung konnten Sie ohne Hilfe abschließen?
- Was haben Sie vorher verwendet?
- Wie oft nutzen Sie diese Funktion?
- Wenn diese Funktion morgen verschwände, was würden Sie stattdessen tun?
- Wie schnell fühlt sich die App für Sie an?
- Woran sollten wir zuerst arbeiten?
- Was hätte Sie fast davon abgehalten, sich zu registrieren?
- Wie viel von der Sitzung konnten Sie ohne Hilfe nachvollziehen?
- Wie nützlich wird das für Ihre tatsächliche Arbeit sein?
- Wie sicher fühlen Sie sich jetzt, das selbstständig zu tun?
- Hatte die Sitzung die richtige Länge?
- Welcher Teil war für Sie am nützlichsten?
- Welchen Teil würden Sie streichen?
- Wie gut haben Raum und Ausstattung funktioniert?
- Was werden Sie deswegen nächste Woche anders machen?
- Wie haben Sie von dieser Veranstaltung erfahren?
- Wie wahrscheinlich ist es, dass Sie an einer weiteren Sitzung teilnehmen?
- Was haben Sie erwartet und nicht bekommen?
- Was wollten Sie auf dieser Seite tun?
- Konnten Sie es erledigen?
- Wie leicht oder schwer war es, das Gesuchte zu finden?
- Wie verständlich waren die Informationen auf dieser Seite?
- Was fehlt auf dieser Seite?
- Wie viele Seiten haben Sie sich vor dieser angesehen?
- Hat Sie etwas auf dieser Seite verwirrt?
- Welches Gerät verwenden Sie gerade?
- Wie sind Sie auf diese Seite gekommen?
- Wenn Sie nicht gefunden haben, was Sie brauchten, wo suchen Sie als Nächstes?
- Wie bewerten Sie den Bezahlvorgang, den Sie gerade abgeschlossen haben?
- Was ist der Hauptgrund für Ihre Bewertung?
- Was war der frustrierendste Teil?
- Was hätte Sie fast davon abgehalten abzuschließen?
- Was hätte daraus eine 5 von 5 gemacht?
- Was haben Sie erwartet, das dann nicht passiert ist?
- Wenn Sie eine Sache ändern könnten, welche wäre es?
- Was hätten wir Sie fragen sollen und haben es nicht getan?
- Wer war außerdem an dieser Entscheidung beteiligt?
- Was haben Sie gerade getan, bevor das schiefging?
- Gibt es noch etwas, das wir wissen sollten?
Wenn Sie statt einzelner Fragen einen ganzen Fragebogen brauchen, wählen Sie ein Set für Kundenzufriedenheit, Mitarbeiterbefragungen, Marketing, Schulungen, Technologie oder Unternehmen. Die Bibliothek der Umfragevorlagen ändert sich mit der Zeit; die Zahlen zum Bestand oben beschreiben unsere Prüfung vom 21. August 2026.
Die Reihenfolge der Fragen verändert die Antworten
Die Fragereihenfolge ist nicht nur Ordnungssache. Eine frühere Frage kann den Rahmen vorprägen, in dem jemand eine spätere beantwortet, deshalb kann dasselbe Item je nachdem, was davor kam, anders ausfallen. Fünf Regeln decken das meiste ab.
- Beginnen Sie mit etwas Einfachem zum Thema. Die erste Frage prägt die Erwartungen an den Rest. Eine schnelle Single-Choice-Frage dazu, was die Person gerade getan hat, funktioniert. Ein Textfeld nicht.
- Bleiben Sie bei einem Thema, bevor Sie weitergehen. Wer zwischen Abrechnung, Produkt und Support springt, zwingt die Befragten, sich alle paar Items neu zu orientieren, und bei der Neuorientierung steigen sie aus.
- Erst bewerten, dann begründen. Fragen Sie nach der Bewertung und dann nach dem Warum. Umgekehrt verändert das Schreiben der Begründung die Bewertung, die die Person danach abgibt.
- Allgemeines vor Speziellem, es sei denn, Sie testen genau diesen Effekt. Eine allgemeine Zufriedenheitsfrage nach fünf detaillierten Beschwerden nimmt diese Beschwerden in sich auf. Stellen Sie sie, solange der Rahmen noch weit ist.
- Heben Sie alles Heikle bis zum Schluss auf und machen Sie es optional. Alter, Einkommen, Identität und Gehalt gehören ans Ende. Bricht jemand an dieser Stelle ab, behalten Sie trotzdem alles davor.
Länge und Format entscheiden, wer bis zum Ende kommt
Zwei Dinge führen stärker zu Abbrüchen als die Formulierung: wie lang die Umfrage ist und wie viel Aufwand jedes Item kostet. Offener Text ist das teure Format. Er lohnt sich ein- oder zweimal, aber selten fünfmal.
Eine geschlossene Frage für die Zahl, eine optionale offene Nachfrage für den Grund. Sie erhalten etwas, das Sie als Trend verfolgen, und etwas, das Sie zitieren können, und haben dafür nur ein Textfeld verbraucht.
Die Länge hängt auch damit zusammen, wie viele Beantwortungen Sie tatsächlich brauchen. Wenn Sie ermitteln wollen, wie viele abgeschlossene Beantwortungen eine Aussage tragen, ist das eine eigene Berechnung: siehe wie Sie berechnen, wie viele Beantwortungen Sie brauchen.
Prüfen Sie das vor dem Versand
Zehn Prüfungen, etwa eine Minute pro Frage. Die ersten vier finden die meisten Probleme. Wenn die Formulierung besteht, fügen Sie Ihre Fragen in unser kostenloses Umfrage-Tool ein und testen Sie den gesamten Ablauf mit jemandem aus Ihrer Zielgruppe. Lesen Sie die Antworten, statt nur beim Ausfüllen zuzusehen: Auch ein reibungsloses Formular kann Daten liefern, die Sie nicht verwenden können.
- Nur eine Idee. Wenn „und“ oder „oder“ zwei Dinge verbindet, auf die Sie getrennt reagieren würden, teilen Sie die Frage.
- Keine Adjektive im Fragestamm. Streichen Sie jedes. Bedeutet die Frage danach noch dasselbe, lassen Sie es gestrichen.
- Ein echter Zeitraum. Ersetzen Sie „kürzlich“, „oft“ und „regelmäßig“ durch einen Zeitraum oder eine Anzahl.
- Keine Unterstellung. Niemand sollte eine Behauptung über sich akzeptieren müssen, um antworten zu können. Fügen Sie eine Filterfrage hinzu, wenn das der Fall wäre.
- Optionen, die auf alle genau einmal passen. Keine Lücken, keine Überschneidungen, keine fehlende oberste oder unterste Spanne.
- Eine ausgewogene Skala. Gleich viele Stufen über und unter dem Mittelpunkt, mit gleich starken Beschriftungen auf beiden Seiten.
- Ein ehrlicher Ausweg. „Nicht zutreffend“, „Weiß nicht“ oder „Keine Angabe“ überall dort, wo eine erzwungene Antwort eine Schätzung wäre.
- Keine doppelten Verneinungen. Lesen Sie den Fragestamm zusammen mit der negativsten Option. Braucht das einen zweiten Anlauf, formulieren Sie ihn positiv um.
- Eine Entscheidung dahinter. Schreiben Sie auf, was Sie bei einer niedrigen und was bei einer hohen Antwort tun. Unterschiedliche Antworten – sonst streichen Sie die Frage.
- Am Smartphone getestet, von einer fremden Person. Schicken Sie den Entwurf an jemanden außerhalb des Projekts und beobachten Sie, wo die Person zögert. Das Zögern ist der Fehlerbericht.
Häufig gestellte Fragen
Was macht eine gute Frage für eine Umfrage aus?
Eine gute Frage fragt nach genau einer Sache, enthält keine eigene Meinung, ist beim ersten Lesen verständlich und hängt an einer Entscheidung, die Sie tatsächlich treffen werden. Wenn Sie nicht sagen können, was Sie aufgrund der Antwort anders machen würden, verdient die Frage ihren Platz nicht.
Wie formuliert man Fragen für Umfragen?
Beginnen Sie bei der Entscheidung, nicht beim Thema. Schreiben Sie auf, was Sie mit der Antwort tun werden, und schreiben Sie dann die kürzeste Frage, die sie Ihnen liefert. Verwenden Sie einfache Wörter, eine Idee, einen angegebenen Zeitraum und Antwortoptionen, die alle ohne Überschneidung abdecken. Lesen Sie die Frage dann jemandem außerhalb des Projekts vor und schreiben Sie alles um, was Sie erklären müssen.
Was ist eine Suggestivfrage in einer Umfrage?
Eine Suggestivfrage lenkt Menschen zu einer Antwort, meist durch ein Adjektiv in der Frage oder eine Behauptung darüber, was andere denken. „Wie zufrieden sind Sie mit unserem preisgekrönten Support?“ ist suggestiv, denn wer widerspricht, widerspricht der Auszeichnung. Entfernen Sie das Adjektiv und überlassen Sie die Spannbreite den Antwortoptionen.
Was ist eine Doppelfrage?
Eine Doppelfrage fragt nach zwei Dingen gleichzeitig und lässt nur eine Antwort zu. „Wie zufrieden sind Sie mit der Schnelligkeit und Genauigkeit der Lieferung?“ kann niemand ehrlich beantworten, dessen Bestellung schnell, aber falsch ankam. Teilen Sie sie in zwei Fragen. Das Anzeichen ist ein „und“ oder „oder“, das zwei Dinge verbindet, auf die Sie getrennt reagieren würden.
Was sind die wichtigsten Arten von Fragen in Umfragen?
Sechs Formate decken fast alles ab: Listen mit Einfachauswahl, Listen mit Mehrfachauswahl, Zustimmungsaussagen, numerische Skalen, kurzer offener Text und Matrizen aus Aussagen auf einer gemeinsamen Skala. Geschlossene Formate sind schneller zu beantworten und auszuwerten; offener Text verrät Ihnen Dinge, nach denen Sie gar nicht zu fragen dachten.
Leitfäden zu den Formaten: Fragen mit Einfach- und Mehrfachauswahl, Zustimmungsskalen, numerische Skalen, offene und geschlossene Fragen.
Wie formuliert man neutrale Fragen für Umfragen?
Entfernen Sie Adjektive aus dem Fragestamm, nennen Sie beide Richtungen („wie leicht oder schwer“), geben Sie einen konkreten Zeitraum an, gleichen Sie die Antwortskala so aus, dass es gleich viele positive wie negative Stufen gibt, und bieten Sie immer einen ehrlichen Ausweg wie „Weiß nicht“. Prüfen Sie dann, dass man zum Antworten keine Annahme über sich akzeptieren muss.
Verzerrung, die davon abhängt, wer antwortet, und nicht davon, wie Sie gefragt haben, behandelt der Leitfaden zur Antwortverzerrung.
Wie viele Fragen sollte eine Umfrage haben?
Weniger, als Sie fragen möchten. Eine kurze Abfrage nach einem Kauf oder einem Support-Ticket kommt mit einer bis drei Fragen aus. Eine regelmäßige Feedback-Umfrage liegt meist zwischen fünf und zwölf. Die ehrliche Regel ist keine Zahl, sondern ein Test: Hinter jeder Frage braucht es eine Entscheidung, und die Fragen, die diesen Test nicht bestehen, streichen Sie zuerst.
Als Anhaltspunkt: Über die 87 Umfragevorlagen in unserer eigenen Bibliothek liegt der Median bei 9 Fragen, und keine hat mehr als 14. Das ist eine Hausregel und kein Naturgesetz, aber ein brauchbares Ziel.
Wie lang sollte eine Umfrage sein?
Zählen Sie den Aufwand, nicht die Items. Eine geschlossene Frage dauert ein paar Sekunden; ein offenes Textfeld dauert weit länger und kostet Sie Teilnehmer. Nennen Sie den Befragten vorab die tatsächliche Länge, und sorgen Sie dafür, dass die Angabe stimmt. Zwei Umfragen mit gleich vielen Fragen können sich völlig unterschiedlich anfühlen, je nachdem, wie viele Textfelder und Matrizen sie enthalten.
Was sollte eine Umfrage mit nur 3 Fragen abfragen?
Eine Bewertung des Ergebnisses, einen Grund, ein Filtermerkmal. Zum Beispiel: „Wie leicht oder schwer war es, heute zu bekommen, was Sie brauchten?“ auf einer Skala von 1 bis 5; „Was ist der Hauptgrund für Ihre Bewertung?“ als optionaler kurzer Text; und eine Single-Choice-Frage, die zeigt, zu welcher Gruppe die Person gehört, damit Sie später Segmente vergleichen können. Drei Fragen reichen, um ein Problem zu erkennen und zu wissen, wen es betrifft.
Was sind Beispiele für verwirrende Fragen in Umfragen?
Am häufigsten stolpern Menschen über doppelte Verneinungen („Lehnen Sie die Aussage ab, dass die Richtlinie nicht flexibel genug ist?“), vage Mengenangaben („Treiben Sie regelmäßig Sport?“) und überlappende Antwortspannen, in denen 25.000 US$ in zwei Bereichen vorkommt. Jedes davon wird in den sechs Fehlermustern oben direkt nebeneinander umgeschrieben.
Was ist eine Frage in einer Umfrage?
Eine Frage in einer Umfrage ist ein Item in einem Fragebogen: ein Fragestamm, der etwas fragt, plus die Antworten, aus denen eine befragte Person wählen oder die sie schreiben kann. Beide Hälften gehören zur Frage. Ein gut formulierter Fragestamm mit fehlerhaften Antwortoptionen liefert Daten, die Sie nicht verwenden können; deshalb verdienen die Optionen dieselbe Prüfung wie die Formulierung.
Was ist der Unterschied zwischen einer Umfrage und einem Fragebogen?
Der Fragebogen ist das Instrument: die Liste der Fragen und Antwortoptionen. Die Umfrage ist das gesamte Vorhaben, einschließlich der Frage, wen Sie befragen, wie Sie diese Personen erreichen und was Sie mit den Ergebnissen tun. Sie können einen fehlerfreien Fragebogen schreiben und trotzdem eine schlechte Umfrage durchführen, wenn Sie ihn an die falschen Personen schicken. Methoden der Umfrageforschung behandelt den umfassenderen Prozess.
Methoden, Grenzen und Quellen
Worauf diese Seite beruht
Auf zwei Dingen: veröffentlichter Forschung zur Umfragemethodik und einer Messung unserer eigenen Vorlagenbibliothek.
Bei der Forschung haben wir Split-Ballot- und randomisierte Experimente gegenüber Kommentaren bevorzugt und jede Aussage mit einem Grad bewertet. A bedeutet eine Metaanalyse oder einen über unabhängige Studien hinweg replizierten Effekt. B bedeutet eine starke Studie. C bedeutet bekannt, aber umstritten oder veraltet. Jede Quelle in der Liste unten wurde geöffnet und mit der ihr zugeschriebenen Zahl abgeglichen, bevor sie zitiert wurde. Wo wir einen Aufsatz nicht öffnen konnten, haben wir seine Zahlen nicht verwendet.
Für die Messung der Bibliothek haben wir am 21. August 2026 jede aktive Umfragevorlage dieser Website exportiert: 87 Vorlagen mit 799 Fragen. Fragetyp, Formulierung und Position stammen aus dem strukturierten Datensatz, den der Ablauf „Diese Vorlage verwenden“ in den Editor lädt, nicht aus der dargestellten Seite, denn das ist die Fassung, die Nutzer tatsächlich erhalten. Die Extraktion gelang bei 87 von 87. Jedes Fehlermuster wurde mit einer expliziten Regel erkannt, dann wurde eine Auswahl der Treffer von Hand gelesen, um abzuschätzen, wie oft die Regel falschlag. Wo die Prüfung von Hand eine relevante Fehlerquote ergab, ist der veröffentlichte Wert der korrigierte, und die Korrektur ist angegeben. Das einzige Muster mit echtem Ermessensspielraum ist die Frage mit zwei Themen: Hier ergab die Prüfung von Hand, dass etwa ein Viertel der maschinellen Treffer feste Wendungen wie „Rolle und Verantwortlichkeiten“ waren und keine echten Fehler, daher wird dieser Wert als etwa jede fünfte Frage angegeben und nicht auf eine Nachkommastelle.
Was diese Seite Ihnen nicht sagt
Unsere 87 Vorlagen stammen aus einem einzigen Erstellungsprozess und sind keine Stichprobe der Umfragen dieser Welt. Der Median von 9 Fragen ist unser Hausstil; er belegt nicht, wie lang Umfragen im Allgemeinen sind. Die Anteile der Fehlermuster beschreiben speziell unsere Bibliothek, und eine Bibliothek, die andere Menschen geschrieben haben, käme auf andere Anteile. Betrachten Sie sie als ausgearbeitetes Beispiel für die Prüfung eines Fragensets, nicht als Vergleichsmaßstab.
Die veröffentlichten Effektgrößen stammen überwiegend aus der Meinungsforschung mit Stichproben aus der Allgemeinbevölkerung, vieles davon telefonisch oder persönlich erhoben. Ob ein Formulierungseffekt von 14 Punkten bei einer politischen Einstellung sauber auf eine Frage zum Kundenfeedback auf einem Smartphone-Bildschirm übertragbar ist, ist tatsächlich unbekannt. Die Richtung dieser Effekte ist gut belegt. Ihre genaue Größe in Ihrem Kontext nicht.
Zwei Aussagen hier sind aktiv umstritten und in der Tabelle mit C markiert. Insbesondere zur Beschriftung numerischer Skalen gibt es eine länderübergreifende Replikation von 2025, die den Effekt in umgekehrter Richtung zum Original von 1991 fand; betrachten Sie ihn daher als ungeklärt und nicht als Empfehlung.
Offenlegung
SuperSurvey entwickelt Umfragesoftware. Nichts auf dieser Seite wird verkauft, nichts davon liegt hinter einer Registrierung, und die Fragensammlung wird als reiner Text in Ihre Zwischenablage kopiert, den Sie in jedes Tool einfügen können. Die gemessene Bibliothek ist unsere eigene; deshalb nennt der Messteil die Ergebnisse, die uns nicht schmeicheln, neben denen, die es tun.
Quellen
- Holleman, B. (1999). Wording effects in survey research: using meta-analysis to explain the forbid/allow asymmetry. Journal of Quantitative Linguistics, 6(1), 29-40. doi:10.1076/jqul.6.1.29.4145
- Pew Research Center. Writing survey questions. Methodenreferenz.
- Pew Research Center (2019). Good jobs vs jobs: survey experiments can measure the effects of question wording and more.
- Krosnick, J. A., und Presser, S. (2010). Question and questionnaire design. In Handbook of Survey Research (2. Aufl.), 263-313. Volltext.
- Saris, W. E., Revilla, M., Krosnick, J. A., und Shaeffer, E. M. (2010). Comparing questions with agree/disagree response options to questions with item-specific response options. Survey Research Methods, 4(1), 61-79. doi:10.18148/srm/2010.v4i1.2682
- Menold, N. (2020). Double barreled questions: an analysis of the similarity of elements and effects on measurement quality. Journal of Official Statistics, 36(4), 855-886. doi:10.2478/jos-2020-0041
- Pew Research Center (2019). Comparing forced-choice and select-all online survey responses.
- Presser, S., und Schuman, H. (1975). Question wording as an independent variable in survey analysis: a first report. Proceedings of the American Statistical Association, Social Statistics Section, 16-25. Ohne Link zitiert: Die einzige Kopie, die wir online gefunden haben, wird ohne gültiges Zertifikat ausgeliefert.
- Galesic, M., Tourangeau, R., Couper, M. P., und Conrad, F. G. (2008). Eye-tracking data: new insights on response order effects and other cognitive shortcuts in survey responding. Public Opinion Quarterly, 72(5), 892-913. doi:10.1093/poq/nfn059. Frei zugängliche Kopie.
- Sandelin, F. (2022). The effects of questionnaire length on response rate, non-response bias, and data quality. SOM Institute, Universität Göteborg.
- Bottoni, G., und Aizpurua, E. (2025). Between two minds: the influence of numerical labels on survey responses in a cross-national study. Quality and Quantity, 60(2), 4595-4613. doi:10.1007/s11135-025-02436-9. Repliziert Schwarz, N., und andere (1991), Public Opinion Quarterly, 55(4), 570-582, mit gegenteiligem Ergebnis.
- Revilla, M. A., Saris, W. E., und Krosnick, J. A. (2014). Choosing the number of categories in agree-disagree scales. Sociological Methods and Research, 43(1), 73-97. doi:10.1177/0049124113509605. Wir haben die Zusammenfassung und das bestätigende Ergebnis in Quelle 5 gelesen; der Volltext war nicht zugänglich.
- Maybin, S. (2017). Busting the attention span myth. BBC, More or Less.
- Miller, G. A. (1956). The magical number seven, plus or minus two. Psychological Review, 63(2), 81-97. Volltext. doi:10.1037/h0043158
- Pew Research Center (2019). Response rates in telephone surveys have resumed their decline.