Eine Umfrage wird nicht allein durch Prozentwerte zur Nachricht
Ein praktischer Leitfaden für Umfragen mit vermittelbaren Erkenntnissen: mit klar definierter Stichprobe, sorgfältig formulierten Fragen und transparenter Methodik.
Prozentwerte allein reichen nicht als Grundlage für eine Nachricht
Eine Umfrage kann ein gutes Digital-PR-Material hervorbringen, aber nur, wenn die Daten eine relevante Frage beantworten und sich fundiert interpretieren lassen. Eine auffällige Zahl beweist für sich genommen weder, dass ein Ergebnis eine Bevölkerung repräsentiert, noch, dass es neu ist oder einen ursächlichen Zusammenhang belegt. Bevor du die Arbeit in Auftrag gibst, solltest du überlegen, welche Aussage du treffen möchtest und welche Belege du dafür brauchst.
- Formuliere eine konkrete Frage, die für die Zielgruppe relevant ist, die du erreichen möchtest.
- Lege vorab fest, welche Schlussfolgerungen angemessen wären und welche außerhalb des Untersuchungsrahmens liegen.
- Beurteile das redaktionelle Interesse an der Frage – nicht nur die Möglichkeit, einen auffälligen Prozentwert zu erhalten.
Lege fest, für wen die Umfrage steht
Die Zielpopulation ist die Gruppe, über die du Aussagen treffen möchtest: zum Beispiel Erwachsene mit Wohnsitz in einem bestimmten Gebiet oder Fachkräfte einer Branche, die klar definierten Kriterien entsprechen. Anschließend muss erklärt werden, wie die Teilnehmenden ausgewählt wurden. Eine probabilistische Stichprobe, bei der sich die Auswahlwahrscheinlichkeiten bestimmen lassen, ist nicht dasselbe wie ein Panel, eine offene Einladung oder eine unter Followern verbreitete Umfrage. Letztere können sich eignen, um Meinungen zu erkunden. Sie dürfen jedoch nicht automatisch als repräsentativ für eine ganze Bevölkerung dargestellt werden.
- Gib relevante Angaben zu Gebiet, Zeitraum und Einschlusskriterien an.
- Beschreibe den Rekrutierungskanal, wer teilnehmen konnte und ob es Anreize gab.
- Nenne die Zahl der gültigen Antworten und erläutere, wie unvollständige oder ausgeschlossene Antworten behandelt wurden.
- Falls du Gewichtungen anwendest, erkläre, nach welchen Variablen und zu welchem Zweck. Eine Gewichtung korrigiert nicht zwangsläufig alle Verzerrungen.
Achte auf Verzerrungen in Stichprobe und Fragebogen
Verzerrungen können auftreten, bevor überhaupt jemand antwortet: Manche Menschen haben größere Chancen, die Einladung zu erhalten, oder ein stärkeres Interesse an der Teilnahme. Auch durch Nichtbeantwortung, die Reihenfolge der Fragen oder Formulierungen, die eine erwartete Antwort nahelegen, können Verzerrungen entstehen. Eine große Stichprobe beseitigt diese Probleme nicht. Wer den gesamten Prozess überprüft, kann besser unterscheiden, ob ein Muster in der Umfrage oder möglicherweise auch außerhalb davon besteht.
- Prüfe, ob der Rekrutierungskanal Gruppen ausschließt, die für die Fragestellung wichtig sind.
- Untersuche, wer nicht geantwortet hat und ob diese Ausfälle die Interpretation der Ergebnisse verändern könnten.
- Vermeide Doppelfragen, mehrdeutige Begriffe sowie unvollständige oder sich überschneidende Antwortoptionen.
- Prüfe, ob der Kontext oder die Reihenfolge der Fragen die Antworten beeinflussen könnte.
Teste den Fragebogen, bevor du Antworten erhebst
Ein Vortest hilft, Probleme zu erkennen, die beim lauten Vorlesen des Fragebogens im Team oft unentdeckt bleiben. Bitte Personen, die der Zielpopulation ähneln, die Umfrage auszufüllen und zu erklären, was sie unter den einzelnen Fragen verstehen, wie sie ihre Antwort auswählen und ob ihnen Antwortmöglichkeiten fehlen. Änderst du den Fragebogen nach Beginn der Erhebungsphase grundlegend, dokumentiere die Änderung und prüfe, ob die Antworten weiterhin vergleichbar sind.
- Prüfe, ob die Anweisungen und Begriffe so verstanden werden wie beabsichtigt.
- Miss die Bearbeitungszeit und finde Fragen, die zu Abbrüchen oder Verwirrung führen.
- Überprüfe Sprunglogik, Antwortoptionen wie „weiß nicht“ oder „trifft nicht zu“ und die Nutzung auf Mobilgeräten.
- Bewahre eine datierte Version des verwendeten Fragebogens auf.
Werte die Daten aus, ohne mehr in sie hineinzulesen
Beginne mit dem Gesamtergebnis und prüfe anschließend, wie die Untergruppen gebildet werden. Umfasst eine Kategorie nur wenige Antworten, kann ein scheinbarer Unterschied instabil sein und keine Schlagzeile rechtfertigen. Mache aus einem Zusammenhang auch keine kausale Erklärung: Dass zwei Antworten gemeinsam auftreten, beweist nicht, dass die eine die andere verursacht. Wenn du statistische Unsicherheit angibst, stelle sicher, dass Methode und Studiendesign ihre Berechnung ermöglichen. Bei nicht probabilistischen Stichproben lässt sich die übliche Fehlermarge einer Zufallsstichprobe nicht einfach übernehmen.
- Gib für jeden Prozentwert die Zahl der zugrunde liegenden Antworten an, besonders bei Kreuztabellen und Untergruppen.
- Unterscheide explorative Ergebnisse von bestätigenden Schlussfolgerungen.
- Wähle nicht nur die Auswertung mit der eindrucksvollsten Zahl aus, ohne offenzulegen, dass mehrere Vergleiche untersucht wurden.
- Prüfe, ob Rundungen, Nenner und Diagramme mit den Originaldaten übereinstimmen.
Veröffentliche Methodik, Grenzen und Unsicherheit
Jedes Ergebnis braucht Kontext, damit andere verstehen können, was es misst und inwieweit es sich verallgemeinern lässt. Die Methodik ist keine beiläufige Fußnote, sondern Teil der Aussage. Nenne, wer die Studie in Auftrag gegeben und durchgeführt hat, wann die Antworten erhoben wurden, wie die Stichprobe rekrutiert wurde und welche relevanten Einschränkungen bestehen. Beruht eine Zahl ausschließlich auf Teilnehmenden einer offenen Umfrage, sage das klar und vermeide, sie als Meinung der gesamten Bevölkerung zu beschreiben.
- Nenne zusammen mit dem Ergebnis die Zielpopulation, die Stichprobengröße und den Erhebungszeitraum.
- Erläutere gegebenenfalls die Erhebungsmethode, Rekrutierung, Gewichtungen und Ausschlüsse.
- Beschreibe konkrete Einschränkungen, etwa eine Gelegenheitsstichprobe oder eine unzureichende Abdeckung bestimmter Gruppen.
- Gib Intervalle oder andere Unsicherheitsmaße nur dann an, wenn sie zum Studiendesign passen und korrekt berechnet wurden.
Bereite Materialien vor, die eine Überprüfung und Zitierung ermöglichen
Erleichtere die redaktionelle Arbeit, ohne aus den Daten eine nicht überprüfbare Behauptung zu machen. Eine klare Zusammenfassung, eine Ergebnistabelle und ein Methodenblatt verringern Mehrdeutigkeiten. Gib die genaue Frage und die zugehörigen Antwortoptionen für jedes Ergebnis an: Eine Paraphrase kann die Bedeutung verändern. Halte eine Kontaktperson bereit, die die Methode erläutern kann, aber vermittle nicht den Eindruck, eine Redaktion müsse eine vorgefertigte Schlagzeile übernehmen.
- Stelle den genauen Wortlaut der Frage, die Berechnungsgrundlage und das zitierfähige Ergebnis bereit.
- Stelle, sofern praktikabel und sicher, herunterladbare Tabellen oder aggregierte Daten zur Verfügung.
- Trenne das beobachtete Ergebnis klar von der Interpretation oder Empfehlung der Marke.
- Bewahre datierte Versionen des Fragebogens, der Methodik und der verbreiteten Materialien auf.
Häufige Fragen
Was macht eine Umfrage für Digital PR nützlich?+
Sie beantwortet eine relevante Frage mit einem geeigneten Studiendesign, einem überprüfbaren Ergebnis und klar erläutertem methodischem Kontext. Das redaktionelle Interesse hängt auch vom Thema, vom Zeitpunkt und vom Urteil der jeweiligen Redaktion ab. Prozentwerte allein garantieren keine Berichterstattung.
Ist eine große Stichprobe automatisch repräsentativ?+
Nein. Eine große Stichprobe behebt nicht von selbst Verzerrungen durch die Auswahl, fehlende Antworten oder eine unzureichende Abdeckung der Zielpopulation. Entscheidend ist, wie die Teilnehmenden rekrutiert wurden und welche Schlussfolgerungen die Methode zulässt.
Kann ich bei jeder Umfrage eine Fehlermarge angeben?+
Das solltest du nicht automatisch tun. Für die üblichen Berechnungen der Fehlermarge gelten Stichprobenannahmen, die zum Beispiel bei einer Gelegenheitsstichprobe oder einer offenen Umfrage möglicherweise nicht erfüllt sind. Lässt sich die Fehlermarge aufgrund des Studiendesigns nicht begründet berechnen, solltest du die Einschränkung erläutern, statt eine irreführende Zahl anzugeben.
Muss eine eigene Umfrage als gesponserter Inhalt gekennzeichnet werden?+
Nicht unbedingt. Eine von einer Marke beauftragte Studie kann als redaktionelle Ressource angeboten werden. Das bedeutet jedoch weder, dass eine Veröffentlichung garantiert ist, noch, dass es sich um bezahlte Berichterstattung handelt. Umfasst die Verbreitung eine Gegenleistung, muss ihr Charakter klar sein; außerdem empfiehlt es sich, die geltenden Kennzeichnungsvorschriften zu prüfen. Google sieht Attribute wie sponsored für Werbe- oder gesponserte Links sowie in bestimmten Fällen nofollow vor.
Welche Quellen sollte ich bei der Planung der Verbreitung heranziehen?+
Zu Suchpraktiken und zur Kennzeichnung von Links solltest du die Dokumentation Google Search Essentials, die Richtlinien von Google Search gegen Spam und den Leitfaden Qualify outbound links konsultieren: developers.google.com/search/docs/essentials, developers.google.com/search/docs/essentials/spam-policies und developers.google.com/search/docs/crawling-indexing/qualify-outbound-links. Diese Leitfäden ersetzen weder redaktionelles Urteilsvermögen noch die geltenden Pflichten bei Kooperationen.
Quellen und Referenzen
- Google Search Essentials — Google Search Central
- Spam policies for Google web search — Google Search Central
- Qualify outbound links — Google Search Central