Mit einer Umfrage kann ein Team vielen Menschen dieselben Fragen stellen – doch der Fragebogen selbst ist nur der sichtbarste Teil der Arbeit. Zu entscheiden, wessen Antworten gebraucht werden, diese Personen zu erreichen und nachzuvollziehen, wer tatsächlich geantwortet hat, ist genauso wichtig wie der Feinschliff am Formular. Eine noch so gut formulierte Umfrage, die an die falsche Zielgruppe geht, beantwortet am Ende trotzdem die falsche Frage.
Umfrageforschung sammelt mithilfe von Fragen Informationen von einer definierten Gruppe – meist so einheitlich, dass sich die Antworten vergleichen lassen. Sie kann berichtetes Verhalten, Erfahrungen und Einstellungen erfassen und vorgegebene Antwortoptionen mit Freitextfeldern für eigene Worte kombinieren.
Klären, was eine Umfrage leisten kann
Umfragen sind dann nützlich, wenn das Team eine Frage so formulieren kann, dass die Teilnehmenden sie verstehen und aus ihrer eigenen Erfahrung heraus beantworten können. Sie können zeigen, wie sich Antworten in einer Stichprobe verteilen, Zusammenhänge aufdecken und Kennzahlen über die Zeit verfolgen. Weniger geeignet sind sie, um komplexe Abläufe zu entschlüsseln, die den Befragten bei der Ausführung kaum bewusst waren.
Nehmen wir als Beispiel ein fiktives Team, das abgebrochene Berichts-Exporte untersucht. Eine Umfrage könnte kürzliche Nutzer fragen, was sie eigentlich erstellen wollten und ob sie auf Probleme gestoßen sind. Beobachtet man jemanden beim Export in einem Usability-Test, fällt vielleicht ein übersehenes Bedienelement auf, das der Person selbst gar nicht in den Sinn gekommen wäre. Beide Methoden liefern unterschiedliche Erkenntnisse – keine von ihnen muss die gesamte Untersuchung allein tragen.
Fragen zu künftigem Verhalten verlangen besondere Zurückhaltung. Menschen können zwar angeben, ein Abo abschließen zu wollen – diese Antwort ist aber noch kein tatsächlicher Kauf. Betrachten Sie die Lücke dazwischen als etwas, das man untersuchen muss, statt sie durch optimistische Formulierungen wegzudiskutieren.
Zielgruppe definieren, bevor der Kanal gewählt wird
Eine In-Product-Einladung erreicht Menschen, die das Produkt aktuell nutzen. Eine E-Mail an zahlende Admins verfehlt womöglich die Kolleginnen und Kollegen, die tagtäglich damit arbeiten. Ein Panel kann über den eigenen Kundenstamm hinausgehen, aber Kriterien und Rekrutierung bestimmen letztlich, für welche Grundgesamtheit die Ergebnisse gelten.
Legen Sie Zielgruppe und Auswahlverfahren vor Beginn der Feldphase fest. Wenn die Studie Rückschlüsse auf eine breitere Population zulassen soll, planen Sie Stichprobe und Auswertung entsprechend: Einfach nur mehr leicht erreichbare Personen zu befragen, macht noch keine repräsentative Stichprobe. Die Best Practices der AAPOR bieten eine gute Orientierung für die Planung des gesamten Prozesses – von der Rekrutierung über das Pretesting bis hin zu transparenter Berichterstattung.
Den Fragebogen erstellen und testen
Gutes Fragebogendesign beginnt mit der Entscheidung, die durch die Studie gestützt werden soll. Nutzen Sie klare Zeiträume, vermeiden Sie es, zwei Aspekte in eine Frage zu packen, und bieten Sie Antwortoptionen an, die zur Lebensrealität der Zielgruppe passen. Eine offene Frage kann wertvolle neue Erklärungen liefern – eine lange Reihe von Freitextfeldern verlangt den Teilnehmenden jedoch oft mehr Mühe ab, als sie investieren möchten.
Testen Sie den gesamten Ablauf im Pilotversuch – von der Einladung bis zum Absenden. Prüfen Sie, wie die Fragen verstanden werden, ob Verzweigungen funktionieren und wie sich das Formular auf dem Smartphone verhält. Die Umfrage-Tools von Ballpark unterstützen Sie bei der Datenerhebung, während der Pilotlauf sicherstellt, dass die erstellte Studie auch wirklich startklar ist.
Ergebnisse samt ihrer Grenzen darstellen
Stellen Sie den genauen Wortlaut der Fragen, den Erhebungszeitraum, die Rekrutierungsmethode und die Fallzahl direkt neben die Ergebnisse. Machen Sie bei jedem Prozentwert deutlich, wer zur Basis gehört – insbesondere dann, wenn Verzweigungen oder übersprungene Fragen diese verändern. Analysieren Sie fehlende Antworten genau, statt sie stillschweigend als neutrale Meinung zu werten.
Ein Umfrageergebnis sollte den Lesenden sowohl die Erkenntnis als auch die Gruppe, die dahintersteht, verständlich machen. Diese Klarheit erleichtert die Entscheidung, ob direkt gehandelt, eine bestimmte Gruppe vertieft untersucht oder zunächst anderes Feedback eingeholt werden sollte, bevor Änderungen umgesetzt werden.