Actions

How to design a good survey (guide)/de: Difference between revisions

From LimeSurvey Manual

(Updating to match new version of source page)
(Updating to match new version of source page)
 
(176 intermediate revisions by 4 users not shown)
Line 1: Line 1:
<languages />__TOC__
<languages />__TOC__


'''A Simple Guide to Making a Good Survey.'''
Eine einfache Anleitung zur Erstellung einer guten Umfrage.


Mit LimeSurvey ist es einfach, sehr schnell eine Umfrage zusammenzustellen. Leider ist es dadurch auch sehr einfach, eine schlechte Umfrage zusammenzustellen.
LimeSurvey macht es einfach, eine Umfrage sehr schnell zusammenzustellen. Leider macht das auch das Zusammenstellen einer schlechten Umfrage sehr einfach.


Auf dieser Seite finden Sie eine einfache Anleitung, um eine Umfrage zusammenzustellen, die nicht nur für Ihre Teilnehmer leicht zu beantworten ist, sondern auch sinnvolle Antworten liefert.
Auf dieser Seite finden Sie eine einfache Anleitung, um eine Umfrage zusammenzustellen, die nicht nur für Ihre Teilnehmer leicht zu beantworten ist, sondern auch sinnvolle Antworten liefert.


Dieser Blog bietet auch eine weitere nützliche Liste von [http://www.limesurvey-consulting.com/survey-design-tipps-tricks "Survey Design Tipps & Tricks"] (auf Englisch)
<div class="mw-translate-fuzzy">
Dieser Blog bietet auch eine weitere nützliche Liste von [https://survey-consulting.com/survey-design-tips-tricks/ "Survey Design Tipps & Tricks"] (auf Englisch)
</div>


= Vor einer Umfrage =
==Bevor Sie eine Umfrage durchführen==


Einige wichtige Fragen müssen vor der Gestaltung eines Fragebogens beantwortet werden - und zwar schon bevor man sich entscheidet, ob ein Fragebogen der richtige Weg ist.
Einige wichtige Fragen müssen vor der Gestaltung eines Fragebogens beantwortet werden - und zwar schon bevor man sich entscheidet, ob ein Fragebogen der richtige Weg ist.


<u>What is it that you really want to find out with your research?</u>
<u>Was ist es, was Sie mit Ihrer Befragung wirklich herausfinden wollen?</u>


Based on that:
Wenn Sie diese Frage beantwortet haben, stellen Sie Folgendes:
*'''Will a survey help me for this problem? '''
*'''Wird eine Umfrage mir dabei helfen, die Informationen zu erhalten, die ich für meine Forschung benötige?'''
*'''How the survey can help me to answer the problem?'''
*'''Welche Personen sind die richtigen, um an der Umfrage teilzunehmen?'''
*'''Who are the right people to ask?'''
*'''Wie kann ich sicherstellen, dass ich die richtigen Leute erreiche?'''
*'''How can you reach them?'''
*'''Was ist der beste Weg, den Teilnehmern der Umfrage dabei zu helfen, die Fragen vollständig zu verstehen (damit die erhaltenen Informationen korrekt/nützlich sind)?'''
*'''What is needed to make them understand your questions?'''
*'''Welche statistischen Methoden (zur Datenanalyse) möchte/muss ich gegebenenfalls auf die Daten anwenden, nachdem diese erfasst wurden?'''
*'''Which - if any - are the statistical methods you want/need to use on the data?'''


These are just a few of the issues you need to be clear about to even decide whether LimeSurvey is the right tool for you. LimeSurvey is great for fully structured (you know all the questions you might need to ask before you start the interview), standardized (everyone gets more or less the same questionnaire), mostly quantitative (it is mainly about numbers or questions with predefined answers) questionnaires which are collected online.


To some extent you can of course vary from this: You can use LimeSurvey to collect answers to some sorts of phone interviews. You can use LimeSurvey to collect qualitative data, e.g. by using text questions.
Dies sind nur einige der Fragen, auf die Sie klare Antworten benötigen, wenn Sie entscheiden, ob LimeSurvey das richtige Tool für Sie ist.  


But at some point you might get to the conclusion that other research methods are more suitable.
LimeSurvey eignet sich hervorragend für vollständig strukturierte (Sie kennen alle Fragen, die Sie möglicherweise stellen müssen, bevor Sie mit dem Interview beginnen), standardisierte (jeder erhält mehr oder weniger den gleichen Fragebogen) und überwiegend quantitative (es geht hauptsächlich um Zahlen oder Fragen mit vordefinierten Antworten) Fragebögen, die online gesammelt werden.


==Structuring a questionnaire.==


To decide in which order to ask questions and how to group them, there  some aspects to consider, e.g.
Bis zu einem gewissen Grad kann man hiervon natürlich abweichen. Sie können LimeSurvey verwenden, um Antworten auf einige Arten von Telefoninterviews zu sammeln. Sie können LimeSurvey auch zur Erhebung qualitativer Daten verwenden, beispielsweise durch die Verwendung von Textfragen.


If possible, start with questions that are easy to answer and which all participants are comfortable answering. Often these will be screening questions anyway, i.e. questions you need to ask to find out whether you are asking the right people (use [[Setting conditions|conditions]] and/or [[Survey quotas|quotas]] to deal with these screening questions).
Doch irgendwann kommen Sie vielleicht zu dem Schluss, dass andere Forschungsmethoden besser geeignet sind.


Putting these "ice breaker" questions at the beginning might help to avoid participants leaving your survey, as people might be less likely to terminate once they have already put some work into answering the questionnaire.
==Strukturierung eines Fragebogens==


<syntaxhighlight lang="php" enclose="div">Which of the following fruit do you like?
Um zu entscheiden, in welcher Reihenfolge Fragen gestellt und wie sie gruppiert werden sollen, müssen einige Aspekte berücksichtigt werden.
#Apples   ()
#Bananas  ()
#Cherries ()


(single choice)
Beginnen Sie nach Möglichkeit mit Fragen, die leicht zu beantworten sind und die alle Teilnehmer problemlos beantworten können. Häufig handelt es sich hierbei um Screening-Fragen, d. h. um Fragen, die Sie stellen müssen, um herauszufinden, ob Sie die richtigen Personen fragen (verwenden Sie [[Bedingungen festlegen|Bedingungen]] und/oder [[Umfragequoten|Quoten]], um diese Screening-Fragen durchzuführen).


You can use Conditions, to make next question appear about cherries, if participant chose answer ''cherries''.
Wenn Sie diese Art von Fragen an den Anfang stellen, können Sie vermeiden, dass Teilnehmer Ihre Umfrage verlassen, bevor sie sie abgeschlossen haben, da die Wahrscheinlichkeit geringer ist, dass die Teilnehmer abbrechen, wenn sie bereits einige Arbeit in die Beantwortung dieser Einleitungs-/Screening-Fragen gesteckt haben.


Why do you preffer cherries?
'''Beispiele''':
#They are tasty
<syntaxhighlight lang="php"> Welche der folgenden Früchte magst du?
#I love the color
#Äpfel ()
#They are healthy
#Bananen ()
#They are juicy
#Kirschen ()
#I love cherry pie.


(multi choice (or single choice, depends if you need exact data) question)
(Einzelauswahl)


How much do you like cherries?
Sie können Bedingungen verwenden, um die nächste Frage zu Kirschen anzuzeigen, wenn der Teilnehmer „Kirschen“ ausgewählt hat.
#1) Not much more than other fruit
#2) Like them pretty much, more than other fruit
#3) It's one of my favourite fruits!
#4) I ADORE CHERRIES!


(single choice)
Warum bevorzugst du Kirschen?
#Sie sind lecker
#Ich liebe die Farbe
#Sie sind gesund
#Sie sind saftig
#Ich liebe Kirschkuchen


Do you know any recipes related to cherries?
(Multi-Choice-Frage (oder Single-Choice-Frage, hängt davon ab, ob Sie genaue Daten benötigen))


[textfield]
Wie sehr magst du Kirschen?
#1) Nicht viel mehr als andere Früchte
#2) Mag sie mehr als andere Früchte
#3) Es ist eine meiner Lieblingsfrüchte!
#4) Ich LIEBE KIRSCHEN!
 
(Einzelauswahl)
 
Kennt ihr Rezepte mit Kirschen?
 
[Textfeld]


</syntaxhighlight>
</syntaxhighlight>


Above is an example of easy attractive questions followed by main question.
Oben finden Sie ein Beispiel für leicht zu beantwortende Einstiegsfragen, gefolgt von der Hauptfrage.


The point was to gather recipes related to cherries, apples and bananas.
Ziel war es, Rezepte mit Kirschen, Äpfeln und Bananen zu sammeln.


On the other hand.
Wenn Sie andererseits schwer zu beantwortende Fragen stellen müssen, könnten Sie darüber nachdenken, für jede Frage oder Fragengruppe unterschiedliche Seiten zu verwenden und diese schwer zu beantwortenden Fragen ganz am Ende zu platzieren. Sollten sich Teilnehmer dazu entschließen, an der Umfrage nicht teilzunehmen, werden auf diese Weise zumindest ihre bisherigen Antworten gespeichert.


If you need to ask problematic questions, you might think about using different pages (one page per group or one page per question) and putting theses questions at the very end. By this, if participants decide to interrupt, at least their former answers are saved.
Was die Struktur betrifft, sollten Sie noch etwas anderes bedenken: Vermeiden Sie Verzerrungen, die durch den Fragebogen selbst entstehen.


Another aspect for structure is to avoid biases introduced by the questionnaire itself.
Beispielsweise gibt es in der Marktforschung Konzepte, die ungestützte und unterstützte Fragen erfordern.


For example, in market research there are concepts which require unaided and aided questions. An example for an unaided question would be:
Ein Beispiel für eine nicht ungestützte Frage wäre:


<syntaxhighlight lang="php" enclose="div">"Which brands of chocolate do you know?"
<syntaxhighlight lang="php">„Welche Schokoladenmarken kennen Sie?


(followed by an empty text box) </syntaxhighlight>
(gefolgt von einem leeren Textfeld)</syntaxhighlight>


The corresponding example for an aided question would be:
Das Folgende ist ein Beispiel für eine unterstützte Frage:


<syntaxhighlight lang="php" enclose="div"> "Which of the following brands of chocolate do you know?"
<syntaxhighlight lang="php">„Welche der folgenden Schokoladenmarken kennen Sie?


(followed by a list of brands (multiple choice))</syntaxhighlight>
(gefolgt von einer Liste der Marken (Multiple Choice))</syntaxhighlight>


If you would like to include both into the same questionnaire, you should again make sure to put them on different pages and put the unaided version before the aided on - otherwise you will basically teach or at least actively remind participants about existing brands which will invalidate your results for a following unaided question.
Wenn Sie, wie bereits erwähnt, beide Arten von Fragen (ungestützte und nicht unterstützte) in denselben Fragebogen aufnehmen möchten, sollten Sie darauf achten, diese auf unterschiedlichen Seiten zu platzieren und die nicht unterstützten Fragen vor den unterstützten Fragen zu platzieren. Wenn Sie eine unterstützte Frage vor eine nicht unterstützte Frage stellen, könnte dies unbeabsichtigt die Antwort der Teilnehmer beeinflussen und Ihre Ergebnisse ungültig machen.


==Individual questions==
==Einzelne Fragen==


Questions should be non-suggestive. So "What is your opinion about LimeSurvey?" is an acceptable question while "Don't you agree that LimeSurvey is a really great tool?" is most likely not.
Fragen sollten nicht suggestiv sein. „Was halten Sie von LimeSurvey?“ ist eine akzeptable (nicht suggestive) Frage, während „Sind Sie nicht der Meinung, dass LimeSurvey ein wirklich tolles Tool ist?“ eine suggestive Frage ist.


Example:
Weitere Beispiele und Vorschläge zur Formulierung von Fragen:


People may say '''"yes"''' to donate money if you ask the questions this way
Die Leute können „Ja“ zur Geldspende sagen, wenn ihnen folgende Fragen gestellt werden:
* ''Do you love nature?''
* „Liebst du die Natur?
* ''Will you donate money to help the river?''
* „Werden Sie Geld spenden, um dem Fluss zu helfen?


But probably will say '''"no"''' if you ask the questions this way:
* ''Is lack of money a problem for you?''
* ''Will you donate money to help the river?''


To avoid this kind of thing, try to have your questions go:
Sie werden wahrscheinlich „Nein“ sagen, wenn ihnen folgende Fragen gestellt werden:
*from the least sensitive to the most sensitive
* „Ist Geldmangel ein Problem für Sie?“
*from the more general to the more specific
* „Werden Sie Geld spenden, um dem Fluss zu helfen?“
*from questions about facts to questions about opinions


Also, a survey question can be:
*'''Open-ended''' (the person can answer in any way they want), or
*'''Closed-ended''' (the person chooses from one of several options)


Closed ended questions are much easier to total up later on, but may stop people giving an answer they really want.
Um die richtigen Antworten zu erhalten, ordnen Sie Ihre Fragen wie folgt:
*von der am wenigsten sensiblen Frage zur höchsten Sensibilität
*von allgemeiner zu spezifischerer
*von Fragen zu Fakten bis hin zu Fragen zu Meinungen


Example: "''What is your favorite color?''"
Eine Umfragefrage kann auch wie folgt lauten:
*'''Offenes Ende''' (die Person antwortet in ihren eigenen Worten) oder
*'''Geschlossenes Ende''' (die Person wählt aus einer begrenzten Anzahl von Optionen)


'''Open-ended''': Someone may answer "dark fuchsia", in which case you will need to have a category "dark fuchsia" in your results.
Geschlossene Fragen sind viel einfacher zu analysieren, erlauben es den Befragten jedoch möglicherweise nicht, die Antwort zu geben, die sie wirklich wollen.


'''Closed-ended''': With a choice of only 12 colors your work will be easier, but they may not be able to pick their exact favorite color.
Beispiel: „Was ist deine Lieblingsfarbe?“


Look at each of your questions and decide if they should be open-ended or closed ended (take the opportunity to rewrite any questions, too)
'''Offenes Ergebnis''': Jemand antwortet möglicherweise mit „dunkles Fuchsia“. In diesem Fall müssen Ihre Ergebnisse eine Kategorie „dunkles Fuchsia“ enthalten.


Example: "''What do you think is the best way to clean up the river''?"
'''Geschlossenes Ergebnis''': Mit einer Auswahl von nur 12 Farben wird Ihre Arbeit einfacher, aber die Befragten sind möglicherweise nicht in der Lage, ihre genaue Lieblingsfarbe auszuwählen.


Make it '''Open-ended''': the answers won't be easy to put in a table or graph, but you may get some good ideas, and there may be some good quotes for your report.
Überlegen Sie sich jede Frage sorgfältig und entscheiden Sie, ob sie offen oder geschlossen sein soll. Wenn Sie tiefere Einblicke in die Antworten benötigen, verwenden Sie offene Fragen. Ist dies nicht der Fall, können geschlossene Fragen verwendet werden.


Example: "''How often do you visit the river?''"
Beispiel (offen): „Was ist Ihrer Meinung nach der beste Weg, den Fluss zu säubern?


Make it '''Closed-ended''' with the following options:
Machen Sie es „offen“: Die Antworten lassen sich vielleicht nicht einfach in eine Tabelle oder Grafik eintragen, aber Sie gewinnen vielleicht einen tiefen Einblick in die Gefühle und Vorstellungen der Menschen über die Reinigung des Flusses oder der Umwelt und verwenden direkte Zitate für ihre Berichterstattung.
*Nearly every day
*At least 5 times a year
*1 to 4 times a year
*Almost never


You will be able to present this data in a neat bar graph.
Beispiel (geschlossen): „Wie oft besuchen Sie den Fluss?“


When working with multiple choices or single choice questions make sure to choose the right one and formulate both question and answers appropriately.
Machen Sie es „geschlossen“ mit den folgenden Optionen:
*Fast jeden Tag
*Mindestens 5 Mal im Jahr
*1 bis 4 Mal im Jahr
*Fast nie


'''For example:'''
Sie können diese Daten in einem übersichtlichen Balkendiagramm darstellen.


<syntaxhighlight lang="php" enclose="div">Which of the following fruit do you like?
Achten Sie bei der Arbeit mit Multiple-Choice- oder Single-Choice-Fragen darauf, den passenden Fragetyp auszuwählen und sowohl Fragen als auch Antworten angemessen zu formulieren.
#Apples   ()
#Bananas  ()
#Cherries ()</syntaxhighlight>


is a typical multiple choice question, as you can like several of those - in contrary "Which of the following fruit do you prefer?" is a single choice question.
'''Zum Beispiel:'''


Both fruit examples have been formulated to make clear that it is only about the fruit listed as answers. If your question would be "Which is you favorite fruit?" you should either have a really exhaustive list of fruit or - more likely, use LimeSurvey's setting to add an "other" field. More generally, answer options in most cases need to be complete, mutually exclusive and definite.
<syntaxhighlight lang="php"> Welche der folgenden Früchte magst du?
#Äpfel ()
#Bananen ()
#Kirschen ()</syntaxhighlight>


If you have multiple or single choice questions with a lot of options for answers, you need to be aware that this might introduce another bias, as participants are likely to pay more attention to the very first options than to those in the middle. LimeSurvey offers a nice option to randomize the order of questions and to some extend diminish this problem.
Das Obige ist eine typische Multiple-Choice-Frage, da Sie mehrere Elemente der Liste mit „Gefällt mir“ markieren können. Andererseits: „Welche der folgenden Früchte bevorzugen Sie am liebsten?“ ist eine Single-Choice-Frage.


==What makes a good survey?==
Beide Fruchtbeispiele wurden formuliert, um deutlich zu machen, dass es Ihnen nur um die aufgeführten Früchte geht. Wenn Sie fragen würden: „Welches ist Ihre Lieblingsfrucht?“, sollten Sie entweder eine wirklich umfassende Obstliste haben oder, was wahrscheinlicher ist, die Einstellung von LimeSurvey verwenden, um ein „anderes“ Feld hinzuzufügen. Generell gilt, dass Antwortmöglichkeiten in den meisten Fällen vollständig, sich gegenseitig ausschließend und eindeutig sein müssen.


There are 3 features of a survey which might make it useful:
Wenn Sie Multiple- oder Single-Choice-Fragen mit vielen Optionen zur Auswahl haben, müssen Sie sich darüber im Klaren sein, dass dies zu einer weiteren Verzerrung führen kann, da die Teilnehmer ihre Aufmerksamkeit wahrscheinlich auf die allerersten Optionen richten und nicht auf die mittleren. LimeSurvey bietet eine großartige Option, die Reihenfolge der Fragen zufällig zu bestimmen und dieses Problem bis zu einem gewissen Grad zu beseitigen.
# The questions are clear and precise, collectively allowing for detailed, unambiguous and meaningful answers.
# All predefined answers provided and their formats are appropriate to the question.
# There is room for people to add additional information if they need.


Adding to that, always keep the user experience in mind. Reading, scrolling and clicking are tiring activities, so:
==Was macht eine gute Umfrage aus?==
# Avoid any unnecessary question
# Use conditions to avoid asking questions not relevant for a specific participant
# Keep questions and answers short and easily readable - use appropriate markup
# Think about the trade-off between scrolling and clicking. Display everything on one page for short questionnaires (5-15 questions, depending on question complexity). Use groups wisely for longer questionnaires, i.e. group questions comprehensibly; use group descriptions to give a clear statement about the topic of the following questions.
# Avoid confusing participants with different scales, i.e. limit the amount of different scales types, scale scopes and different scales descriptions as much as possible. Try not to change the direction of scales. (There are some methodological exceptions).
#For rating scales it might be useful to use an even number of rating options so the user has to decide for a certain direction (see below).


<syntaxhighlight lang="php" enclose="div">Example for good answer scales:
Es gibt drei Merkmale einer Umfrage, die dazu beitragen, die richtigen Antworten zu erhalten, die für genauere Beurteilungen erforderlich sind:
# Die Fragen sind klar und präzise und ermöglichen insgesamt detaillierte, eindeutige und aussagekräftige Antworten.
# Es werden alle vordefinierten Antworten bereitgestellt und ihre Formate sind für die Frage geeignet.
# Es besteht die Möglichkeit, bei Bedarf zusätzliche Informationen hinzuzufügen.


1. Very good
Denken Sie außerdem immer an das Benutzererlebnis. Lesen, Scrollen und Klicken sind ermüdende Tätigkeiten. Also:
# Vermeiden Sie unnötige Fragen.
# Verwenden Sie Bedingungen, um zu vermeiden, dass Fragen gestellt werden, die für einen bestimmten Teilnehmer nicht relevant sind.
# Halten Sie Fragen und Antworten kurz und leicht lesbar – verwenden Sie geeignete Auszeichnungen.
# Denken Sie über den Kompromiss zwischen Scrollen und Klicken nach. Zeigen Sie bei kurzen Fragebögen (5-15 Fragen, je nach Komplexität der Frage) alles auf einer Seite an. Setzen Sie Gruppen bei längeren Fragebögen sinnvoll ein, d.h., gruppieren Sie Fragen verständlich. Verwenden Sie Gruppenbeschreibungen, um eine klare Aussage zum Thema der folgenden Fragen zu treffen.
# Vermeiden Sie eine Verwechslung der Teilnehmer mit unterschiedlichen Skalen, d.h., beschränken Sie die Anzahl unterschiedlicher Skalentypen, Skalenbereiche und unterschiedlicher Skalenbeschreibungen so weit wie möglich. Versuchen Sie, die Richtung der Skalen nicht zu ändern. (Es gibt einige methodische Ausnahmen).
#Für Bewertungsskalen kann es sinnvoll sein, eine gerade Anzahl von Bewertungsmöglichkeiten zu verwenden, um den Befragten die Entscheidungsfindung zu erleichtern (siehe unten).


2. Good
<syntaxhighlight lang="php">Beispiel für Antwortskalen, wie „gut“ etwas ist:


3. Quite good
1. Sehr gut


4. Not that good
2. Gut


5. Bad
3. Ziemlich gut


6. Very bad
4. Nicht so gut


Example for bad answer scales:
5. Schlecht


1. Good
6. Sehr schlecht
 
Beispiel für Antwortskalen, wie „schlecht“ etwas ist:
 
1. Gut


2. Fair
2. Fair


3. Bad</syntaxhighlight>
3. Schlecht</syntaxhighlight>


The best way to start designing a survey is to take a second to imagine your ideal feedback. It goes without saying that meaningful responses are the most useful ones, so try to create questions which invite these answers.
Der beste Weg, mit der Gestaltung einer Umfrage zu beginnen, besteht darin, sich einen Moment Zeit zu nehmen und sich Ihr ideales Feedback vorzustellen. Es versteht sich von selbst, dass aussagekräftige Antworten am nützlichsten sind. Versuchen Sie daher, Fragen zu erstellen, die zu diesen Antworten einladen.


How can you go about that? The best method is to split up all the areas and decide on what information you need.
Wie können Sie das angehen? Die beste Methode besteht darin, alle Bereiche zu trennen und zu entscheiden, welche Informationen Sie benötigen.


For example, imagine you held an event, open to the public, and needed to get some general feedback about the event.
Stellen Sie sich zum Beispiel vor, Sie veranstalten eine öffentlich zugängliche Veranstaltung und benötigen allgemeines Feedback zu der Veranstaltung.


A "bad" survey might be similar to the following:
Die folgende Umfrage ist ein Beispiel für eine Umfrage, die möglicherweise nicht ausreicht, um nützliche Antworten zu erhalten:


<syntaxhighlight lang="php" enclose="div">Did you enjoy the Event?
<syntaxhighlight lang="php">Hat Ihnen die Veranstaltung gefallen?


( ) Yes
( ) Ja


( ) No
( ) Nein


How good was the wifi?
Wie gut war das WLAN?


1 2 3 4 5 6 7 8 9 10
1 2 3 4 5 6 7 8 9 10
Line 212: Line 220:
( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )
( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )


Did you arrive OK?
Hatten Sie Probleme, zur Veranstaltung zu kommen?


( ) Yes
( ) Ja


( ) No
( ) Nein


Was the provided map OK?
War die bereitgestellte Karte hilfreich?


( ) Yes
( ) Ja


( ) No
( ) Nein


Were how did you feel about the mixture of speakers?
Wie empfanden Sie die Mischung der Redner?


( ) Very sad ( ) Sad( ) Neutral ( ) Happy ( ) Very Happy</syntaxhighlight>
( ) Sehr traurig ( ) Traurig ( ) Neutral ( ) Glücklich ( ) Sehr glücklich</syntaxhighlight>


==Matrix questions.==
Für das obige Szenario wären Matrixfragen die bessere Wahl.


That may be a bit of a generalisation, but its a good rule to live by.
==Matrixfragen.==
Anything that involves a scale of any sort should be avoided
unless you want an answer that can be measured on a scale, like age, time (maybe) or quantities.
Similarly, a matrix of compulsory questions can be a bit of a deterrent for your audience as not only are they badly structured,
but they don't allow for any extra information.


Chances are if someone is completing your survey they want to give feedback, and if they don't think they can share anything useful they'll just close the window and move on.
Generell gilt, dass Skalen nur für Fragen zu Alter, Zeit (vielleicht) oder Mengen verwendet werden sollten. Matrixfragen müssen richtig formuliert sein, um ein möglichst nützliches Feedback zu erhalten. Bedenken Sie, dass eine Matrix aus Pflichtfragen für Ihr Publikum etwas abschreckend sein kann, denn wenn sie nicht richtig strukturiert ist, können keine zusätzlichen Informationen gesammelt werden.


So what's wrong with the survey above?
Wenn jemand an Ihrer Umfrage teilnimmt, ist es wahrscheinlich, dass er Feedback geben möchte, und wenn er glaubt, nichts Nützliches mitteilen zu können, schließt er einfach das Fenster und macht weiter.


Let's look at each question step by step.
Was ist also falsch an der obigen Umfrage?


Question 1 doesn't really achieve anything. Imagine receiving 100 "no" responses. Firstly you'd be sad, but secondly you would have absolutely nothing to do with the information. We'll look at a possible improvement to this in a moment.
Schauen wir uns jede Frage einzeln an.


Question 2 is so bad it's painful. If we go back to our 3 steps, we see that the questions need to be clear and precise. I'm not an expert in Wifi but I'm fairly certain you don't measure it in "goods". What's more, it doesn't allow for a meaningful answer &ndash; What will you do with the knowledge that while 33% of people rated your wifi as being good, only 23% rated it as good? Point number 2 tells us that the predefined answers need to be appropriate to the question.
„Frage 1“ bringt nicht wirklich etwas. Stellen Sie sich vor, Sie erhalten 100 „Nein“-Antworten. Die Antwort allein gibt keinen Aufschluss darüber, warum dem Teilnehmer die Veranstaltung nicht gefallen hat. Sie würden sich über den Grund für die „Nein“-Antworten wundern und sich auch fragen, was Sie mit den Antworten machen sollen. Wir werden uns gleich mit einer möglichen Verbesserung befassen.


It's fairly obvious that a scale of 1 to 10 won't help you improve on the quality of your wifi. The real killer in this one is the need to have space for people to add additional information. How could someone report a specific problem?
„Frage 2“ ist schlimmer als die erste. Wenn wir auf die drei Merkmale einer guten Umfrage zurückkommen, sehen wir, dass die Fragen klar und präzise sein müssen. Ich bin kein WLAN-Experte, bin mir aber ziemlich sicher, dass es bessere Möglichkeiten gibt, dies zu messen. Darüber hinaus ermöglicht es keine sinnvolle Antwort auf eine Frage wie: „Was werden Sie tun, wenn Sie wissen, dass 33 % der Menschen Ihr WLAN als gut bewertet haben, gegenüber nur 23 %?“ Zu den 3 Merkmalen einer guten Umfrage gehört auch, dass die vordefinierten Antworten zur Frage passen müssen.


In this case? It's impossible. Surveys are all about finding out something you can work with or learn from.
Es ist ziemlich offensichtlich, dass die Verwendung einer Skala für diese Frage Ihnen nicht dabei hilft, die Qualität Ihres WLANs zu verbessern. Es besteht auf jeden Fall Bedarf, dass diese Frage Platz bietet, damit die Leute zusätzliche Informationen hinzufügen können. Wie könnte jemand ein bestimmtes Problem melden, ohne näher darauf eingehen zu können?


The next two questions have the same result &ndash; they provide a platform for people to say yes or no. And neither of those questions allow for detail. In a better survey, which we'll consider in a moment, you could learn particular problems from specific people.
In diesem Fall wäre es fast unmöglich, über genügend Informationen zu verfügen, um die Probleme, die der/die Teilnehmer mit dem WLAN hatten, richtig anzugehen. Bei Umfragen geht es darum, nützliche Informationen zu erhalten, mit denen Sie arbeiten oder aus denen Sie lernen können.


The final question is another painful one. Asking for the level of satisfaction about something is pretty much useless, as every person has different interests, and so everyone will likely have different opinions on each speaker. It's another example of where a range question is being used and shouldn't be.
„Fragen 3 und 4“ hätten die gleichen Ergebnisse wie die ersten beiden Fragen. Sie erlauben nur eine „Ja“- oder „Nein“-Antwort und bieten keine Möglichkeit, Details hinzuzufügen. Nach diesem Abschnitt geben wir Vorschläge zur Verbesserung dieser Art von Fragen.  


Have a look at the improved survey there.
„Frage 5“, die letzte Frage, ist ebenfalls unwirksam. Nach dem Grad der Zufriedenheit mit etwas zu fragen, ist nicht sehr sinnvoll, da jeder Mensch unterschiedliche Interessen hat und daher wahrscheinlich jeder eine andere Meinung über jeden Redner hat. Dies ist ein weiteres Beispiel dafür, dass eine „Skalen“-Frage verwendet wird, aber nicht verwendet werden sollte.


<syntaxhighlight lang="php" enclose="div">Did you make use of the in-house wifi?
Schauen Sie sich die verbesserte Umfrage unten an.


( ) Yes
<syntaxhighlight lang="php">Haben Sie das hauseigene WLAN genutzt?


( ) No
( ) Ja


Did you experience any problems?
( ) Nein


( ) No problems at all
Hatten Sie Probleme mit dem WLAN?


( ) A couple of small issues, nothing major
( ) Überhaupt keine Probleme


( ) One or two severe issues
( ) Ein paar kleine Probleme, nichts Großes


( ) The wifi was nearly totally unusable.
( ) Ein oder zwei schwerwiegende Probleme


If you experienced problems, could you briefly describe them? (Text field)
( ) Das WLAN war fast völlig unbrauchbar.


Did you arrive ok?
Wenn bei Ihnen Probleme aufgetreten sind, könnten Sie diese kurz beschreiben? (Textfeld)


( ) Yes
Hatten Sie Probleme, zur Veranstaltung zu kommen?


( ) No
( ) Ja


How did you come to our event?
( ) Nein


( ) Train
Wie sind Sie zu unserer Veranstaltung gekommen?


( ) Car
( ) Zug
 
( ) Auto


( ) Bus
( ) Bus


( ) Light Rail (IE Tube, Tram)
( ) Stadtbahn (IE Tube, Straßenbahn)
 
( ) Gehen


( ) Walk
Haben Sie die Karte von unserer Website verwendet?


Did you use the map from our website?
( ) Ja


( ) Yes
( ) Nein


( ) No
Wenn Sie sich die Karte angesehen haben, war sie detailliert genug?


If you looked at the map, was it detailed enough?
( ) Ja


( ) Yes
( ) Es gab mir eine ungefähre Vorstellung. Für mehr Details habe ich jedoch eine andere Karte verwendet.


( ) It gave me a rough idea, I used another map for more detail though
( ) Überhaupt nicht detailliert


( ) Not detailed at all.
Wenn Sie die Karte nicht verwendet haben, warum nicht?


If you didn't use the map, why not?
( ) Nicht genügend Details


( ) Not enough detail
( ) Ich habe stattdessen ein Navigationsgerät/Google Maps verwendet.


( ) I used a satnav/google maps instead
( ) Ich wusste nicht einmal, dass es existiert!


( ) I didn't even know it existed!
Waren die Referenten generell interessant? Haben Ihnen die Vorträge gefallen?


Generally speaking, were the speakers interesting? Did you enjoy the presentations?
( ) Fast alle waren interessant und sehr unterhaltsam


( ) Nearly all were interesting and thoroughly enjoyable
( ) Hauptsächlich unterhaltsam, aber eine Handvoll weniger interessanter Vorträge.


( ) Mainly enjoyable, but a handful of less interesting talks.
( ) Eine 50:50-Aufteilung


( ) A 50 &ndash; 50 split
( ) Eher langweilig als interessant


( ) More dull than interesting
( ) Habe nichts Interessantes gefunden


( ) Didn't find any interesting.
Bitte erläutern Sie Ihre Antwort auf die obige Frage. Fühlen Sie sich frei, darauf zu verweisen


Please elaborate on your answer to the question above. Feel free to reference any
bestimmte Personen/Gespräche. (Textfeld)


particular people/talks. (Text field)
Wenn wir das Vortragsangebot verbessern könnten oder Sie andere interessante Ideen dazu haben


If we could improve the range of talks, or you have any other interesting ideas regarding
Die Vorträge, listen Sie sie unten auf (Textfeld)


the talks, list them below (Text field)
Wenn Sie weitere Empfehlungen oder Ideen haben, listen Sie diese bitte unten auf. (Textfeld)</syntaxhighlight>


If you have any other recommendations or ideas, please list them below. (Text field)</syntaxhighlight>
Diese Umfrage ist zwar etwas länger, aber es ist viel einfacher, die Antworten zu beantworten und zu interpretieren. Wenn Sie zu jedem Thema zwei oder drei Fragen stellen, können Sie bei der Verarbeitung der Ergebnisse etwas mehr Analyse durchführen. Stellen Sie sich zum Beispiel vor, dass Sie von 30 Personen als Antwort auf die erste Umfragefrage erhielten, sie hätten Probleme, zur Veranstaltung zu kommen.


This survey may be a little longer, but it's a lot easier to both answer and interpret the answers from. Asking two or three questions about each of the topics means that when it comes to processing the results you can do a little more analysis. For example. Imagine, in response to the first survey you received 30 people saying they didn't arrive OK.
Das wären so viele Informationen gewesen, wie man aus den Ergebnissen herausholen konnte, aber mit den neuen Antworten wäre es möglich, abzuleiten, welche Transportmittel den Menschen Probleme bereiten. Darüber hinaus konnte man so sehen, ob die bereitgestellte Karte oder eine andere Form der Navigation genutzt wurde, und so gezielt Verbesserungen für die Zukunft anstreben.


This would have been as much information as you could possibly extract from the results, but with our new set of answers it would be possible to deduce which forms of transport presented people with trouble. What's more, you could go on to see whether they were using a provided map or another form, and use this to target improvements for the future.
„Bedenken Sie, dass der Benutzer nach 50 Fragen höchstwahrscheinlich mit dem Lesen aufhört.


''' Keep in mind, that after 50 questions, the user is most likely to not read the question anymore.'''
Weitere wichtige Ergänzungen sind die Textfeldfragen. Dadurch können Ihre Teilnehmer konkretes Feedback geben, aus dem Sie schöpfen können. Es ist eine gute Idee, diese nicht zur Pflicht zu machen, da sie die Leute möglicherweise davon abhalten, zu antworten.


Other important additions are the text field questions &ndash; these allow your audience to give specific feedback which you can draw from. It's a good idea to not make these compulsory though, as they may put people off answering.
Abschließend lässt sich sagen, dass Sie beim Schreiben einer Umfrage darauf abzielen sollten, eine Umfrage zu erstellen, in der spezifische Fragen gestellt werden, um nützlichere Informationen für die Analyse zu erhalten. Denken Sie auch daran, dass es hilfreich ist, ein paar zusätzliche Hintergrundinformationen zu sammeln, da diese zur besseren Analyse der Antworten genutzt werden können.


To conclude, when writing a survey you should aim to create one which asks specific questions targeted to the issues you need to answer. Also remember that it doesn't do any harm to gather a little extra background information as you can use it all to get better information from the result.
Es ist auch wichtig, Ihre Fragen richtig zu formulieren. Wenn die Leute die Fragen beantworten müssen und sie nicht verstehen, schließen sie das Fenster und gehen weiter. Wenn möglich, lassen Sie Ihre Umfrage von einer anderen Person Korrektur lesen, bevor Sie sie öffentlich zugänglich machen, um sicherzustellen, dass die Fragen klar sind.


It's also important to phrase your questions well, as if people need to answer the questions and they don't understand them, they'll close the window and move on. Try to hand your survey to someone else to proof read before making it publicly available to ensure its definitely crystal clear what the question is asking.
==Umfrageverzerrung==


==Survey Bias==
Bei der Durchführung von Marktforschungen ist es wichtig, unvoreingenommene Antworten zu erhalten, indem man den Umfrageteilnehmern keine Fragen stellt, die ihre Antworten beeinflussen könnten. Durch die Vermeidung von Umfrageverzerrungen können Antworten vermieden werden, die die gesammelten Daten ungültig machen oder verfälschen könnten.
Es ist ziemlich einfach und üblich, dass ein Unternehmen oder eine Einzelperson ohne die entsprechende Ausbildung/Kenntnisse in der Marktforschung auf diese Weise einen Fehler macht. Dies gilt für viele Dinge, beispielsweise für die Art und Weise, wie eine Frage formuliert ist, für die Antworttypen, aus denen man wählen kann, für die Art und Weise, wie ein Interviewer die Fragen präsentiert, wenn die Daten telefonisch oder persönlich erhoben werden.


In obtaining market research, one of the most critical things to avoid is the issue of survey bias - that is, asking the respondent questions which may influence the results he or she provides and thus invalidates or skews your data.  It is very easy and common for a company or individual without the proper market research education and experience to err in this way.  This extends to many things, such as the way a question is phrased, to the types of responses which are available, to the way that an interviewer presents the questions if data is being collected by phone or in-person.


For example, a biased survey question may be written as such:
Das Folgende ist ein Beispiel für eine voreingenommene Frage:


<syntaxhighlight lang="php" enclose="div">How much did you enjoy the event?
<syntaxhighlight lang="php">Wie sehr hat Ihnen die Veranstaltung gefallen?


( )Very much
( )Sehr viel


( )A little bit
( )Nur ein wenig


( )Not very much
( )Nicht sehr viel


( )Not at all</syntaxhighlight>
( )Gar nicht</syntaxhighlight>


At first glance, it appears that there is no problem with the structure of this question.  After all, the respondent is able to provide his or her answer from "very much" to "not at all".  However, the problem appears in the question phrasing itself.  By asking the respondent "How much" he or she enjoyed the event, the interview has already established a bias by assuming that the respondent enjoyed the event in some way or another, which may not be the case.
Auf den ersten Blick scheint es, dass die Struktur dieser Frage kein Problem darstellt. Schließlich hat der Befragte die Wahl zwischen „sehr sehr“ und „überhaupt nicht“. Das Problem liegt jedoch in der Art und Weise, wie die Frage formuliert ist. Indem er den Teilnehmer fragt, „wie sehr“ ihm die Veranstaltung gefallen hat, hat die Person, die die Umfrage durchführt, bereits eine Voreingenommenheit festgestellt, indem sie annimmt, dass der Befragte die Veranstaltung auf die eine oder andere Weise genossen hat, was möglicherweise nicht der Fall ist.


The following example would be a far better what to ask the question which does not lead or bias the respondent in any way:
Das folgende Beispiel wäre eine bessere Möglichkeit, die Frage so zu stellen, dass sie die Antwort des Teilnehmers nicht beeinflusst:


<syntaxhighlight lang="php" enclose="div">How would you rate your overall enjoyment of the event on a 1 to 5 scale, where 1 is "Not at all enjoyed" and 5 is "Completely enjoyed"
<syntaxhighlight lang="php">Wie würden Sie Ihre allgemeine Freude an der Veranstaltung auf einer Skala von 1 bis 5 bewerten: 1 = „Überhaupt nicht“ und 5 = „Völlig genossen“


1 2 3 4 5
1 2 3 4 5
Line 374: Line 382:
( ) ( ) ( ) ( ) ( )</syntaxhighlight>
( ) ( ) ( ) ( ) ( )</syntaxhighlight>


Using this modified question, the respondent is not led to the assumption that any enjoyment was had, and is able to supply an answer in a numerical way that makes it easy for him or her to specify the enjoyment level, and makes it easy for the survey solicitor to tabulate and compare the results with other respondents.
Das Umformulieren der Frage ermöglicht es dem Befragten, anhand einer Skala zu antworten, die es ihm oder ihr erleichtert, den Grad der Freude anzugeben, und die es der Person, die die Umfrage durchführt, erleichtert, die Ergebnisse tabellarisch darzustellen und mit anderen Befragten zu vergleichen. Natürlich sollten weitere Fragen hinzugefügt werden, um Einzelheiten darüber zu erfahren, was den Teilnehmern gefallen oder nicht gefallen hat.


This is just one minor example of a good survey design principle.  This understanding extends to all things.
Dies ist nur ein Beispiel dafür, wie kleine Änderungen im Wortlaut Ihre Umfrage verbessern können.

Latest revision as of 17:07, 2 April 2024

Eine einfache Anleitung zur Erstellung einer guten Umfrage.

LimeSurvey macht es einfach, eine Umfrage sehr schnell zusammenzustellen. Leider macht das auch das Zusammenstellen einer schlechten Umfrage sehr einfach.

Auf dieser Seite finden Sie eine einfache Anleitung, um eine Umfrage zusammenzustellen, die nicht nur für Ihre Teilnehmer leicht zu beantworten ist, sondern auch sinnvolle Antworten liefert.

Dieser Blog bietet auch eine weitere nützliche Liste von "Survey Design Tipps & Tricks" (auf Englisch)

Bevor Sie eine Umfrage durchführen

Einige wichtige Fragen müssen vor der Gestaltung eines Fragebogens beantwortet werden - und zwar schon bevor man sich entscheidet, ob ein Fragebogen der richtige Weg ist.

Was ist es, was Sie mit Ihrer Befragung wirklich herausfinden wollen?

Wenn Sie diese Frage beantwortet haben, stellen Sie Folgendes:

  • Wird eine Umfrage mir dabei helfen, die Informationen zu erhalten, die ich für meine Forschung benötige?
  • Welche Personen sind die richtigen, um an der Umfrage teilzunehmen?
  • Wie kann ich sicherstellen, dass ich die richtigen Leute erreiche?
  • Was ist der beste Weg, den Teilnehmern der Umfrage dabei zu helfen, die Fragen vollständig zu verstehen (damit die erhaltenen Informationen korrekt/nützlich sind)?
  • Welche statistischen Methoden (zur Datenanalyse) möchte/muss ich gegebenenfalls auf die Daten anwenden, nachdem diese erfasst wurden?


Dies sind nur einige der Fragen, auf die Sie klare Antworten benötigen, wenn Sie entscheiden, ob LimeSurvey das richtige Tool für Sie ist.

LimeSurvey eignet sich hervorragend für vollständig strukturierte (Sie kennen alle Fragen, die Sie möglicherweise stellen müssen, bevor Sie mit dem Interview beginnen), standardisierte (jeder erhält mehr oder weniger den gleichen Fragebogen) und überwiegend quantitative (es geht hauptsächlich um Zahlen oder Fragen mit vordefinierten Antworten) Fragebögen, die online gesammelt werden.


Bis zu einem gewissen Grad kann man hiervon natürlich abweichen. Sie können LimeSurvey verwenden, um Antworten auf einige Arten von Telefoninterviews zu sammeln. Sie können LimeSurvey auch zur Erhebung qualitativer Daten verwenden, beispielsweise durch die Verwendung von Textfragen.

Doch irgendwann kommen Sie vielleicht zu dem Schluss, dass andere Forschungsmethoden besser geeignet sind.

Strukturierung eines Fragebogens

Um zu entscheiden, in welcher Reihenfolge Fragen gestellt und wie sie gruppiert werden sollen, müssen einige Aspekte berücksichtigt werden.

Beginnen Sie nach Möglichkeit mit Fragen, die leicht zu beantworten sind und die alle Teilnehmer problemlos beantworten können. Häufig handelt es sich hierbei um Screening-Fragen, d. h. um Fragen, die Sie stellen müssen, um herauszufinden, ob Sie die richtigen Personen fragen (verwenden Sie Bedingungen und/oder Quoten, um diese Screening-Fragen durchzuführen).

Wenn Sie diese Art von Fragen an den Anfang stellen, können Sie vermeiden, dass Teilnehmer Ihre Umfrage verlassen, bevor sie sie abgeschlossen haben, da die Wahrscheinlichkeit geringer ist, dass die Teilnehmer abbrechen, wenn sie bereits einige Arbeit in die Beantwortung dieser Einleitungs-/Screening-Fragen gesteckt haben.

Beispiele:

 Welche der folgenden Früchte magst du?
#Äpfel ()
#Bananen ()
#Kirschen ()

(Einzelauswahl)

Sie können Bedingungen verwenden, um die nächste Frage zu Kirschen anzuzeigen, wenn der Teilnehmer „Kirschen“ ausgewählt hat.

Warum bevorzugst du Kirschen?
#Sie sind lecker
#Ich liebe die Farbe
#Sie sind gesund
#Sie sind saftig
#Ich liebe Kirschkuchen

(Multi-Choice-Frage (oder Single-Choice-Frage, hängt davon ab, ob Sie genaue Daten benötigen))

Wie sehr magst du Kirschen?
#1) Nicht viel mehr als andere Früchte
#2) Mag sie mehr als andere Früchte
#3) Es ist eine meiner Lieblingsfrüchte!
#4) Ich LIEBE KIRSCHEN!

(Einzelauswahl)

Kennt ihr Rezepte mit Kirschen?

[Textfeld]

Oben finden Sie ein Beispiel für leicht zu beantwortende Einstiegsfragen, gefolgt von der Hauptfrage.

Ziel war es, Rezepte mit Kirschen, Äpfeln und Bananen zu sammeln.

Wenn Sie andererseits schwer zu beantwortende Fragen stellen müssen, könnten Sie darüber nachdenken, für jede Frage oder Fragengruppe unterschiedliche Seiten zu verwenden und diese schwer zu beantwortenden Fragen ganz am Ende zu platzieren. Sollten sich Teilnehmer dazu entschließen, an der Umfrage nicht teilzunehmen, werden auf diese Weise zumindest ihre bisherigen Antworten gespeichert.

Was die Struktur betrifft, sollten Sie noch etwas anderes bedenken: Vermeiden Sie Verzerrungen, die durch den Fragebogen selbst entstehen.

Beispielsweise gibt es in der Marktforschung Konzepte, die ungestützte und unterstützte Fragen erfordern.

Ein Beispiel für eine nicht ungestützte Frage wäre:

„Welche Schokoladenmarken kennen Sie?

(gefolgt von einem leeren Textfeld)

Das Folgende ist ein Beispiel für eine unterstützte Frage:

„Welche der folgenden Schokoladenmarken kennen Sie?

(gefolgt von einer Liste der Marken (Multiple Choice))

Wenn Sie, wie bereits erwähnt, beide Arten von Fragen (ungestützte und nicht unterstützte) in denselben Fragebogen aufnehmen möchten, sollten Sie darauf achten, diese auf unterschiedlichen Seiten zu platzieren und die nicht unterstützten Fragen vor den unterstützten Fragen zu platzieren. Wenn Sie eine unterstützte Frage vor eine nicht unterstützte Frage stellen, könnte dies unbeabsichtigt die Antwort der Teilnehmer beeinflussen und Ihre Ergebnisse ungültig machen.

Einzelne Fragen

Fragen sollten nicht suggestiv sein. „Was halten Sie von LimeSurvey?“ ist eine akzeptable (nicht suggestive) Frage, während „Sind Sie nicht der Meinung, dass LimeSurvey ein wirklich tolles Tool ist?“ eine suggestive Frage ist.

Weitere Beispiele und Vorschläge zur Formulierung von Fragen:

Die Leute können „Ja“ zur Geldspende sagen, wenn ihnen folgende Fragen gestellt werden:

  • „Liebst du die Natur?“
  • „Werden Sie Geld spenden, um dem Fluss zu helfen?“


Sie werden wahrscheinlich „Nein“ sagen, wenn ihnen folgende Fragen gestellt werden:

  • „Ist Geldmangel ein Problem für Sie?“
  • „Werden Sie Geld spenden, um dem Fluss zu helfen?“


Um die richtigen Antworten zu erhalten, ordnen Sie Ihre Fragen wie folgt:

  • von der am wenigsten sensiblen Frage zur höchsten Sensibilität
  • von allgemeiner zu spezifischerer
  • von Fragen zu Fakten bis hin zu Fragen zu Meinungen

Eine Umfragefrage kann auch wie folgt lauten:

  • Offenes Ende (die Person antwortet in ihren eigenen Worten) oder
  • Geschlossenes Ende (die Person wählt aus einer begrenzten Anzahl von Optionen)

Geschlossene Fragen sind viel einfacher zu analysieren, erlauben es den Befragten jedoch möglicherweise nicht, die Antwort zu geben, die sie wirklich wollen.

Beispiel: „Was ist deine Lieblingsfarbe?“

Offenes Ergebnis: Jemand antwortet möglicherweise mit „dunkles Fuchsia“. In diesem Fall müssen Ihre Ergebnisse eine Kategorie „dunkles Fuchsia“ enthalten.

Geschlossenes Ergebnis: Mit einer Auswahl von nur 12 Farben wird Ihre Arbeit einfacher, aber die Befragten sind möglicherweise nicht in der Lage, ihre genaue Lieblingsfarbe auszuwählen.

Überlegen Sie sich jede Frage sorgfältig und entscheiden Sie, ob sie offen oder geschlossen sein soll. Wenn Sie tiefere Einblicke in die Antworten benötigen, verwenden Sie offene Fragen. Ist dies nicht der Fall, können geschlossene Fragen verwendet werden.

Beispiel (offen): „Was ist Ihrer Meinung nach der beste Weg, den Fluss zu säubern?“

Machen Sie es „offen“: Die Antworten lassen sich vielleicht nicht einfach in eine Tabelle oder Grafik eintragen, aber Sie gewinnen vielleicht einen tiefen Einblick in die Gefühle und Vorstellungen der Menschen über die Reinigung des Flusses oder der Umwelt und verwenden direkte Zitate für ihre Berichterstattung.

Beispiel (geschlossen): „Wie oft besuchen Sie den Fluss?“

Machen Sie es „geschlossen“ mit den folgenden Optionen:

  • Fast jeden Tag
  • Mindestens 5 Mal im Jahr
  • 1 bis 4 Mal im Jahr
  • Fast nie

Sie können diese Daten in einem übersichtlichen Balkendiagramm darstellen.

Achten Sie bei der Arbeit mit Multiple-Choice- oder Single-Choice-Fragen darauf, den passenden Fragetyp auszuwählen und sowohl Fragen als auch Antworten angemessen zu formulieren.

Zum Beispiel:

 Welche der folgenden Früchte magst du?
#Äpfel ()
#Bananen ()
#Kirschen ()

Das Obige ist eine typische Multiple-Choice-Frage, da Sie mehrere Elemente der Liste mit „Gefällt mir“ markieren können. Andererseits: „Welche der folgenden Früchte bevorzugen Sie am liebsten?“ ist eine Single-Choice-Frage.

Beide Fruchtbeispiele wurden formuliert, um deutlich zu machen, dass es Ihnen nur um die aufgeführten Früchte geht. Wenn Sie fragen würden: „Welches ist Ihre Lieblingsfrucht?“, sollten Sie entweder eine wirklich umfassende Obstliste haben oder, was wahrscheinlicher ist, die Einstellung von LimeSurvey verwenden, um ein „anderes“ Feld hinzuzufügen. Generell gilt, dass Antwortmöglichkeiten in den meisten Fällen vollständig, sich gegenseitig ausschließend und eindeutig sein müssen.

Wenn Sie Multiple- oder Single-Choice-Fragen mit vielen Optionen zur Auswahl haben, müssen Sie sich darüber im Klaren sein, dass dies zu einer weiteren Verzerrung führen kann, da die Teilnehmer ihre Aufmerksamkeit wahrscheinlich auf die allerersten Optionen richten und nicht auf die mittleren. LimeSurvey bietet eine großartige Option, die Reihenfolge der Fragen zufällig zu bestimmen und dieses Problem bis zu einem gewissen Grad zu beseitigen.

Was macht eine gute Umfrage aus?

Es gibt drei Merkmale einer Umfrage, die dazu beitragen, die richtigen Antworten zu erhalten, die für genauere Beurteilungen erforderlich sind:

  1. Die Fragen sind klar und präzise und ermöglichen insgesamt detaillierte, eindeutige und aussagekräftige Antworten.
  2. Es werden alle vordefinierten Antworten bereitgestellt und ihre Formate sind für die Frage geeignet.
  3. Es besteht die Möglichkeit, bei Bedarf zusätzliche Informationen hinzuzufügen.

Denken Sie außerdem immer an das Benutzererlebnis. Lesen, Scrollen und Klicken sind ermüdende Tätigkeiten. Also:

  1. Vermeiden Sie unnötige Fragen.
  2. Verwenden Sie Bedingungen, um zu vermeiden, dass Fragen gestellt werden, die für einen bestimmten Teilnehmer nicht relevant sind.
  3. Halten Sie Fragen und Antworten kurz und leicht lesbar – verwenden Sie geeignete Auszeichnungen.
  4. Denken Sie über den Kompromiss zwischen Scrollen und Klicken nach. Zeigen Sie bei kurzen Fragebögen (5-15 Fragen, je nach Komplexität der Frage) alles auf einer Seite an. Setzen Sie Gruppen bei längeren Fragebögen sinnvoll ein, d.h., gruppieren Sie Fragen verständlich. Verwenden Sie Gruppenbeschreibungen, um eine klare Aussage zum Thema der folgenden Fragen zu treffen.
  5. Vermeiden Sie eine Verwechslung der Teilnehmer mit unterschiedlichen Skalen, d.h., beschränken Sie die Anzahl unterschiedlicher Skalentypen, Skalenbereiche und unterschiedlicher Skalenbeschreibungen so weit wie möglich. Versuchen Sie, die Richtung der Skalen nicht zu ändern. (Es gibt einige methodische Ausnahmen).
  6. Für Bewertungsskalen kann es sinnvoll sein, eine gerade Anzahl von Bewertungsmöglichkeiten zu verwenden, um den Befragten die Entscheidungsfindung zu erleichtern (siehe unten).
Beispiel für Antwortskalen, wie „gut“ etwas ist:

1. Sehr gut

2. Gut

3. Ziemlich gut

4. Nicht so gut

5. Schlecht

6. Sehr schlecht

Beispiel für Antwortskalen, wie „schlecht“ etwas ist:

1. Gut

2. Fair

3. Schlecht

Der beste Weg, mit der Gestaltung einer Umfrage zu beginnen, besteht darin, sich einen Moment Zeit zu nehmen und sich Ihr ideales Feedback vorzustellen. Es versteht sich von selbst, dass aussagekräftige Antworten am nützlichsten sind. Versuchen Sie daher, Fragen zu erstellen, die zu diesen Antworten einladen.

Wie können Sie das angehen? Die beste Methode besteht darin, alle Bereiche zu trennen und zu entscheiden, welche Informationen Sie benötigen.

Stellen Sie sich zum Beispiel vor, Sie veranstalten eine öffentlich zugängliche Veranstaltung und benötigen allgemeines Feedback zu der Veranstaltung.

Die folgende Umfrage ist ein Beispiel für eine Umfrage, die möglicherweise nicht ausreicht, um nützliche Antworten zu erhalten:

Hat Ihnen die Veranstaltung gefallen?

( ) Ja

( ) Nein

Wie gut war das WLAN?

1 2 3 4 5 6 7 8 9 10

( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )

Hatten Sie Probleme, zur Veranstaltung zu kommen?

( ) Ja

( ) Nein

War die bereitgestellte Karte hilfreich?

( ) Ja

( ) Nein

Wie empfanden Sie die Mischung der Redner?

( ) Sehr traurig ( ) Traurig ( ) Neutral ( ) Glücklich ( ) Sehr glücklich

Für das obige Szenario wären Matrixfragen die bessere Wahl.

Matrixfragen.

Generell gilt, dass Skalen nur für Fragen zu Alter, Zeit (vielleicht) oder Mengen verwendet werden sollten. Matrixfragen müssen richtig formuliert sein, um ein möglichst nützliches Feedback zu erhalten. Bedenken Sie, dass eine Matrix aus Pflichtfragen für Ihr Publikum etwas abschreckend sein kann, denn wenn sie nicht richtig strukturiert ist, können keine zusätzlichen Informationen gesammelt werden.

Wenn jemand an Ihrer Umfrage teilnimmt, ist es wahrscheinlich, dass er Feedback geben möchte, und wenn er glaubt, nichts Nützliches mitteilen zu können, schließt er einfach das Fenster und macht weiter.

Was ist also falsch an der obigen Umfrage?

Schauen wir uns jede Frage einzeln an.

„Frage 1“ bringt nicht wirklich etwas. Stellen Sie sich vor, Sie erhalten 100 „Nein“-Antworten. Die Antwort allein gibt keinen Aufschluss darüber, warum dem Teilnehmer die Veranstaltung nicht gefallen hat. Sie würden sich über den Grund für die „Nein“-Antworten wundern und sich auch fragen, was Sie mit den Antworten machen sollen. Wir werden uns gleich mit einer möglichen Verbesserung befassen.

„Frage 2“ ist schlimmer als die erste. Wenn wir auf die drei Merkmale einer guten Umfrage zurückkommen, sehen wir, dass die Fragen klar und präzise sein müssen. Ich bin kein WLAN-Experte, bin mir aber ziemlich sicher, dass es bessere Möglichkeiten gibt, dies zu messen. Darüber hinaus ermöglicht es keine sinnvolle Antwort auf eine Frage wie: „Was werden Sie tun, wenn Sie wissen, dass 33 % der Menschen Ihr WLAN als gut bewertet haben, gegenüber nur 23 %?“ Zu den 3 Merkmalen einer guten Umfrage gehört auch, dass die vordefinierten Antworten zur Frage passen müssen.

Es ist ziemlich offensichtlich, dass die Verwendung einer Skala für diese Frage Ihnen nicht dabei hilft, die Qualität Ihres WLANs zu verbessern. Es besteht auf jeden Fall Bedarf, dass diese Frage Platz bietet, damit die Leute zusätzliche Informationen hinzufügen können. Wie könnte jemand ein bestimmtes Problem melden, ohne näher darauf eingehen zu können?

In diesem Fall wäre es fast unmöglich, über genügend Informationen zu verfügen, um die Probleme, die der/die Teilnehmer mit dem WLAN hatten, richtig anzugehen. Bei Umfragen geht es darum, nützliche Informationen zu erhalten, mit denen Sie arbeiten oder aus denen Sie lernen können.

„Fragen 3 und 4“ hätten die gleichen Ergebnisse wie die ersten beiden Fragen. Sie erlauben nur eine „Ja“- oder „Nein“-Antwort und bieten keine Möglichkeit, Details hinzuzufügen. Nach diesem Abschnitt geben wir Vorschläge zur Verbesserung dieser Art von Fragen.

„Frage 5“, die letzte Frage, ist ebenfalls unwirksam. Nach dem Grad der Zufriedenheit mit etwas zu fragen, ist nicht sehr sinnvoll, da jeder Mensch unterschiedliche Interessen hat und daher wahrscheinlich jeder eine andere Meinung über jeden Redner hat. Dies ist ein weiteres Beispiel dafür, dass eine „Skalen“-Frage verwendet wird, aber nicht verwendet werden sollte.

Schauen Sie sich die verbesserte Umfrage unten an.

Haben Sie das hauseigene WLAN genutzt?

( ) Ja

( ) Nein

Hatten Sie Probleme mit dem WLAN?

( ) Überhaupt keine Probleme

( ) Ein paar kleine Probleme, nichts Großes

( ) Ein oder zwei schwerwiegende Probleme

( ) Das WLAN war fast völlig unbrauchbar.

Wenn bei Ihnen Probleme aufgetreten sind, könnten Sie diese kurz beschreiben? (Textfeld)

Hatten Sie Probleme, zur Veranstaltung zu kommen?

( ) Ja

( ) Nein

Wie sind Sie zu unserer Veranstaltung gekommen?

( ) Zug

( ) Auto

( ) Bus

( ) Stadtbahn (IE Tube, Straßenbahn)

( ) Gehen

Haben Sie die Karte von unserer Website verwendet?

( ) Ja

( ) Nein

Wenn Sie sich die Karte angesehen haben, war sie detailliert genug?

( ) Ja

( ) Es gab mir eine ungefähre Vorstellung. Für mehr Details habe ich jedoch eine andere Karte verwendet.

( ) Überhaupt nicht detailliert

Wenn Sie die Karte nicht verwendet haben, warum nicht?

( ) Nicht genügend Details

( ) Ich habe stattdessen ein Navigationsgerät/Google Maps verwendet.

( ) Ich wusste nicht einmal, dass es existiert!

Waren die Referenten generell interessant? Haben Ihnen die Vorträge gefallen?

( ) Fast alle waren interessant und sehr unterhaltsam

( ) Hauptsächlich unterhaltsam, aber eine Handvoll weniger interessanter Vorträge.

( ) Eine 50:50-Aufteilung

( ) Eher langweilig als interessant

( ) Habe nichts Interessantes gefunden

Bitte erläutern Sie Ihre Antwort auf die obige Frage. Fühlen Sie sich frei, darauf zu verweisen

bestimmte Personen/Gespräche. (Textfeld)

Wenn wir das Vortragsangebot verbessern könnten oder Sie andere interessante Ideen dazu haben

Die Vorträge, listen Sie sie unten auf (Textfeld)

Wenn Sie weitere Empfehlungen oder Ideen haben, listen Sie diese bitte unten auf. (Textfeld)

Diese Umfrage ist zwar etwas länger, aber es ist viel einfacher, die Antworten zu beantworten und zu interpretieren. Wenn Sie zu jedem Thema zwei oder drei Fragen stellen, können Sie bei der Verarbeitung der Ergebnisse etwas mehr Analyse durchführen. Stellen Sie sich zum Beispiel vor, dass Sie von 30 Personen als Antwort auf die erste Umfragefrage erhielten, sie hätten Probleme, zur Veranstaltung zu kommen.

Das wären so viele Informationen gewesen, wie man aus den Ergebnissen herausholen konnte, aber mit den neuen Antworten wäre es möglich, abzuleiten, welche Transportmittel den Menschen Probleme bereiten. Darüber hinaus konnte man so sehen, ob die bereitgestellte Karte oder eine andere Form der Navigation genutzt wurde, und so gezielt Verbesserungen für die Zukunft anstreben.

„Bedenken Sie, dass der Benutzer nach 50 Fragen höchstwahrscheinlich mit dem Lesen aufhört.“

Weitere wichtige Ergänzungen sind die Textfeldfragen. Dadurch können Ihre Teilnehmer konkretes Feedback geben, aus dem Sie schöpfen können. Es ist eine gute Idee, diese nicht zur Pflicht zu machen, da sie die Leute möglicherweise davon abhalten, zu antworten.

Abschließend lässt sich sagen, dass Sie beim Schreiben einer Umfrage darauf abzielen sollten, eine Umfrage zu erstellen, in der spezifische Fragen gestellt werden, um nützlichere Informationen für die Analyse zu erhalten. Denken Sie auch daran, dass es hilfreich ist, ein paar zusätzliche Hintergrundinformationen zu sammeln, da diese zur besseren Analyse der Antworten genutzt werden können.

Es ist auch wichtig, Ihre Fragen richtig zu formulieren. Wenn die Leute die Fragen beantworten müssen und sie nicht verstehen, schließen sie das Fenster und gehen weiter. Wenn möglich, lassen Sie Ihre Umfrage von einer anderen Person Korrektur lesen, bevor Sie sie öffentlich zugänglich machen, um sicherzustellen, dass die Fragen klar sind.

Umfrageverzerrung

Bei der Durchführung von Marktforschungen ist es wichtig, unvoreingenommene Antworten zu erhalten, indem man den Umfrageteilnehmern keine Fragen stellt, die ihre Antworten beeinflussen könnten. Durch die Vermeidung von Umfrageverzerrungen können Antworten vermieden werden, die die gesammelten Daten ungültig machen oder verfälschen könnten. Es ist ziemlich einfach und üblich, dass ein Unternehmen oder eine Einzelperson ohne die entsprechende Ausbildung/Kenntnisse in der Marktforschung auf diese Weise einen Fehler macht. Dies gilt für viele Dinge, beispielsweise für die Art und Weise, wie eine Frage formuliert ist, für die Antworttypen, aus denen man wählen kann, für die Art und Weise, wie ein Interviewer die Fragen präsentiert, wenn die Daten telefonisch oder persönlich erhoben werden.


Das Folgende ist ein Beispiel für eine voreingenommene Frage:

Wie sehr hat Ihnen die Veranstaltung gefallen?

( )Sehr viel

( )Nur ein wenig

( )Nicht sehr viel

( )Gar nicht

Auf den ersten Blick scheint es, dass die Struktur dieser Frage kein Problem darstellt. Schließlich hat der Befragte die Wahl zwischen „sehr sehr“ und „überhaupt nicht“. Das Problem liegt jedoch in der Art und Weise, wie die Frage formuliert ist. Indem er den Teilnehmer fragt, „wie sehr“ ihm die Veranstaltung gefallen hat, hat die Person, die die Umfrage durchführt, bereits eine Voreingenommenheit festgestellt, indem sie annimmt, dass der Befragte die Veranstaltung auf die eine oder andere Weise genossen hat, was möglicherweise nicht der Fall ist.

Das folgende Beispiel wäre eine bessere Möglichkeit, die Frage so zu stellen, dass sie die Antwort des Teilnehmers nicht beeinflusst:

Wie würden Sie Ihre allgemeine Freude an der Veranstaltung auf einer Skala von 1 bis 5 bewerten: 1 = „Überhaupt nicht“ und 5 = „Völlig genossen“

1 2 3 4 5

( ) ( ) ( ) ( ) ( )

Das Umformulieren der Frage ermöglicht es dem Befragten, anhand einer Skala zu antworten, die es ihm oder ihr erleichtert, den Grad der Freude anzugeben, und die es der Person, die die Umfrage durchführt, erleichtert, die Ergebnisse tabellarisch darzustellen und mit anderen Befragten zu vergleichen. Natürlich sollten weitere Fragen hinzugefügt werden, um Einzelheiten darüber zu erfahren, was den Teilnehmern gefallen oder nicht gefallen hat.

Dies ist nur ein Beispiel dafür, wie kleine Änderungen im Wortlaut Ihre Umfrage verbessern können.