How to design a good survey (guide)/it

Una semplice guida per fare un buon sondaggio

LimeSurvey semplifica la creazione di un sondaggio molto rapidamente. Sfortunatamente, questo rende anche molto facile mettere insieme un cattivo sondaggio.

In questa pagina troverai una semplice guida per mettere insieme un sondaggio che non solo sarà indolore da completare per il tuo pubblico; ma ti darà anche risposte significative.

Il blog "Survey design tips & tricks" fornisce anche altre informazioni molto utili.

Prima di fare un sondaggio

È necessario rispondere ad alcune domande importanti prima di progettare qualsiasi questionario, in realtà anche prima di decidere se un questionario è la strada giusta da percorrere.

Cosa vuoi veramente scoprire con la tua ricerca?

Dopo aver risposto a questa domanda, chiedi quanto segue:

• Un sondaggio mi aiuterà a ottenere le informazioni di cui ho bisogno per la mia ricerca?
• Chi sono le persone giuste a cui chiedere per completare il sondaggio?
• Come posso assicurarmi di raggiungere le persone giuste?
• Qual è il modo migliore per aiutare coloro che completano il sondaggio a comprendere appieno il domande (in modo che le informazioni ottenute siano accurate/utili)?
• Quali eventuali metodi statistici (per l'analisi dei dati) voglio/devo utilizzare sui dati una volta che sono stati raccolti ?

Queste sono solo alcune delle domande a cui hai bisogno di risposte chiare quando decidi se LimeSurvey è lo strumento giusto per te.

LimeSurvey è ottimo per questionari completamente strutturati (conosci tutte le domande che potresti dover porre prima di iniziare il colloquio), standardizzati (tutti ricevono più o meno lo stesso questionario), prevalentemente quantitativi (si tratta principalmente di numeri o domande con risposte predefinite) questionari raccolti online.

In una certa misura puoi, ovviamente, variare da questo. Puoi utilizzare LimeSurvey per raccogliere le risposte ad alcuni tipi di interviste telefoniche. Puoi anche utilizzare LimeSurvey per raccogliere dati qualitativi, ad esempio utilizzando domande testuali.

Ma a un certo punto potresti giungere alla conclusione che altri metodi di ricerca sono più adatti.

Struttura di un questionario

Per decidere in quale ordine porre le domande e come raggrupparle, ci sono alcuni aspetti da considerare.

Se possibile, inizia con domande a cui è facile rispondere e alle quali tutti i partecipanti si sentono a proprio agio. Spesso si tratta di domande di screening, ovvero domande che devi porre per scoprire se stai chiedendo alle persone giuste (usa condizioni e/o quote per gestire queste domande di screening domande).

Inserire questo tipo di domande all'inizio potrebbe aiutare a evitare che i partecipanti abbandonino il sondaggio prima di averlo completato, poiché le persone potrebbero essere meno propense a terminare una volta che hanno già lavorato per rispondere a queste domande introduttive/di screening.

Esempi:

 Quale dei seguenti frutti ti piace?
#Mele ()
#Banane ()
#Ciliegie ()

(scelta unica)

Puoi usare le condizioni per far apparire la domanda successiva sulle ciliegie se il partecipante ha scelto ''ciliegie''.

Perché preferisci le ciliegie?
#Sono gustose
#Adoro il colore
#Sono sane
#Sono succose
#Adoro la torta di ciliegie

(domanda a scelta multipla (o scelta singola, dipende se hai bisogno di dati esatti))

Quanto ti piacciono le ciliegie?
#1) Non molto più degli altri frutti
#2) Ti piacciono più degli altri frutti
#3) È uno dei miei frutti preferiti!
#4) ADORO LE CILIEGIE!

(scelta unica)

Conosci qualche ricetta con le ciliegie?

[campo di testo]

Sopra è riportato un esempio di domande introduttive a cui è facile rispondere, seguite dalla domanda principale.

L'obiettivo era quello di raccogliere ricette con ciliegie, mele e banane.

D'altra parte, se hai bisogno di porre domande a cui è difficile rispondere, potresti pensare di utilizzare pagine diverse per ogni domanda o gruppo di domande e inserire queste domande a cui è difficile rispondere alla fine. In questo modo, se i partecipanti decidono di non completare il sondaggio, almeno le loro risposte precedenti vengono salvate.

Qualcos'altro da considerare relativo alla struttura: evitare pregiudizi introdotti dal questionario stesso.

Ad esempio, nelle ricerche di mercato ci sono concetti che richiedono domande non assistite e domande assistite.

Un esempio di domanda senza aiuto potrebbe essere:

"Quali marche di cioccolato conosci?"

(seguito da una casella di testo vuota)

Di seguito è riportato un esempio di domanda assistita:

"Quali delle seguenti marche di cioccolato conosci?"

(seguito da un elenco di marchi (scelta multipla))

Come accennato in precedenza, se scegli di includere entrambi i tipi di domande (con e senza aiuto) nello stesso questionario, assicurati di inserirle in pagine diverse e di inserire le domande senza aiuto prima di quelle con aiuto. Mettere una domanda assistita prima di una domanda senza aiuto potrebbe influenzare involontariamente la risposta dei partecipanti, il che invaliderebbe i risultati.

Domande individuali

Le domande dovrebbero essere non suggestive. "Qual è la tua opinione su LimeSurvey?" è una domanda accettabile (non suggestiva) mentre "Non sei d'accordo che LimeSurvey sia davvero un ottimo strumento?" è una domanda suggestiva.

Altri esempi e suggerimenti per formulare le domande:

Le persone possono dire "sì" alla donazione di denaro se vengono poste domande nel modo seguente:

• Ami la natura?
• Donerai denaro per aiutare il fiume ?

Probabilmente diranno "no" quando vengono poste le domande in questo modo:

• La mancanza di denaro è un problema per te?
• Donerai denaro per aiutare il fiume?

Per aiutare a sollecitare le risposte adeguate, ordina le tue domande:

• dalla meno sensibile alla più sensibile
• dalla generale alla più specifica
• dalle domande sui fatti alle domande sulle opinioni

Inoltre, una domanda del sondaggio può essere:

• a risposta aperta (la persona risponde con parole proprie), o
• a risposta chiusa (la persona sceglie tra un numero limitato di opzioni)

Le domande a risposta chiusa sono molto più facili da analizzare, ma potrebbero non consentire agli intervistati di dare la risposta che desiderano veramente.

Esempio: "Qual è il tuo colore preferito?"

Aperta: Qualcuno potrebbe rispondere "fucsia scuro", nel qual caso dovrai inserire una categoria "fucsia scuro" nei tuoi risultati.

Chiuso: con una scelta di soli 12 colori il tuo lavoro sarà più facile, ma gli intervistati potrebbero non essere in grado di scegliere esattamente il loro colore preferito.

Considera attentamente ogni domanda e decidi se devono essere aperte o chiuse. Se hai bisogno di una visione più approfondita delle risposte, usa le domande a risposta aperta. In caso contrario, è possibile utilizzare domande a risposta chiusa.

Esempio (a risposta aperta): "Quale pensi sia il modo migliore per ripulire il fiume?"

Rendilo aperto: le risposte potrebbero non essere facili da inserire in una tabella o in un grafico, ma potresti ottenere una visione profonda dei sentimenti e delle idee delle persone sulla pulizia del fiume o dell'ambiente e utilizzare le virgolette dirette in la tua segnalazione.

Esempio (chiuso): "Quanto spesso visiti il fiume?"

Rendilo chiuso con le seguenti opzioni:

• Quasi tutti i giorni
• Almeno 5 volte l'anno
• Da 1 a 4 volte l'anno
• Quasi mai

Sarai in grado di presentare questi dati in un grafico a barre ordinato.

Quando lavori con domande a scelta multipla o a scelta singola, assicurati di scegliere il tipo di domanda appropriato e di formulare sia le domande che le risposte in modo appropriato.

Per esempio:

Quale dei seguenti frutti ti piace?
#Mele ()
#Banane ()
#Ciliegie ()

Quanto sopra è una tipica domanda a scelta multipla, poiché puoi apprezzare diversi elementi nell'elenco. D'altra parte, "Quale dei seguenti frutti preferisci di più?" è una domanda a scelta singola.

Entrambi gli esempi di frutta sono stati formulati per chiarire che la tua preoccupazione riguarda solo la frutta elencata. Se dovessi chiedere "Qual è il tuo frutto preferito?", dovresti avere un elenco davvero esaustivo di frutta o, più probabilmente, utilizzare l'impostazione di LimeSurvey per aggiungere un campo "altro". In generale, le opzioni di risposta nella maggior parte dei casi devono essere complete, mutuamente esclusive e definite.

Se hai domande a scelta multipla o singola con molte opzioni tra cui scegliere, devi essere consapevole che ciò potrebbe introdurre un altro pregiudizio, poiché è probabile che i partecipanti focalizzino la loro attenzione sulle primissime opzioni e non su quelle intermedie . LimeSurvey offre un'ottima opzione per randomizzare l'ordine delle domande e, in una certa misura, eliminare questo problema.

Cosa rende un buon sondaggio?

Ci sono 3 caratteristiche di un sondaggio che aiuteranno a ottenere le risposte adeguate necessarie per valutazioni più accurate:

1. Le domande sono chiare e precise, consentendo collettivamente risposte dettagliate, inequivocabili e significative.
2. Tutti risposte predefinite fornite e i loro formati sono appropriati alla domanda.
3. C'è spazio per le persone per aggiungere ulteriori informazioni se necessario.

In aggiunta a ciò, tieni sempre presente l'esperienza dell'utente. Leggere, scorrere e fare clic sono attività faticose. Quindi,:

1. Evita domande non necessarie.
2. Usa le condizioni per evitare di fare domande non rilevanti per un partecipante specifico.
3. Mantieni domande e risposte brevi e facili da leggere - usa il markup appropriato.
4. Pensa al compromesso tra scorrimento e clic. Mostra tutto su una pagina per brevi questionari (5-15 domande, a seconda della complessità della domanda). Usa saggiamente i gruppi per questionari più lunghi, ad esempio domande di gruppo in modo comprensibile. Usa le descrizioni dei gruppi per dare una chiara affermazione sull'argomento delle seguenti domande.
5. Evita di confondere i partecipanti con scale diverse, ad esempio, limita il più possibile la quantità di diversi tipi di scala, ambiti di scala e descrizioni di scale diverse. Cerca di non cambiare la direzione delle scale. (Ci sono alcune eccezioni metodologiche).
6. Per le scale di valutazione, potrebbe essere utile utilizzare un numero pari di opzioni di valutazione per rendere più facile il processo decisionale per gli intervistati (vedi sotto).

Esempio per scale di risposta su quanto sia "buono" qualcosa:

1. Molto bene

2. Bene

3. Abbastanza buono

4. Non così bene

5. Cattivo

6. Molto male

Esempio per scale di risposta su quanto sia "cattivo" qualcosa:

1. Bene

2. Discreto

3. Cattivo

Il modo migliore per iniziare a progettare un sondaggio è prendersi un secondo per immaginare il tuo feedback ideale. Va da sé che le risposte significative sono le più utili, quindi prova a creare domande che invitino queste risposte.

Come puoi farlo? Il metodo migliore è separare tutte le aree e decidere di quali informazioni hai bisogno.

Ad esempio, immagina di aver organizzato un evento aperto al pubblico e di cui hai bisogno per ottenere un feedback generale sull'evento.

Il seguente sondaggio è un esempio di uno che potrebbe essere inadeguato per ottenere risposte utili:

Ti è piaciuto l'evento?

( ) SÌ

( ) No

Quanto era buono il Wi-Fi?

1 2 3 4 5 6 7 8 9 10

( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )

Hai avuto problemi ad arrivare all'evento?

( ) SÌ

( ) NO

La mappa fornita è stata utile?

( ) SÌ

( ) NO

Come ti sei sentito riguardo alla miscela di relatori?

( ) Molto triste ( ) Triste ( ) Neutrale ( ) Felice ( ) Molto felice

Le domande a matrice sarebbero una scelta migliore per lo scenario di cui sopra.

Domande Matrix.

Come regola generale, le scale dovrebbero essere utilizzate solo per domande relative all'età, al tempo (forse) o alle quantità. Le domande matrice devono essere formulate correttamente per ottenere il feedback più utile. Tieni presente che una matrice di domande obbligatorie può essere un po' un deterrente per il tuo pubblico perché, se non strutturate correttamente, non consentono di raccogliere informazioni aggiuntive.

È probabile che se qualcuno sta completando il tuo sondaggio, voglia fornire un feedback e se non pensa di poter condividere nulla di utile, chiuderà semplicemente la finestra e andrà avanti.

Quindi cosa c'è di sbagliato nel sondaggio di cui sopra?

Diamo un'occhiata a ciascuna domanda una per una.

Domanda 1 non serve a niente. Immagina di ricevere 100 risposte "no". La risposta da sola non fornisce alcuna informazione utile sul motivo per cui il partecipante non ha gradito l'evento. Rimarresti a chiederti il motivo delle risposte "no" e anche a chiederti cosa fare con le risposte. Vedremo un possibile miglioramento a questo in un momento.

Domanda 2 è peggiore della prima. Tornando alle 3 caratteristiche di un buon sondaggio, vediamo che le domande devono essere chiare e precise. Non sono un esperto di Wi-Fi, ma sono abbastanza certo che ci siano modi migliori per misurarlo. Inoltre, non consente una risposta significativa a una domanda del tipo: "Cosa farai sapendo che il 33% delle persone ha valutato il tuo Wi-Fi come buono rispetto solo al 23%?" Le 3 caratteristiche di un buon sondaggio affermano anche che le risposte predefinite devono essere appropriate per la domanda.

È abbastanza ovvio che l'utilizzo di una scala per questa domanda non ti aiuterà a migliorare la qualità del tuo Wi-Fi. È assolutamente necessario che questa domanda dia spazio alle persone per aggiungere ulteriori informazioni. Come potrebbe qualcuno segnalare un problema specifico senza essere in grado di elaborare?

In questo caso sarebbe quasi impossibile disporre di informazioni sufficienti per affrontare correttamente i problemi che i partecipanti hanno avuto con il Wi-Fi. I sondaggi riguardano l'ottenimento di informazioni utili con cui lavorare o da cui imparare.

Le domande 3 e 4 avrebbero gli stessi risultati delle prime due domande. Consentono solo una risposta "sì" o "no" e nessuno dei due offre l'opportunità di aggiungere dettagli. Forniamo suggerimenti dopo questa sezione su come migliorare questo tipo di domande.

Domanda 5, l'ultima domanda, è un'altra inefficace. Chiedere il livello di soddisfazione su qualcosa non è molto utile, poiché ogni persona ha interessi diversi e quindi ognuno avrà probabilmente opinioni diverse su ciascun oratore. È un altro esempio di dove viene utilizzata una domanda di "scala" e non dovrebbe essere.

Dai un'occhiata al sondaggio migliorato qui sotto.

Hai utilizzato il Wi-Fi interno?

( ) SÌ

( ) NO

Hai avuto problemi con il Wi-Fi?

( ) Nessun problema

( ) Un paio di piccoli problemi, niente di grave

( ) Uno o due problemi gravi

( ) Il Wi-Fi era quasi totalmente inutilizzabile.

Se hai avuto problemi, potresti descriverli brevemente? (Campo di testo)

Hai avuto problemi ad arrivare all'evento?

( ) SÌ

( ) NO

How did you come to our event?

( ) Train

( ) Car

( ) Bus

( ) Light Rail (IE Tube, Tram)

( ) Walk

Did you use the map from our website?

( ) Yes

( ) No

If you looked at the map, was it detailed enough?

( ) Yes

( ) It gave me a rough idea.  I used another map for more detail though.

( ) Not detailed at all

If you didn't use the map, why not?

( ) Not enough detail

( ) I used a satnav/Google maps instead.

( ) I didn't even know it existed!

Generally speaking, were the speakers interesting? Did you enjoy the presentations?

( ) Nearly all were interesting and thoroughly enjoyable

( ) Mainly enjoyable, but a handful of less interesting talks.

( ) A 50 - 50 split

( ) More dull than interesting

( ) Didn't find any interesting

Please elaborate on your answer to the question above. Feel free to reference any

particular people/talks. (Text field)

If we could improve the range of talks, or you have any other interesting ideas regarding

the talks, list them below (Text field)

If you have any other recommendations or ideas, please list them below. (Text field)

This survey may be a little longer, but it is a lot easier to answer and interpret the responses. Asking two or three questions about each of the topics means that, when it comes to processing the results, you can do a little more analysis. For example, imagine that in response to the first survey question you received 30 people saying they had problems making it to the event.

This would have been as much information as you could extract from the results, but with the new set of answers it would be possible to deduce which forms of transport presented people with problems. What's more, you could go on to see whether they were using the map provided or another form of navigation, and use this to target improvements in the future.

Keep in mind, that after 50 questions, the user is most likely to stop reading

Other important additions are the text field questions. These allow your participants to give specific feedback which you can draw from. It's a good idea to not make these compulsory, as they may put people off answering.

To conclude, when writing a survey, you should aim to create one that asks specific questions to obtain more useful information for analysis. Also, remember that it is helpful to gather a little extra background information, as it can be used to better analyze the responses.

It is also important to phrase your questions properly. If people need to answer the questions, and they don't understand them they will close the window and move on. If possible, have someone else proofread your survey before making it publicly available to ensure that the questions are clear.

Survey Bias

In conducting market research, an important key in obtaining unbiased responses is to avoid asking survey participants questions that may influence the responses they provide. Avoiding survey bias helps eliminate responses that may invalidate or skew the data collected. It is quite easy and common for a company or individual without the proper market research training/knowledge to err in this way.  This applies to many things, such as the way a question is phrased, to the types of responses that are available to choose from, to the way that an interviewer presents the questions if data is being collected by phone or in-person.

The following is an example of a biased question:

How much did you enjoy the event?

( )Very much

( )Just a little

( )Not very much

( )Not at all

At first glance, it appears that there is no problem with the structure of this question.  After all, the respondent has choices ranging from "very much" to "not at all." However, the problem is in the way the question is phrased.  By asking the participant "How much" he or she enjoyed the event, the person conducting the survey has already established a bias by assuming that the respondent enjoyed the event in some way or another, which may not be the case.

The following example would be a better way to ask the question in a way that does not influence the participant's response:

How would you rate your overall enjoyment of the event on a scale of 1 - 5: 1 = "Not at all" and 5 = "Completely enjoyed"

1 2 3 4 5

( ) ( ) ( ) ( ) ( )

Rephrasing the question allows the respondent to answer using a scale that makes it easy for him or her to specify the enjoyment level, and makes it easy for the person conducting the survey to tabulate and compare the results with other respondents. Of course, more questions should be added to gather specifics on what the participants enjoyed or didn't enjoy.

This is just one example of how minor changes in wording can improve your survey.