Cómo diseñar una buena encuesta (guía)

'Una guía simple para hacer una buena encuesta' .

LimeSurvey facilita la preparación de una encuesta muy rápidamente. Desafortunadamente, eso hace que armar una mala encuesta también sea muy fácil.

En esta página, encontrará una guía simple para elaborar una encuesta que no solo será fácil de responder para su audiencia, sino que también le dará respuestas significativas.

Este blog también proporciona otra lista útil de "Consejos y trucos de diseño de encuestas"

Antes de hacer una encuesta.

Algunas preguntas importantes deben responderse antes de diseñar cualquier cuestionario, incluso antes de decidir si un cuestionario es el camino correcto.

¿Qué es lo que realmente quieres descubrir con tu investigación?

Basado en eso:

• ¿Una encuesta me ayudará con este problema?
• ¿Cómo puede ayudarme la encuesta a responder el problema?
• ¿Quiénes son las personas adecuadas para preguntar?
• ¿Cómo puede comunicarse con ellos?
• ¿Qué se necesita para que entiendan sus preguntas?
• ¿Cuáles, si los hay, son los métodos estadísticos que desea / necesita utilizar en los datos?

Estos son solo algunos de los problemas que debe tener claros para decidir si LimeSurvey es la herramienta adecuada para usted. LimeSurvey es ideal para cuestionarios completamente estructurados (usted sabe todas las preguntas que podría tener que hacer antes de comenzar la entrevista), estandarizados (todos obtienen más o menos el mismo cuestionario), en su mayoría cuantitativos (se trata principalmente de números o preguntas con respuestas predefinidas) los cuales son recopilados en línea.

Hasta cierto punto, por supuesto, puede variar de esto: puede usar LimeSurvey para recopilar respuestas a algunos tipos de entrevistas telefónicas. Puede usar LimeSurvey para recopilar datos cualitativos, por ejemplo, mediante preguntas de texto.

Pero en algún momento puede llegar a la conclusión de que otros métodos de investigación son más adecuados.

Estructurar un cuestionario.

Para decidir en qué orden hacer las preguntas y cómo agruparlas, hay algunos aspectos a considerar, por ejemplo

Si es posible, comience con preguntas que sean fáciles de responder y que todos los participantes se sientan cómodos respondiendo. A menudo, estas serán preguntas de alguna manera selectivas, es decir, preguntas que debe hacer para averiguar si está preguntando a las personas adecuadas (use condiciones y/o cuotas para tratar estas preguntas de detección)

Poner preguntas "para romper el hielo" al principio podría ayudar a evitar que los participantes abandonen su encuesta, ya que es menos probable que las personas abandonen una vez que ya hayan trabajado un poco para contestar el cuestionario.

 ¿Cuál de las siguientes frutas te gusta?
#Manzanas ()
#Bananas ()
#Cerezas ()

(opción única)

Puede usar Condiciones, para que aparezca la siguiente pregunta sobre cerezas, si el participante elige responder "cerezas".

¿Por qué prefieres las cerezas?
#Son sabrosas
#Me encanta el color
#Son saludables
#Son jugosas
#Me encanta el pastel de cereza.

(pregunta de opción múltiple (o opción única, depende si necesita datos exactos))

¿Cuánto te gustan las cerezas?
#1) ¡No mucho más que otras frutas
#2) ¡Me gustan mucho más que otras frutas
#3) ¡Es una de mis frutas favoritas
#4) ADORO LAS CEREZAS!

(opción única)

¿Conoces alguna receta relacionada con las cerezas?

[campo de texto]

Arriba hay un ejemplo de preguntas fáciles y atractivas seguidas a la pregunta principal.

El objetivo era reunir recetas relacionadas con cerezas, manzanas y plátanos.

Por otra parte.

Si necesita hacer preguntas problemáticas, usted puede pensar en usar diferentes páginas (una página por grupo o una página por pregunta) y poner estas preguntas al final. Con esto, si los participantes deciden interrumpir, al menos se guardan sus respuestas anteriores.

Otro aspecto para la estructura es evitar sesgos introducidos por el cuestionario mismo.

Por ejemplo, en la investigación de mercado hay conceptos que requieren preguntas sin ayuda y con ayuda. Un ejemplo para una pregunta sin ayuda sería:

 "¿Qué marcas de chocolate conoces?"

(seguido de un cuadro de texto vacío)

El ejemplo correspondiente para una pregunta con ayuda sería:

 "¿Cuál de las siguientes marcas de chocolate conoces?"

(seguido de una lista de marcas (opción múltiple))

Si desea incluir ambos en el mismo cuestionario, debe asegurarse nuevamente de ponerlos en diferentes páginas y poner la versión sin ayuda antes de la ayuda; de lo contrario, básicamente enseñará o al menos recordará activamente a los participantes sobre las marcas existentes que invalidarán sus resultados para una siguiente pregunta sin ayuda.

Preguntas individuales

Las preguntas no deben ser sugerentes. Entonces, "¿Cuál es tu opinión sobre LimeSurvey?" es una pregunta aceptable mientras "¿No estás de acuerdo con que LimeSurvey es una herramienta realmente genial?" es muy probable que no.

Ejemplo:

La gente puede decir 'Si' para donar dinero si haces las preguntas de esta manera

• ¿Amas la naturaleza?
• ¿Donarás dinero para ayudar al río?

Pero probablemente diga "no" si hace las preguntas de esta manera:

• ¿Es la falta de dinero un problema para usted?
• ¿Donará dinero para ayudar el río?

Para evitar este tipo de cosas, intente que sus preguntas vayan:

• De lo menos sensible a lo más sensible
• De lo más general a lo más específico
• De preguntas sobre hechos a preguntas sobre opiniones

Además, una pregunta de la encuesta puede ser:

• Abierta (la persona puede responder de la forma que quiera), o
• Cerrada (la persona elige entre una de varias opciones)

Las preguntas cerradas son mucho más fáciles de completar más adelante, pero pueden impedir que las personas den la respuesta que realmente desean.

Ejemplo: "¿Cuál es tu color favorito?"

Pregunta abierta: Alguien puede responder "fucsia oscuro", en cuyo caso deberá tener una categoría "fucsia oscuro" en sus resultados.

Pregunta cerrada: con una opción de solo 12 colores, su trabajo será más fácil, pero es posible que no puedan elegir su color favorito exacto.

Mire cada una de sus preguntas y decida si deben ser abiertas o cerradas (también aproveche la oportunidad para volver a escribir cualquier pregunta.)

Ejemplo: "¿Cuál crees que es la mejor manera de limpiar el río"?

Hágala Abierta: las respuestas no serán fáciles de poner en una tabla o gráfico, pero puede obtener algunas buenas ideas, y puede haber algunas buenas citas para su informe.

Ejemplo: " ¿Con qué frecuencia visitas el río? "

Hazla Cerrada con las siguientes opciones:

• Casi todos los días
• Al menos 5 veces al año
• De 1 a 4 veces al año
• Casi nunca

Podrá presentar estos datos en un gráfico de barras ordenado.

Cuando trabaje con opciones múltiples o preguntas de opción única, asegúrese de elegir la correcta y formular las preguntas y respuestas de manera adecuada.

Por ejemplo:

 ¿Cuál de las siguientes frutas te gusta?
#Manzanas ()
#Bananas ()
#Cerezas ()

es una pregunta típica de opción múltiple, ya que le pueden gustar varias de ellas, al contrario "¿Cuál de las siguientes frutas prefiere?" Es una pregunta de elección única.

Ambos ejemplos de frutas se han formulado para dejar en claro que solo se trata de la fruta que figura como respuesta. Si tu pregunta fuera "¿Cuál es tu fruta favorita?" deberías tener una lista realmente exhaustiva de frutas o, más probablemente, usar la configuración de LimeSurvey para agregar un campo "otro". En términos más generales, las opciones de respuesta en la mayoría de los casos deben ser completas, mutuamente excluyentes y definidas.

Si tiene preguntas de opción múltiple o única con muchas opciones de respuestas, debe tener en cuenta que esto podría introducir otro sesgo, ya que es probable que los participantes presten más atención a las primeras opciones que a las del medio. LimeSurvey ofrece una buena opción para aleatorizar el orden de las preguntas y, en cierta medida, disminuir este problema.

¿Qué hace una buena encuesta?

Hay 3 características de una encuesta que pueden ser útiles:

1. Las preguntas son claras y precisas, permitiendo colectivamente respuestas detalladas, inequívocas y significativas.
2. Todas las respuestas predefinidas proporcionadas y sus formatos son apropiados para la pregunta.
3. Hay espacio para que las personas agreguen información adicional si lo necesitan.

Además de eso, siempre tenga en cuenta la experiencia del usuario. Leer, desplazarse y hacer clic son actividades agotadoras, por lo tanto:

1. Evite cualquier pregunta innecesaria
2. Use condiciones para evitar hacer preguntas que no sean relevantes para un participante específico.
3. Mantenga las preguntas y respuestas cortas y fáciles de leer: use el marcado apropiado.
4. Piense en la compensación entre desplazarse y hacer clic. Mostrar todo en una página para cuestionarios cortos (5-15 preguntas, dependiendo de la complejidad de la pregunta). Use los grupos sabiamente para cuestionarios más largos, es decir, agrupe las preguntas de manera comprensible; use descripciones de grupo para dar una declaración clara sobre el tema de las siguientes preguntas.
5. Evite confundir a los participantes con diferentes escalas, es decir, limite la cantidad de escalas diferentes, ámbitos de escala y descripciones de escalas diferentes tanto como sea posible. Intenta no cambiar la dirección de las escalas. (Hay algunas excepciones metodológicas).
6. Para escalas de calificación, podría ser útil utilizar un número par de opciones de calificación para que el usuario tenga que decidir una determinada dirección (ver más abajo).

 Ejemplo de buenas escalas de respuesta:

1. Muy bueno

2. Bueno

3. Bastante bueno

4. No tan bueno

5. Malo

6. Muy malo

Ejemplo para escalas de mala respuesta:

1. Bueno

2. Justo

3. Malo

The best way to start designing a survey is to take a second to imagine your ideal feedback. It goes without saying that meaningful responses are the most useful ones, so try to create questions which invite these answers.

How can you go about that? The best method is to split up all the areas and decide on what information you need.

For example, imagine you held an event, open to the public, and needed to get some general feedback about the event.

A "bad" survey might be similar to the following:

Did you enjoy the Event?

( ) Yes

( ) No

How good was the wifi?

1 2 3 4 5 6 7 8 9 10

( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )

Did you arrive OK?

( ) Yes

( ) No

Was the provided map OK?

( ) Yes

( ) No

Were how did you feel about the mixture of speakers?

( ) Very sad ( ) Sad( ) Neutral ( ) Happy ( ) Very Happy

Matrix questions.

That may be a bit of a generalisation, but its a good rule to live by. Anything that involves a scale of any sort should be avoided unless you want an answer that can be measured on a scale, like age, time (maybe) or quantities. Similarly, a matrix of compulsory questions can be a bit of a deterrent for your audience as not only are they badly structured, but they don't allow for any extra information.

Chances are if someone is completing your survey they want to give feedback, and if they don't think they can share anything useful they'll just close the window and move on.

So what's wrong with the survey above?

Let's look at each question step by step.

Question 1 doesn't really achieve anything. Imagine receiving 100 "no" responses. Firstly you'd be sad, but secondly you would have absolutely nothing to do with the information. We'll look at a possible improvement to this in a moment.

Question 2 is so bad it's painful. If we go back to our 3 steps, we see that the questions need to be clear and precise. I'm not an expert in Wifi but I'm fairly certain you don't measure it in "goods". What's more, it doesn't allow for a meaningful answer – What will you do with the knowledge that while 33% of people rated your wifi as being good, only 23% rated it as good? Point number 2 tells us that the predefined answers need to be appropriate to the question.

It's fairly obvious that a scale of 1 to 10 won't help you improve on the quality of your wifi. The real killer in this one is the need to have space for people to add additional information. How could someone report a specific problem?

In this case? It's impossible. Surveys are all about finding out something you can work with or learn from.

The next two questions have the same result – they provide a platform for people to say yes or no. And neither of those questions allow for detail. In a better survey, which we'll consider in a moment, you could learn particular problems from specific people.

The final question is another painful one. Asking for the level of satisfaction about something is pretty much useless, as every person has different interests, and so everyone will likely have different opinions on each speaker. It's another example of where a range question is being used and shouldn't be.

Have a look at the improved survey there.

Did you make use of the in-house wifi?

( ) Yes

( ) No

Did you experience any problems?

( ) No problems at all

( ) A couple of small issues, nothing major

( ) One or two severe issues

( ) The wifi was nearly totally unusable.

If you experienced problems, could you briefly describe them? (Text field)

Did you arrive ok?

( ) Yes

( ) No

How did you come to our event?

( ) Train

( ) Car

( ) Bus

( ) Light Rail (IE Tube, Tram)

( ) Walk

Did you use the map from our website?

( ) Yes

( ) No

If you looked at the map, was it detailed enough?

( ) Yes

( ) It gave me a rough idea, I used another map for more detail though

( ) Not detailed at all.

If you didn't use the map, why not?

( ) Not enough detail

( ) I used a satnav/google maps instead

( ) I didn't even know it existed!

Generally speaking, were the speakers interesting? Did you enjoy the presentations?

( ) Nearly all were interesting and thoroughly enjoyable

( ) Mainly enjoyable, but a handful of less interesting talks.

( ) A 50 – 50 split

( ) More dull than interesting

( ) Didn't find any interesting.

Please elaborate on your answer to the question above. Feel free to reference any

particular people/talks. (Text field)

If we could improve the range of talks, or you have any other interesting ideas regarding

the talks, list them below (Text field)

If you have any other recommendations or ideas, please list them below. (Text field)

This survey may be a little longer, but it's a lot easier to both answer and interpret the answers from. Asking two or three questions about each of the topics means that when it comes to processing the results you can do a little more analysis. For example. Imagine, in response to the first survey you received 30 people saying they didn't arrive OK.

This would have been as much information as you could possibly extract from the results, but with our new set of answers it would be possible to deduce which forms of transport presented people with trouble. What's more, you could go on to see whether they were using a provided map or another form, and use this to target improvements for the future.

Keep in mind, that after 50 questions, the user is most likely to not read the question anymore.

Other important additions are the text field questions – these allow your audience to give specific feedback which you can draw from. It's a good idea to not make these compulsory though, as they may put people off answering.

To conclude, when writing a survey you should aim to create one which asks specific questions targeted to the issues you need to answer. Also remember that it doesn't do any harm to gather a little extra background information as you can use it all to get better information from the result.

It's also important to phrase your questions well, as if people need to answer the questions and they don't understand them, they'll close the window and move on. Try to hand your survey to someone else to proof read before making it publicly available to ensure its definitely crystal clear what the question is asking.

Survey Bias

In obtaining market research, one of the most critical things to avoid is the issue of survey bias - that is, asking the respondent questions which may influence the results he or she provides and thus invalidates or skews your data.  It is very easy and common for a company or individual without the proper market research education and experience to err in this way.  This extends to many things, such as the way a question is phrased, to the types of responses which are available, to the way that an interviewer presents the questions if data is being collected by phone or in-person.

For example, a biased survey question may be written as such:

How much did you enjoy the event?

( )Very much

( )A little bit

( )Not very much

( )Not at all

At first glance, it appears that there is no problem with the structure of this question.  After all, the respondent is able to provide his or her answer from "very much" to "not at all".  However, the problem appears in the question phrasing itself.  By asking the respondent "How much" he or she enjoyed the event, the interview has already established a bias by assuming that the respondent enjoyed the event in some way or another, which may not be the case.

The following example would be a far better what to ask the question which does not lead or bias the respondent in any way:

How would you rate your overall enjoyment of the event on a 1 to 5 scale, where 1 is "Not at all enjoyed" and 5 is "Completely enjoyed"

1 2 3 4 5

( ) ( ) ( ) ( ) ( )

Using this modified question, the respondent is not led to the assumption that any enjoyment was had, and is able to supply an answer in a numerical way that makes it easy for him or her to specify the enjoyment level, and makes it easy for the survey solicitor to tabulate and compare the results with other respondents.

This is just one minor example of a good survey design principle.  This understanding extends to all things.