How to design a good survey (guide)/pl

„Prosty przewodnik po tworzeniu dobrej ankiety”

LimeSurvey ułatwia bardzo szybkie przygotowanie ankiety. Niestety, dzięki temu utworzenie złej ankiety jest również bardzo łatwe.

Na tej stronie znajdziesz prosty przewodnik dotyczący tworzenia ankiety, której wypełnienie będzie nie tylko bezbolesne dla odbiorców; ale także udzieli sensownych odpowiedzi.

Blog „Wskazówki i wskazówki dotyczące projektowania ankiet” zawiera także inne bardzo przydatne informacje.

Przed dokonaniem ankiety

Przed zaprojektowaniem jakiegokolwiek kwestionariusza należy odpowiedzieć na kilka ważnych pytań – a właściwie nawet przed podjęciem decyzji, czy kwestionariusz jest właściwym rozwiązaniem.

Czego tak naprawdę chcesz się dowiedzieć w ramach swoich badań?

Kiedy już odpowiesz na to pytanie, zadaj następujące pytanie:

• Czy ankieta pomoże mi uzyskać informacje potrzebne do moich badań?
• Kim są właściwe osoby, aby zadać to pytanie aby wypełnić ankietę?
• Jak mogę mieć pewność, że dotrę do właściwych osób?
• Jak najlepiej pomóc osobom wypełniającym ankietę w pełni zrozumieć pytania (aby uzyskane informacje były dokładne/użyteczne)?
• 'Jakie, jeśli w ogóle, metody statystyczne (do analizy danych) chcę/muszę zastosować na danych po ich zebraniu ?

To tylko kilka pytań, na które potrzebujesz jasnych odpowiedzi, decydując, czy LimeSurvey jest dla Ciebie właściwym narzędziem.

LimeSurvey świetnie nadaje się do zastosowań w pełni ustrukturyzowanych (znasz wszystkie pytania, które możesz zadać przed rozpoczęciem rozmowy kwalifikacyjnej), standaryzowanych (każdy otrzymuje mniej więcej ten sam kwestionariusz), głównie ilościowych (chodzi głównie o liczby lub pytania z predefiniowanymi odpowiedziami) ankiety zbierane online.

W pewnym stopniu można oczywiście od tego odbiegać. Możesz używać LimeSurvey do zbierania odpowiedzi na niektóre rodzaje rozmów telefonicznych. Możesz także wykorzystać LimeSurvey do zbierania danych jakościowych, np. za pomocą pytań tekstowych.

Jednak w pewnym momencie możesz dojść do wniosku, że bardziej odpowiednie będą inne metody badawcze.

Tworzenie kwestionariusza

Aby zdecydować, w jakiej kolejności zadawać pytania i jak je pogrupować, należy wziąć pod uwagę kilka aspektów.

Jeśli to możliwe, zacznij od pytań, na które łatwo odpowiedzieć i na które wszyscy uczestnicy czują się swobodnie. Często będą to pytania sprawdzające, tj. pytania, które należy zadać, aby dowiedzieć się, czy zadaje się je właściwym osobom (użyj warunki i/lub limity, aby poradzić sobie z tymi kontrolami pytania).

Umieszczenie tego typu pytań na początku może pomóc uniknąć opuszczenia ankiety przez uczestników przed jej ukończeniem, ponieważ istnieje mniejsze prawdopodobieństwo, że ludzie opuszczą ankietę, gdy włożyli już trochę pracy w udzielenie odpowiedzi na pytania wprowadzające/przesiewowe.

Przykłady:

 Który z poniższych owoców lubisz?
#Jabłka ()
#Banany ()
#Wiśnie ()

(jeden wybór)

Możesz użyć warunków, aby wyświetlić następne pytanie dotyczące wiśni, jeśli uczestnik wybrał „wiśnie”.

Dlaczego wolisz wiśnie?
#Są smaczne
#Uwielbiam ten kolor
#Są zdrowe
#Są soczyste
#Uwielbiam ciasto wiśniowe

(pytanie wielokrotnego wyboru (lub pojedynczego wyboru, zależy od tego, czy potrzebujesz dokładnych danych))

Jak bardzo lubisz wiśnie?
#1) Niewiele bardziej niż inne owoce
#2) Lubisz je bardziej niż inne owoce
#3) To jeden z moich ulubionych owoców!
#4) KOCHAM WIŚNIE!

(jeden wybór)

Znacie jakieś przepisy z wiśniami?

[pole tekstowe]

Powyżej znajduje się przykład łatwych do odpowiedzi pytań wprowadzających, po których następuje pytanie główne.

Celem było zebranie przepisów z wiśniami, jabłkami i bananami.

Z drugiej strony, jeśli chcesz zadawać pytania, na które trudno odpowiedzieć, możesz rozważyć użycie osobnych stron dla każdego pytania lub grupy pytań i umieszczenie tych pytań na samym końcu. Dzięki temu, jeśli uczestnicy zdecydują się nie wypełniać ankiety, zapisane zostaną przynajmniej ich poprzednie odpowiedzi.

Należy wziąć pod uwagę jeszcze jedną kwestię dotyczącą struktury – unikaj uprzedzeń wprowadzonych przez sam kwestionariusz.

Na przykład w badaniach rynku istnieją koncepcje, które wymagają pytań samodzielnych i wspomaganych.

Przykładem pytania niewspomaganego może być:

„Jakie marki czekolady znasz?”

(po którym następuje puste pole tekstowe)

Poniżej znajduje się przykład pytania wspomaganego:

„Które z poniższych marek czekolady znasz?”

(po którym następuje lista marek (wielokrotny wybór))

Jak wspomniano wcześniej, jeśli zdecydujesz się na umieszczenie obu typów pytań (wspomaganych i niewspomaganych) w tym samym kwestionariuszu, powinieneś umieścić je na różnych stronach i umieścić pytania niewspomagane przed pytaniami wspomaganymi. Umieszczenie pytania wspomaganego przed pytaniem bez pytania może w sposób niezamierzony wpłynąć na odpowiedź uczestników, co unieważni Twoje wyniki.

Pytania indywidualne

Pytania nie powinny mieć charakteru sugestywnego. „Jaka jest Twoja opinia o LimeSurvey?” jest akceptowalnym (nie sugestywnym) pytaniem, podczas gdy „Czy nie zgadzasz się, że LimeSurvey to naprawdę świetne narzędzie?” to sugestywne pytanie.

Inne przykłady i sugestie dotyczące formułowania pytań:

Ludzie mogą powiedzieć „tak””’’ na rzecz przekazania pieniędzy, jeśli zadają pytania w następujący sposób:

• „Czy kochasz przyrodę?”
• „Czy przekażesz pieniądze na rzecz rzeki ?

Prawdopodobnie odpowiedzą „nie” na takie pytanie:

• „Czy brak pieniędzy jest dla Ciebie problemem?”
• „Czy przekażesz pieniądze na rzecz fundacji rzeka?

Aby uzyskać właściwe odpowiedzi, uporządkuj pytania:

• od najmniej drażliwych do najbardziej drażliwych
• od ogólnych do bardziej szczegółowych
• od pytań o fakty do pytań o opinie

Pytaniem w ankiecie może być także:

• Otwarte (osoba odpowiada własnymi słowami) lub
• Zamknięte (osoba wybiera spośród ograniczona liczba opcji)

Pytania zamknięte są znacznie łatwiejsze do analizy, ale mogą nie pozwolić respondentom na udzielenie odpowiedzi, której naprawdę chcą.

Przykład: „Jaki jest twój ulubiony kolor?”

„Otwarte”: Ktoś może odpowiedzieć „ciemna fuksja”, w takim przypadku w swoich wynikach będziesz musiał umieścić kategorię „ciemna fuksja”.

„Zamknięte”: Mając do wyboru tylko 12 kolorów, Twoja praca będzie łatwiejsza, ale respondenci mogą nie być w stanie wybrać dokładnie swojego ulubionego koloru.

Dokładnie rozważ każde pytanie i zdecyduj, czy mają one mieć charakter otwarty, czy zamknięty. Jeśli potrzebujesz głębszego wglądu w odpowiedzi, użyj pytań otwartych. Jeżeli tak nie jest, można zastosować pytania zamknięte.

Przykład (otwarty): „Jak myślisz, jak najlepiej oczyścić rzekę”?

Uczyń go „otwartym”: odpowiedzi mogą nie być łatwe do umieszczenia w tabeli lub na wykresie, ale możesz uzyskać głęboki wgląd w ludzkie uczucia i pomysły dotyczące oczyszczenia rzeki lub środowiska, a także użyć bezpośrednich cytatów w Twoje raportowanie.

Przykład (zamknięty): „”Jak często odwiedzasz rzekę?”

Zrób to „zamkniętym” z następującymi opcjami:

• Prawie codziennie
• Co najmniej 5 razy w roku
• 1 do 4 razy w roku
• Prawie nigdy

Dane te będziesz mógł przedstawić na schludnym wykresie słupkowym.

Pracując z pytaniami wielokrotnego lub pojedynczego wyboru, pamiętaj o wybraniu odpowiedniego rodzaju pytania i odpowiednim sformułowaniu zarówno pytań, jak i odpowiedzi.

Na przykład:

Który z poniższych owoców lubisz?
#Jabłka ()
#Banany ()
#Wiśnie ()

Powyższe jest typowym pytaniem wielokrotnego wyboru, ponieważ możesz polubić kilka pozycji na liście. Z drugiej strony: „Który z poniższych owoców wolisz najbardziej?” to pytanie jednokrotnego wyboru.

Obydwa przykłady owoców zostały sformułowane tak, aby było jasne, że Twoim problemem są wyłącznie wymienione owoce. Jeśli zapytasz: „Jaki jest twój ulubiony owoc?”, powinieneś albo mieć naprawdę wyczerpującą listę owoców, albo, co bardziej prawdopodobne, użyć ustawienia LimeSurvey, aby dodać pole „inne”. Ogólnie rzecz biorąc, opcje odpowiedzi w większości przypadków muszą być kompletne, wzajemnie się wykluczające i określone.

Jeśli masz pytania wielokrotnego lub pojedynczego wyboru z wieloma opcjami do wyboru, musisz mieć świadomość, że może to wprowadzić kolejne uprzedzenie, ponieważ uczestnicy prawdopodobnie skupią swoją uwagę na pierwszych opcjach, a nie na tych pośrodku . LimeSurvey oferuje świetną opcję losowania kolejności pytań i w pewnym stopniu wyeliminowania tego problemu.

Co wyróżnia dobrą ankietę?

Ankieta ma 3 cechy, które pomogą uzyskać właściwe odpowiedzi potrzebne do dokładniejszej oceny:

1. Pytania są jasne i precyzyjne, a łącznie umożliwiają udzielenie szczegółowych, jednoznacznych i znaczących odpowiedzi.
2. Wszystkie dostarczone predefiniowane odpowiedzi i ich formaty są odpowiednie do pytania.
3. W razie potrzeby można dodać dodatkowe informacje.

Co więcej, zawsze pamiętaj o doświadczeniu użytkownika. Czytanie, przewijanie i klikanie to męczące czynności. Zatem:

1. Unikaj niepotrzebnych pytań.
2. Używaj warunków, aby unikać zadawania pytań nieistotnych dla konkretnego uczestnika.
3. Pytania i odpowiedzi powinny być krótkie i łatwe do odczytania – użyj odpowiednich znaczników.
4. Zastanów się nad kompromisem między przewijaniem a klikaniem. W przypadku krótkich kwestionariuszy wyświetl wszystko na jednej stronie (5-15 pytań, w zależności od złożoności pytania). W przypadku dłuższych kwestionariuszy korzystaj z grup mądrze, tj. zadawaj pytania grupowe w sposób zrozumiały. Użyj opisów grup, aby jasno określić temat poniższych pytań.
5. Unikaj mylenia uczestników różnymi skalami, tj. w miarę możliwości ograniczaj liczbę różnych typów skal, zakresów skali i różnych opisów skal. Staraj się nie zmieniać kierunku łusek. (Istnieją pewne wyjątki metodologiczne).
6. W przypadku skal ocen przydatne może być użycie parzystej liczby opcji oceny, aby ułatwić respondentom podjęcie decyzji (patrz poniżej).

Przykład skali odpowiedzi określającej, jak „dobre” jest coś:

1. Bardzo dobrze

2. Dobrze

3. Całkiem nieźle

4. Niezbyt dobrze

5. Złe

6. Bardzo źle

Przykład skali odpowiedzi określającej, jak „złe” jest coś:

1. Dobrze

2. Uczciwe

3. Złe

Najlepszym sposobem na rozpoczęcie projektowania ankiety jest poświęcenie chwili na wyobrażenie sobie idealnej informacji zwrotnej. Jest rzeczą oczywistą, że sensowne odpowiedzi są najbardziej przydatne, więc spróbuj stworzyć pytania, które zachęcają do tych odpowiedzi.

Jak możesz się do tego zabrać? Najlepszą metodą jest oddzielenie wszystkich obszarów i podjęcie decyzji, jakich informacji potrzebujesz.

Wyobraź sobie na przykład, że organizujesz wydarzenie otwarte dla publiczności i potrzebujesz uzyskać ogólną opinię na temat wydarzenia.

Poniższa ankieta jest przykładem ankiety, która może nie być wystarczająca do uzyskania przydatnych odpowiedzi:

Czy podobało Ci się wydarzenie?

( ) Tak

( ) NIE

Jak dobry był Wi-Fi?

1 2 3 4 5 6 7 8 9 10

( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )

Czy mieliście problemy z dotarciem na wydarzenie?

( ) Tak

( ) NIE

Czy dostarczona mapa była pomocna?

( ) Tak

( ) NIE

Jakie były Twoje odczucia co do miksu głośników?

( ) Bardzo smutny ( ) Smutny ( ) Neutralny ( ) Szczęśliwy ( ) Bardzo szczęśliwy

Pytania matrycowe byłyby lepszym wyborem w powyższym scenariuszu.

Pytania matrycowe.

Zasadniczo skale należy stosować wyłącznie do pytań dotyczących wieku, czasu (być może) lub ilości. Aby uzyskać jak najbardziej użyteczną informację zwrotną, pytania matrycowe muszą być odpowiednio sformułowane. Pamiętaj, że zestaw pytań obowiązkowych może działać nieco odstraszająco na odbiorców, ponieważ jeśli nie jest odpowiednio skonstruowany, nie pozwala na zebranie żadnych dodatkowych informacji.

Istnieje prawdopodobieństwo, że jeśli ktoś wypełnia Twoją ankietę, chce podzielić się swoją opinią, a jeśli nie uważa, że może podzielić się z nią czymś przydatnym, po prostu zamknie okno i przejdzie dalej.

Co więc jest nie tak z powyższą ankietą?

Przyjrzyjmy się każdemu pytaniu jeden po drugim.

„Pytanie 1” tak naprawdę niczego nie daje. Wyobraź sobie, że otrzymujesz 100 odpowiedzi „nie”. Sama odpowiedź nie dostarcza żadnych użytecznych informacji na temat tego, dlaczego uczestnikowi nie podobało się wydarzenie. Zastanawiałbyś się nad powodem odpowiedzi „nie”, a także zastanawiałbyś się, co zrobić z odpowiedziami. Za chwilę przyjrzymy się możliwym ulepszeniom tego rozwiązania.

„Pytanie 2” jest gorsze od pierwszego. Wracając do 3 cech dobrej ankiety, widzimy, że pytania muszą być jasne i precyzyjne. Nie jestem ekspertem w dziedzinie Wi-Fi, ale jestem całkiem pewien, że istnieją lepsze sposoby pomiaru tego. Co więcej, nie pozwala na sensowną odpowiedź na pytanie typu: „Co zrobisz ze świadomością, że 33% osób oceniło Twoją sieć Wi-Fi jako dobrą w porównaniu z tylko 23%?” Trzy cechy dobrej ankiety stwierdzają również, że predefiniowane odpowiedzi muszą być adekwatne do pytania.

Jest dość oczywiste, że użycie skali w tym pytaniu nie pomoże poprawić jakości Wi-Fi. Zdecydowanie konieczne jest, aby w tym pytaniu było miejsce na dodanie dodatkowych informacji. Jak ktoś mógłby zgłosić konkretny problem, nie będąc w stanie go rozwinąć?

W takim przypadku posiadanie wystarczającej ilości informacji, aby właściwie rozwiązać problemy uczestników z Wi-Fi, byłoby prawie niemożliwe. Celem ankiet jest uzyskanie przydatnych informacji, z którymi możesz pracować lub się z nich uczyć.

„Pytania 3 i 4” miałyby takie same wyniki jak dwa pierwsze pytania. Pozwalają jedynie na odpowiedź „tak” lub „nie” i żadne z nich nie daje możliwości dodania szczegółów. W tej sekcji podajemy sugestie, jak ulepszyć tego typu pytania.

„Pytanie 5”, ostatnie pytanie, jest kolejnym nieskutecznym. Pytanie o poziom zadowolenia z czegoś nie jest zbyt przydatne, ponieważ każda osoba ma inne zainteresowania, a zatem każdy prawdopodobnie będzie miał inne zdanie na temat każdego mówcy. To kolejny przykład sytuacji, w której pytanie „skala” zostało użyte, a nie powinno.

Spójrz na ulepszoną ankietę poniżej.

Czy korzystałeś z domowego Wi-Fi?

( ) Tak

( ) NIE

Czy napotkałeś jakieś problemy z Wi-Fi?

( ) Żadnych problemów

( ) Kilka drobnych problemów, nic wielkiego

( ) Jedna lub dwie poważne kwestie

( ) Wi-Fi było prawie całkowicie bezużyteczne.

Jeśli napotkałeś problemy, czy możesz je krótko opisać? (Pole tekstowe)

Czy mieliście jakieś problemy z dotarciem na wydarzenie?

( ) Tak

( ) NIE

Jak trafiłeś na nasze wydarzenie?

( ) Pociąg

( ) Samochód

( ) Autobus

( ) Tramwaj (IE Tube, Tramwaj)

( ) Chodzić

Korzystałeś z mapy z naszej strony?

( ) Tak

( ) NIE

Jeśli spojrzałeś na mapę, czy była ona wystarczająco szczegółowa?

( ) Tak

( ) To dało mi pewien pogląd. Użyłem jednak innej mapy, aby uzyskać więcej szczegółów.

( ) Wcale nie szczegółowe

Jeśli nie korzystałeś z mapy, dlaczego nie?

( ) Za mało szczegółów

( ) Zamiast tego użyłem nawigacji satelitarnej/map Google.

( ) Nawet nie wiedziałem, że coś takiego istnieje!

Ogólnie rzecz biorąc, czy prelegenci byli interesujący? Czy podobały Ci się prezentacje?

( ) Prawie wszystkie były interesujące i bardzo przyjemne

( ) Głównie przyjemne, ale kilka mniej interesujących rozmów.

( ) Podział 50–50

( ) Bardziej nudne niż interesujące

( ) Nie znalazłem żadnego interesującego

Please elaborate on your answer to the question above. Feel free to reference any

particular people/talks. (Text field)

If we could improve the range of talks, or you have any other interesting ideas regarding

the talks, list them below (Text field)

If you have any other recommendations or ideas, please list them below. (Text field)

This survey may be a little longer, but it is a lot easier to answer and interpret the responses. Asking two or three questions about each of the topics means that, when it comes to processing the results, you can do a little more analysis. For example, imagine that in response to the first survey question you received 30 people saying they had problems making it to the event.

This would have been as much information as you could extract from the results, but with the new set of answers it would be possible to deduce which forms of transport presented people with problems. What's more, you could go on to see whether they were using the map provided or another form of navigation, and use this to target improvements in the future.

Keep in mind, that after 50 questions, the user is most likely to stop reading

Other important additions are the text field questions. These allow your participants to give specific feedback which you can draw from. It's a good idea to not make these compulsory, as they may put people off answering.

To conclude, when writing a survey, you should aim to create one that asks specific questions to obtain more useful information for analysis. Also, remember that it is helpful to gather a little extra background information, as it can be used to better analyze the responses.

It is also important to phrase your questions properly. If people need to answer the questions, and they don't understand them they will close the window and move on. If possible, have someone else proofread your survey before making it publicly available to ensure that the questions are clear.

Survey Bias

In conducting market research, an important key in obtaining unbiased responses is to avoid asking survey participants questions that may influence the responses they provide. Avoiding survey bias helps eliminate responses that may invalidate or skew the data collected. It is quite easy and common for a company or individual without the proper market research training/knowledge to err in this way.  This applies to many things, such as the way a question is phrased, to the types of responses that are available to choose from, to the way that an interviewer presents the questions if data is being collected by phone or in-person.

The following is an example of a biased question:

How much did you enjoy the event?

( )Very much

( )Just a little

( )Not very much

( )Not at all

At first glance, it appears that there is no problem with the structure of this question.  After all, the respondent has choices ranging from "very much" to "not at all." However, the problem is in the way the question is phrased.  By asking the participant "How much" he or she enjoyed the event, the person conducting the survey has already established a bias by assuming that the respondent enjoyed the event in some way or another, which may not be the case.

The following example would be a better way to ask the question in a way that does not influence the participant's response:

How would you rate your overall enjoyment of the event on a scale of 1 - 5: 1 = "Not at all" and 5 = "Completely enjoyed"

1 2 3 4 5

( ) ( ) ( ) ( ) ( )

Rephrasing the question allows the respondent to answer using a scale that makes it easy for him or her to specify the enjoyment level, and makes it easy for the person conducting the survey to tabulate and compare the results with other respondents. Of course, more questions should be added to gather specifics on what the participants enjoyed or didn't enjoy.

This is just one example of how minor changes in wording can improve your survey.