Konstrukcja kwestionariusza

Konstrukcja kwestionariusza odnosi się do zaprojektowania kwestionariusza w celu zebrania przydatnych statystycznie informacji na dany temat. Prawidłowo skonstruowane i odpowiedzialnie zarządzane kwestionariusze mogą dostarczyć cennych danych na dowolny temat.

Kwestionariusze

Kwestionariusze są często wykorzystywane w ilościowych badaniach marketingowych i badaniach społecznych . Są cenną metodą zbierania szerokiego zakresu informacji od dużej liczby osób, często określanych mianem respondentów.

To, co jest często określane jako „odpowiednia konstrukcja kwestionariusza”, ma kluczowe znaczenie dla powodzenia badania. Niewłaściwe pytania, niewłaściwa kolejność pytań, nieprawidłowe skalowanie lub zły format kwestionariusza mogą sprawić, że wyniki ankiety będą bezwartościowe, ponieważ mogą nie odzwierciedlać dokładnie poglądów i opinii uczestników.

Różne metody mogą być przydatne do sprawdzenia kwestionariusza i upewnienia się, że dokładnie zawiera on zamierzone informacje. Wstępna porada może obejmować:

  • konsultacje ze specjalistami merytorycznymi
  • korzystanie z wytycznych dotyczących konstrukcji kwestionariuszy w celu informowania o projektach, takich jak metoda projektowania dostosowanego lub opracowywane przez krajowe organizacje statystyczne.

Testy empiryczne dają również wgląd w jakość kwestionariusza. Można to zrobić przez:

  • przeprowadzanie wywiadu poznawczego . Badacz może zapytać próbę potencjalnych respondentów o ich interpretację pytań i wykorzystanie kwestionariusza
  • przeprowadzenie małego testu wstępnego kwestionariusza, z wykorzystaniem niewielkiej grupy docelowych respondentów. Wyniki mogą informować badacza o błędach, takich jak brakujące pytania lub błędy logiczne i proceduralne.
  • oszacowanie jakości pomiaru pytań. Można to zrobić na przykład za pomocą modeli test-retest, quasi-simplex lub mutlitrait-multimethod.
  • przewidywania jakości pomiaru pytania. Można to zrobić za pomocą oprogramowania Survey Quality Predictor (SQP).

Rodzaje pytań

  • Pytania zamknięte – Odpowiedzi respondentów są ograniczone do ustalonego zestawu odpowiedzi.
    • Pytania tak/nie – respondent odpowiada „tak” lub „nie”.
    • Wielokrotnego wyboru – respondent ma kilka opcji do wyboru.
    • Pytania skalowane – Odpowiedzi są oceniane na kontinuum (np.: oceń wygląd produktu w skali od 1 do 10, gdzie 10 to najbardziej preferowany wygląd). Przykłady typów skal obejmują skalę Likerta , semantyczną skalę różniczkową i skalę rang. (Patrz skala w celu uzyskania dalszych informacji)
    • Pytania macierzowe – Identyczne kategorie odpowiedzi są przypisane do wielu pytań. Pytania są umieszczone jedno pod drugim, tworząc macierz z kategoriami odpowiedzi na górze i listą pytań na dole. Jest to efektywne wykorzystanie miejsca na stronie i czasu respondentów.
  • Pytania otwarte – nie sugeruje się żadnych opcji ani predefiniowanych kategorii. Respondent udziela własnej odpowiedzi, nie będąc ograniczonym ustalonym zestawem możliwych odpowiedzi. Przykłady obejmują:
    • Całkowicie nieustrukturyzowany — na przykład „Jaka jest Twoja opinia na temat kwestionariuszy?”
    • Skojarzenie słów – prezentowane są słowa, a respondent wymienia pierwsze słowo, które przychodzi mu na myśl.
    • Uzupełnienie zdania – respondenci uzupełniają niepełne zdanie. Na przykład: „Najważniejszym czynnikiem, który brałem pod uwagę przy podejmowaniu decyzji o zakupie nowego domu, jest…”
    • Uzupełnienie historii – respondenci uzupełniają niekompletną historię.
    • Uzupełnianie obrazu – respondenci wypełniają pusty dymek z wypowiedzią .
    • Test apercepcji tematycznej – Respondenci wyjaśniają obraz lub tworzą opowieść o tym, co według nich dzieje się na obrazku.
  • Pytanie awaryjne – pytanie, na które udziela się odpowiedzi tylko wtedy, gdy respondent udzieli określonej odpowiedzi na poprzednie pytanie. Pozwala to uniknąć zadawania pytań osobom, które ich nie dotyczą (na przykład pytania mężczyzn, czy kiedykolwiek byli w ciąży).

Skale wieloelementowe

Oznaczony przykład wieloelementowej skali psychometrycznej stosowanej w kwestionariuszach

W badaniach i praktyce nauk społecznych kwestionariusze są najczęściej wykorzystywane do zbierania danych ilościowych za pomocą wieloitemowych skal o następujących cechach:

  • badanej zmiennej przedstawiono wiele stwierdzeń lub pytań (minimum ≥3; zwykle ≥5) .
  • Każdemu stwierdzeniu lub pytaniu towarzyszy zestaw równoodległych punktów odpowiedzi (zwykle 5-7).
  • Każdemu punktowi odpowiedzi towarzyszy słowna kotwica (np. „zdecydowanie się zgadzam”) rosnąca od lewej do prawej.
  • Kotwice werbalne powinny być zrównoważone, aby odzwierciedlały równe odstępy między punktami odpowiedzi.
  • Łącznie zestaw punktów odpowiedzi i towarzyszących im werbalnych kotwic określa się jako skalę ocen . Bardzo często używaną skalą ocen jest skala Likerta .
  • Zwykle, dla przejrzystości i efektywności, w kwestionariuszu prezentowany jest jeden zestaw kotwic dla wielu skal ocen.
  • Łącznie stwierdzenie lub pytanie wraz z towarzyszącą mu skalą ocen jest określane jako pozycja.
  • Gdy wiele pozycji mierzy tę samą zmienną w rzetelny i trafny sposób, określa się je zbiorczo jako skalę wieloelementową lub skalę psychometryczną .
  • Dla skali wieloitemowej należy ustalić następujące rodzaje rzetelności i trafności: rzetelność wewnętrzna , rzetelność test-retest (jeśli oczekuje się, że zmienna będzie stabilna w czasie), trafność treściowa , trafność konstrukcyjna i trafność kryterialna .
  • Analiza czynnikowa jest wykorzystywana w procesie tworzenia skali.
  • Kwestionariusze służące do zbierania danych ilościowych zazwyczaj składają się z kilku wieloitemowych skal oraz części wprowadzającej i podsumowującej.

Zagadnienia konstrukcji kwestionariuszy

Przed skonstruowaniem ankiety warto zastanowić się, w jaki sposób zostaną wykorzystane wyniki badań. Jeśli wyniki nie wpłyną na proces decyzyjny, budżety nie pozwolą na wdrożenie ustaleń lub koszt badań przewyższa ich użyteczność, to prowadzenie badań nie ma sensu.

Cel(e) badań i ramy odniesienia powinny być określone wcześniej, w tym kontekst kwestionariusza pod względem czasu, budżetu, siły roboczej, ingerencji i prywatności. Rodzaje pytań (np. zamknięte, wielokrotnego wyboru, otwarte) powinny być dopasowane do dostępnych technik analizy danych i celów badania.

Sposób (losowy lub nie) i lokalizacja (rama losowania) wyboru respondentów określi, czy wyniki będą reprezentatywne dla większej populacji .

Poziom pomiaru – znany jako skala , indeks lub typologia – określi, co można wywnioskować z danych. Pytanie tak/nie ujawni tylko, ile osób z grupy odpowiedziało tak lub nie, nie mając możliwości określenia średniej odpowiedzi. Charakter oczekiwanych reakcji powinien zostać określony i zachowany do interpretacji.

Powszechną metodą jest „badanie wstecz” podczas tworzenia kwestionariusza poprzez najpierw określenie poszukiwanych informacji (tj. marka A jest bardziej/mniej preferowana przez x% próby w porównaniu z marką B i y% w porównaniu z marką C), a następnie mając pewność, że zadasz wszystkie pytania potrzebne do uzyskania danych do raportu. Należy unikać zbędnych pytań, ponieważ są one kosztem dla badacza i niechcianym narzuceniem respondentom. Wszystkie pytania powinny przyczynić się do realizacji celu (celów) badania.

Tematy powinny pasować do ram odniesienia respondentów, ponieważ ich pochodzenie może wpływać na interpretację pytań. Respondenci powinni mieć wystarczającą ilość informacji lub wiedzy, aby odpowiedzieć na pytania zgodnie z prawdą. Styl pisania powinien być konwersacyjny, ale zwięzły i dokładny oraz odpowiedni dla docelowych odbiorców i tematyki. Sformułowanie powinno być proste, bez słownictwa technicznego lub specjalistycznego. Niejednoznaczne słowa, niejednoznaczne struktury zdań i przeczenia mogą powodować nieporozumienia, prawdopodobnie unieważniając wyniki kwestionariusza. Podwójne przeczenia należy przeformułować na pozytywy.

Jeśli pytanie w ankiecie faktycznie zawiera więcej niż jedno zagadnienie , badacz nie będzie wiedział, na które odpowiada respondent. Należy uważać, aby zadawać jedno pytanie na raz.

Pytania i przygotowane odpowiedzi (do wielokrotnego wyboru) powinny być neutralne pod względem zamierzonego wyniku. Stronnicze pytanie lub kwestionariusz zachęca respondentów do udzielenia odpowiedzi w taki, a nie inny sposób. Nawet pytania bez uprzedzeń mogą pozostawiać respondentów z oczekiwaniami. Kolejność lub grupowanie pytań jest również istotne; wczesne pytania mogą wpływać na późniejsze pytania. Załadowane pytania wywołują reakcje emocjonalne i mogą wypaczyć wyniki.

Lista przygotowanych odpowiedzi powinna być zbiorczo wyczerpująca; jednym z rozwiązań jest użycie ostatecznej kategorii wpisu dla „innych ________”. Możliwe odpowiedzi również powinny się wzajemnie wykluczać, nie mogą się pokrywać. Respondenci nie powinni znajdować się w więcej niż jednej kategorii, np. zarówno w kategorii „zamężna”, jak i „wolna” (w takim przypadku może zaistnieć potrzeba osobnego pytania o stan cywilny i sytuację mieszkaniową).

Wiele osób nie odpowiada na pytania osobiste lub intymne. Z tego powodu pytania o wiek, dochody, stan cywilny itp. umieszczane są zazwyczaj na końcu ankiety. W ten sposób, nawet jeśli respondent odmówi odpowiedzi na te pytania, będzie już odpowiadał na pytania badawcze.

Prezentacja pytań na stronie (lub ekranie komputera) oraz użycie białych znaków, kolorów, obrazów, wykresów lub innych elementów graficznych może wpłynąć na zainteresowanie respondenta – lub odwrócić uwagę od pytań. Pomocna może być numeracja pytań.

Kwestionariusze mogą być wypełniane przez pracowników naukowych, wolontariuszy lub samodzielnie przez respondentów. W obu przypadkach potrzebne są jasne, szczegółowe instrukcje, odpowiadające potrzebom każdej grupy odbiorców

Metody zbierania

Istnieje wiele kanałów lub trybów, których można użyć do administrowania kwestionariuszem. Każdy z nich ma mocne i słabe strony, dlatego też badacz będzie na ogół musiał dostosować swój kwestionariusz do trybów, z których będzie korzystał. Na przykład kwestionariusz przeznaczony do wypełnienia na papierze może nie działać w ten sam sposób, gdy jest podawany przez telefon. Te efekty trybu mogą być na tyle znaczące, że zagrażają ważności badań.

Korzystanie z wielu trybów może poprawić dostęp do populacji będącej przedmiotem zainteresowania, gdy niektórzy członkowie mają inny dostęp lub mają określone preferencje.

metoda Korzyści i przestrogi
Pocztowy
  • Zwykle prosty kwestionariusz, wydrukowany na papierze do wypełnienia długopisem lub ołówkiem.
  • Niski koszt za odpowiedź dla małych próbek. Duże próbki często można wydajniej administrować przy użyciu optycznego rozpoznawania znaków .
  • Poczta podlega opóźnieniom pocztowym i błędom, które mogą być znaczne w przypadku wysyłania do odległych obszarów lub w przypadku nieprzewidzianych zdarzeń, takich jak klęski żywiołowe.
  • Ankiety są ograniczone do populacji, z którymi można się skontaktować za pośrednictwem usługi pocztowej.
  • Polega na wysokim poziomie umiejętności czytania i pisania
  • Umożliwia uczestnikom ankiety zachowanie anonimowości (np. przy użyciu identycznych formularzy papierowych).
  • Ograniczona umiejętność budowania relacji z respondentem lub odpowiadania na pytania dotyczące celu badania.
Telefon
  • Kwestionariusze można przeprowadzić szybko, zwłaszcza przy pomocy komputera .
  • Możliwość zbudowania relacji z respondentami może poprawić wskaźniki odpowiedzi.
  • Naukowcy mogą zostać wzięci za telemarketerów .
  • Ankiety są ograniczone do populacji z telefonem.
  • Są bardziej podatne na uprzedzenia związane z atrakcyjnością społeczną niż inne tryby, więc wywiady telefoniczne generalnie nie są odpowiednie w przypadku drażliwych tematów.
Elektroniczny
  • Zwykle administrowane za pośrednictwem strony internetowej opartej na HTML lub innego kanału elektronicznego, takiego jak aplikacja na smartfony.
  • Ta metoda ma niski koszt bieżący, a większość ankiet kosztuje niewiele dla uczestników i ankieterów. Jednak początkowe koszty konfiguracji mogą być wysokie w przypadku niestandardowego projektu ze względu na wysiłek wymagany do opracowania systemu zaplecza lub zaprogramowania samego kwestionariusza.
  • Kwestionariusze można przeprowadzić szybko, bez opóźnień pocztowych.
  • Uczestnicy ankiety mogą pozostać anonimowi, ale ryzykują śledzenie za pomocą plików cookie , unikalnych linków i innych technologii.
  • Nie jest pracochłonny.
  • Pytania mogą być bardziej szczegółowe, w przeciwieństwie do ograniczeń papieru czy telefonów.
  • Ta metoda sprawdza się dobrze, jeśli ankieta zawiera kilka pytań rozgałęzionych. W razie potrzeby pomoc lub instrukcje mogą być wyświetlane dynamicznie wraz z pytaniem, a automatyczne sekwencjonowanie oznacza, że ​​komputer może określić następne pytanie, zamiast polegać na tym, że respondenci prawidłowo wykonają instrukcje pomijania.
  • Nie wszyscy z próby mogą korzystać z formularza elektronicznego ze względu na problemy z dostępnością, kompatybilność oprogramowania, wymagania dotyczące przepustowości, obciążenie serwera lub dostęp do Internetu, a zatem wyniki mogą nie być reprezentatywne dla populacji docelowej.
Administrowane osobiście
  • Pytania mogą być bardziej szczegółowe i uzyskać bardziej wyczerpujące informacje. Jednak respondenci są często ograniczeni do swojej pamięci roboczej: w niektórych przypadkach mogą pomóc specjalnie zaprojektowane wskazówki wizualne (takie jak karty podpowiedzi).
  • Ankieterzy czasami przeformułowują pytania podczas wywiadu, zmniejszając poziom standaryzacji. Pomocne w tym mogą być wywiady osobiste wspomagane komputerowo .
  • Relacja z respondentami jest na ogół wyższa niż w przypadku innych trybów.
  • Zwykle wyższy wskaźnik odpowiedzi niż w przypadku innych trybów.
  • Szkolenie i utrzymanie panelu ankieterów może być niezwykle kosztowne i czasochłonne. Z każdym wywiadem wiąże się również koszt związany z zebraniem danych.
  • Stosunkowo niewiele ograniczeń dla populacji, o ile ankieter ma dostęp.

Sformułowanie pytania

Sposób sformułowania pytania może mieć duży wpływ na to, jak uczestnik badania na nie odpowie. Dlatego badacze ankiet muszą być świadomi swoich sformułowań podczas pisania pytań ankietowych. Ważne jest, aby badacze pamiętali, że różne osoby, kultury i subkultury mogą interpretować pewne słowa i wyrażenia w różny sposób.

Istnieją dwa różne rodzaje pytań, których badacze ankiety używają podczas pisania kwestionariusza: pytania z swobodną odpowiedzią i pytania zamknięte. Pytania z swobodną odpowiedzią są otwarte, podczas gdy pytania zamknięte są zazwyczaj wielokrotnego wyboru. Pytania z swobodną odpowiedzią są korzystne, ponieważ pozwalają respondentowi na większą elastyczność, ale są również bardzo trudne do zarejestrowania i oceny, co wymaga obszernego kodowania. Z drugiej strony, pytania zamknięte można łatwiej oceniać i kodować, ale zmniejszają one ekspresyjność i spontaniczność osoby udzielającej odpowiedzi.

Ogólnie rzecz biorąc, słownictwo pytania powinno być bardzo proste i bezpośrednie, najlepiej poniżej dwudziestu słów. Każde pytanie powinno być zredagowane pod kątem czytelności i powinno unikać pytań prowadzących lub przeładowanych. Jeśli do pomiaru jednego konstruktu używa się wielu pytań, niektóre z nich należy sformułować w przeciwnym kierunku, aby uniknąć stronniczości odpowiedzi.

Odpowiedź respondenta na pytanie otwarte można później zakodować w skali odpowiedzi lub przeanalizować przy użyciu bardziej jakościowych metod.

Sekwencja pytań

Pytania powinny płynąć logicznie, od ogółu do szczegółu, od najmniej do najbardziej drażliwych, od kwestii faktycznych i behawioralnych do postaw i opinii. Gdy są półautomatyczne, powinny przejść od pytań niewspomaganych do pytań wspomaganych. Badacz powinien upewnić się, że na odpowiedź na pytanie nie miały wpływu poprzednie pytania.

Zgodnie z teorią trójstopniową (zwaną też teorią kanapkową) pytania należy zadawać w trzech etapach: [ potrzebne źródło ]

  1. pytania przesiewowe i raportowe
  2. pytania dotyczące konkretnych produktów
  3. demograficzne typy pytań

Zobacz też