Prace dyplomowe · Przewodnik

Analiza kwestionariusza – przewodnik od budowy ankiety do opisu narzędzia

Osiem etapów pracy z kwestionariuszem: wybór lub budowa narzędzia, pilotaż, zbieranie i czyszczenie odpowiedzi, wynik skali, rzetelność, interpretacja i opis w pracy – z listą poradników, haseł i kalkulatorów na każdy etap.

Strona główna / Blog / Przewodnik: analiza kwestionariusza
W skrócie: Analiza kwestionariusza ma osiem etapów: wybór lub budowa narzędzia, pretest i pilotaż, zbieranie odpowiedzi, kodowanie i czyszczenie danych, wynik skali, rzetelność i struktura, interpretacja wyniku oraz opis w pracy. Klucz skali, regułę dla braków i reguły wykluczeń zapisz przed zebraniem danych. Rzetelność podawaj w swojej próbie, a poziomy „niski – wysoki” wyznaczaj tylko z norm lub progów ze źródła.

Dla kogo jest ten przewodnik i jak z niego korzystać

Przewodnik jest dla osób, które w pracy dyplomowej mierzą coś kwestionariuszem albo ankietą: stres, samoocenę, satysfakcję, wiedzę czy postawy. Prowadzi przez całą drogę narzędzia: od wyboru lub zbudowania skali, przez pilotaż i zbieranie odpowiedzi, po wynik skali, jego rzetelność, interpretację i opis w pracy. Nie jest to osobny poradnik, tylko uporządkowana lista tekstów, haseł i kalkulatorów, które już są w serwisie.

Jeśli dopiero planujesz badanie, zacznij od etapu 1. Jeśli masz już eksport z formularza, zacznij od etapu 4, ale zajrzyj też do etapu 1: bez klucza skali nie policzysz wyniku poprawnie. W razie konkretnego kłopotu („alfa wyszła .58”, „nie wiem, jak podzielić wyniki na niskie i wysokie”) przejdź od razu do tabeli „mam problem – przeczytaj”.

Kolejność etapów nie jest przypadkowa. Część decyzji musi zapaść, zanim ktokolwiek wypełni ankietę: klucz skali, reguła dla braków i reguły wykluczeń. Podobny podział na fazy proponują Boateng i in. (2018) w przewodniku po budowie skal: najpierw pozycje i ocena ich treści, potem konstrukcja skali z pretestem i redukcją pozycji, a na końcu ocena wymiarowości, rzetelności i trafności.

Schemat ośmiu etapów analizy kwestionariusza: 1. wybór narzędzia, 2. pretest i pilotaż z pętlą poprawek wracającą do narzędzia, 3. zbieranie odpowiedzi, 4. czyszczenie danych, 5. wynik skali, 6. rzetelność i struktura, 7. interpretacja wyniku, 8. opis w pracy
Rysunek 1. Osiem etapów analizy kwestionariusza. Przerywana strzałka to pętla poprawek: po wywiadach poznawczych i pilotażu wracasz do narzędzia, zanim zaczniesz właściwe badanie.

Etap 1. Wybór albo budowa narzędzia

Najpierw ustal, czy Twój konstrukt da się zmierzyć gotowym kwestionariuszem. Narzędzie z polską adaptacją i opisaną rzetelnością prawie zawsze jest lepsze niż własna skala napisana w tydzień. Własne pytania mają sens przy faktach, zachowaniach i wiedzy, a własną skalę buduj tylko wtedy, gdy nic nie pasuje i masz czas na jej sprawdzenie. Już na tym etapie zdobądź klucz: przypisanie pozycji do podskal i listę pozycji odwróconych.

Etap 2. Pretest: wywiady poznawcze i pilotaż

Sprawdź ankietę na kilku osobach z Twojej populacji, zanim wyślesz ją setkom. Wywiad poznawczy pokazuje, jak respondenci rozumieją pytania i jak dochodzą do odpowiedzi. Beatty i Willis (2007) opisują go jako zadawanie roboczych pytań z jednoczesnym zbieraniem dodatkowych informacji o odpowiedziach. Pilotaż sprawdza z kolei czas wypełniania, działanie formularza, braki i rozkłady. Hipotez w pilotażu nie testuj – to próba generalna procedury, a nie małe badanie właściwe.

Etap 3. Zbieranie odpowiedzi

Zdecyduj, gdzie i kogo rekrutujesz, ile odpowiedzi potrzebujesz i jak sprawdzisz uważność respondentów. Liczebność zależy od celu analizy, a nie od zasady „im więcej, tym lepiej”: inna jest potrzebna do oszacowania odsetka, inna do korelacji. Większa próba nie usuwa też błędu doboru, więc w metodzie opisz kanał rekrutacji i jego ograniczenia.

Etap 4. Kodowanie i czyszczenie danych

Surowy eksport z formularza zamień w uporządkowany zbiór: krótkie nazwy zmiennych, liczby zamiast słów, jawne kody braków. Potem zastosuj zapisane z góry reguły wykluczeń. Nieuważne odpowiedzi to realny problem: Meade i Craig (2012) oszacowali, że w długiej ankiecie wypełnianej przez studentów za punkty zaliczeniowe nieuważnie odpowiadało ok. 10–12% osób. Wykrywaj je kilkoma wskaźnikami naraz, bo każdy wychwytuje inny wzorzec.

Etap 5. Wynik skali

Wynik skali liczysz według klucza: odwracasz pozycje odwrócone, przypisujesz pozycje do podskal, stosujesz regułę dla braków i wybierasz sumę albo średnią. Zanim cokolwiek zsumujesz, sprawdź minimum i maksimum każdej pozycji. Kod braku liczony jak zwykła liczba potrafi zepsuć cały rozkład. Wynik ogólny licz tylko wtedy, gdy przewiduje go klucz.

Etap 6. Rzetelność i struktura skali

Rzetelność podajesz w swojej próbie, nawet jeśli autorzy narzędzia opisali ją wcześniej. Alfa Cronbacha jest najczęściej raportowana, ale jej założenia rzadko są spełnione. McNeish (2018) pokazuje, że prowadzi to zwykle do zaniżania rzetelności, i omawia alternatywy, w tym omegę. Gdy struktura skali jest niepewna (nowe narzędzie, nowa populacja), sprawdź ją analizą czynnikową, a nie tylko współczynnikiem rzetelności.

Etap 7. Interpretacja wyniku

Wynik surowy sam w sobie mało mówi, więc studenci chętnie dzielą go na „niski, przeciętny, wysoki”. Rób to tylko na podstawie norm, zwalidowanego progu albo podziału opisanego w źródle i używaj poziomów do opisu, a nie zamiast wyniku ciągłego w testach. Normy mają sens tylko dla jasno opisanej populacji, a raport z normalizacji powinien podawać m.in. sposób doboru próby i daty badania (American Educational Research Association i in., 2014). Sprawdź też, czy w Twojej próbie wiele osób nie ma wyniku maksymalnego.

Etap 8. Opis narzędzia i wyników w pracy

W rozdziale metodologicznym opisz narzędzie: nazwę, autorów oryginału i adaptacji, budowę, sposób liczenia wyniku i rzetelność. W wynikach podaj statystyki opisowe skal, ich rzetelność i dopiero potem testy hipotez. Pojedyncze pytania ankiety (wielokrotny wybór, pytania otwarte, satysfakcja) opisuj rozkładem odpowiedzi i odsetkami, a nie samą średnią.

Mam problem – przeczytaj

Tabela zbiera kłopoty, z którymi najczęściej zgłaszają się osoby analizujące kwestionariusz. W prawej kolumnie jest strona, od której warto zacząć.

Typowe problemy z analizą kwestionariusza i strony, które je rozwiązują
Mam problemPrzeczytaj
Nie mogę znaleźć polskiej wersji kwestionariusza.Gdzie znaleźć kwestionariusze psychologiczne
Chcę przetłumaczyć skalę z angielskiego.Adaptacja kulturowa kwestionariusza
Nie wiem, czy ankieta jest zrozumiała.Wywiad poznawczy w pilotażu
Ile odpowiedzi muszę zebrać?Liczebność próby w ankiecie
W eksporcie są słowa zamiast liczb.Dane z Google Forms i LimeSurvey
Część osób wypełniła ankietę w dwie minuty.Nieuważne odpowiedzi w ankietach online
Nie wiem, które pozycje odwrócić.Pozycja odwrócona
Liczyć sumę czy średnią?Wynik skali: średnia czy suma
Ktoś pominął jedno pytanie w skali.Kalkulator wyniku skali (reguła prorated)
Alfa Cronbacha wyszła niska.Wzór raportowania alfy Cronbacha
Promotor prosi o omegę zamiast alfy.Omega McDonalda
Nie wiem, czy skala ma jeden wymiar, czy kilka.Analiza czynnikowa EFA i CFA
Chcę podzielić wyniki na niskie, średnie i wysokie.Niski, przeciętny, wysoki wynik
Nie wiem, co napisać w opisie narzędzia.Opis narzędzia badawczego – wzór
Mam pytania otwarte i nie wiem, jak je policzyć.Analiza treści pytań otwartych
Odsetki z pytania wielokrotnego wyboru dają ponad 100%.Analiza pytań wielokrotnego wyboru
Czy wynik ze skali Likerta to dane ilościowe?Czy skala Likerta jest ilościowa?
Alfa wyszła poniżej .70 – co sprawdzić?Alfa Cronbacha poniżej .70
Część osób nie odpowiedziała na kilka pytań.Braki danych w ankiecie
Mam dane z dwóch ankiet i muszę je połączyć.Jak połączyć dwie bazy danych
Rozsyłam ankietę – co mogę napisać o reprezentatywności?Dobór próby w pracy
Mam skalę Likerta mierzoną kilka razy u tych samych osób.Modele mieszane CLMM
Jak policzyć alfę Cronbacha w SPSS?Alfa Cronbacha w SPSS
Jak w SPSS odwrócić pozycje i policzyć wynik skali?Przygotowanie danych w SPSS
Korelacja i regresja wyniku skali w SPSS.Korelacja i regresja w SPSS

Najważniejsze hasła ze słownika

Te hasła warto znać, zanim zaczniesz analizę ankiety. Pogrupowaliśmy je według tego, czego dotyczą.

Układ ankiety i pytania

Style odpowiedzi i jakość danych

Rzetelność i trafność

Wynik i jego interpretacja

Kalkulatory

Inne przewodniki

Gdy wynik skali jest gotowy, testy hipotez, opis wyników w stylu APA i przygotowanie do obrony prowadzi przewodnik statystyka w pracy dyplomowej. Budowę i walidację własnej skali szerzej opisuje przewodnik psychometria i budowa skal, a projekt ankiety i eksperymentu – przewodnik ankiety i eksperymenty.

Kiedy warto skorzystać z pomocy

Większość etapów przejdziesz sam(a), jeśli masz klucz skali i trzymasz się kolejności. Pomoc przydaje się, gdy narzędzie zachowuje się inaczej, niż obiecuje literatura: alfa jest wyraźnie niższa niż u autorów, analiza czynnikowa nie odtwarza podskal albo nie wiesz, czy wolno liczyć wynik ogólny. W ramach analiz statystycznych dla studentów sprawdzimy kodowanie i wyniki skal, policzymy rzetelność i wyjaśnimy, jak opisać ją w pracy. Opis i interpretacja należą do Ciebie, więc zadbaj, by rozumieć każdą decyzję, a pomoc ujawnij zgodnie z zasadami uczelni.

Najczęstsze pytania

Od czego zacząć analizę kwestionariusza w pracy?

Od klucza skali: listy pozycji w podskalach, pozycji odwróconych i sposobu liczenia wyniku. Potem uporządkuj eksport, zastosuj reguły wykluczeń ustalone przed badaniem, policz wyniki skal i ich rzetelność, a dopiero na końcu testuj hipotezy. Kolejność kroków na danych opisuje poradnik o analizie ankiety.

Czy rzetelność kwestionariusza trzeba liczyć, jeśli podali ją autorzy?

Tak. Rzetelność jest cechą wyników w konkretnej próbie, a nie samego narzędzia, więc w pracy podaj wartość policzoną na swoich danych, a obok wartość z publikacji autorów lub adaptacji. Przy niskiej wartości nie ukrywaj jej, tylko opisz razem z możliwymi przyczynami. Gotowe zdania znajdziesz we wzorze raportowania alfy Cronbacha.

Czy w ankiecie do pracy trzeba robić pilotaż?

Przy gotowym, dobrze sprawdzonym kwestionariuszu wystarczy krótki pretest formularza. Przy pytaniach własnych, nowej skali albo przekładzie warto przeprowadzić wywiady poznawcze i pilotaż, bo dopiero one pokazują, czy respondenci rozumieją pytania tak jak Ty. Pilotaż sprawdza procedurę, a nie hipotezy. Szczegóły opisuje tekst o badaniu pilotażowym.

Jak opisać kwestionariusz w rozdziale metodologicznym?

Podaj nazwę narzędzia, autorów oryginału i polskiej adaptacji, mierzony konstrukt, liczbę pozycji i podskal, skalę odpowiedzi, pozycje odwrócone, sposób liczenia i zakres wyniku oraz rzetelność w Twojej próbie. Normy i progi podawaj tylko ze źródła. Wzory dla kilku rodzajów narzędzi zawiera opis narzędzia badawczego – wzór.

Czy wolno analizować pojedyncze pytania kwestionariusza zamiast wyniku skali?

Hipotezy sprawdzaj na wyniku całej skali lub podskali, bo pojedyncza pozycja jest mniej rzetelna i ma charakter porządkowy. Pojedyncze pytania możesz opisać rozkładem odpowiedzi i odsetkami jako uzupełnienie. Wyjątkiem są pytania o fakty i pytania wielokrotnego wyboru, które analizuje się osobno, opisane w haśle analiza pytań wielokrotnego wyboru.

Powiązane hasła

Przeczytaj też

Skala zachowuje się inaczej, niż opisują autorzy?

Sprawdzimy kodowanie i wynik skali, policzymy rzetelność i strukturę oraz wyjaśnimy, jak opisać narzędzie w pracy tak, żebyś umiał(a) to obronić.

Oferta dla studentówWyceń analizę

Bibliografia i dalsza literatura naukowa (APA 7)

  1. American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (2014). Standards for educational and psychological testing. https://www.testingstandards.net/open-access-files.html ● Otwarty dostęp
  2. Beatty, P. C., & Willis, G. B. (2007). Research synthesis: The practice of cognitive interviewing. Public Opinion Quarterly, 71(2), 287–311. https://doi.org/10.1093/poq/nfm006 ● Otwarty dostęp
  3. Boateng, G. O., Neilands, T. B., Frongillo, E. A., Melgar-Quiñonez, H. R., & Young, S. L. (2018). Best practices for developing and validating scales for health, social, and behavioral research: A primer. Frontiers in Public Health, 6, Article 149. https://doi.org/10.3389/fpubh.2018.00149 ● Otwarty dostęp
  4. McNeish, D. (2018). Thanks coefficient alpha, we’ll take it from here. Psychological Methods, 23(3), 412–433. https://doi.org/10.1037/met0000144
  5. Meade, A. W., & Craig, S. B. (2012). Identifying careless responses in survey data. Psychological Methods, 17(3), 437–455. https://doi.org/10.1037/a0028085

Cytowania BibTeX

@book{aera2014standards, author={{American Educational Research Association} and {American Psychological Association} and {National Council on Measurement in Education}}, title={{Standards for educational and psychological testing}}, year={2014}, publisher={American Educational Research Association}, url={https://www.testingstandards.net/open-access-files.html}}
@article{beatty2007research, author={Beatty, Paul C. and Willis, Gordon B.}, title={{Research synthesis: The practice of cognitive interviewing}}, journal={Public Opinion Quarterly}, year={2007}, volume={71}, number={2}, pages={287--311}, doi={10.1093/poq/nfm006}}
@article{boateng2018best, author={Boateng, Godfred O. and Neilands, Torsten B. and Frongillo, Edward A. and Melgar-Quiñonez, Hugo R. and Young, Sera L.}, title={{Best practices for developing and validating scales for health, social, and behavioral research: A primer}}, journal={Frontiers in Public Health}, year={2018}, volume={6}, eid={149}, doi={10.3389/fpubh.2018.00149}}
@article{mcneish2018thanks, author={McNeish, Daniel}, title={{Thanks coefficient alpha, we’ll take it from here}}, journal={Psychological Methods}, year={2018}, volume={23}, number={3}, pages={412--433}, doi={10.1037/met0000144}}
@article{meade2012identifying, author={Meade, Adam W. and Craig, S. Bartholomew}, title={{Identifying careless responses in survey data}}, journal={Psychological Methods}, year={2012}, volume={17}, number={3}, pages={437--455}, doi={10.1037/a0028085}}
R