
Nie chodzi o sprawdzian inteligencji uczestnika ani o przekonanie go do właściwej interpretacji. Na jednym autorskim przykładzie przygotujesz krótką rozmowę diagnostyczną oraz zapis decyzji. Jej rezultatem ma być wiedza o działaniu pytania, a nie deklaracja, że całe narzędzie jest już zwalidowane.
Kiedy warto zatrzymać się przy jednym pytaniu?
W badaniu pedagogicznym interesuje Cię korzystanie z informacji zwrotnej. Robocza pozycja brzmi: „Jak często wykorzystujesz informację zwrotną podczas nauki?”. Dostępne odpowiedzi to: nigdy, rzadko, czasami, często i zawsze. Zdanie wygląda poprawnie. Nadal nie wiadomo jednak, czy respondent uwzględnia ocenę cyfrową, komentarz ustny, zaznaczenie błędu przez kolegę czy wyłącznie wskazówki nauczyciela.
Niejasne jest także „wykorzystujesz”. Przeczytanie komentarza, zrozumienie go i zmiana sposobu rozwiązania zadania to odmienne działania. Rozmowa o procesie odpowiedzi może ujawnić tę różnicę, zanim zbierzesz wiele pozornie porównywalnych ocen. Ogólne przygotowanie próby całego formularza opisuje poradnik o pilotażu ankiety. Tutaj skupiamy się na diagnozie jednej pozycji.
Rozdziel cztery możliwe miejsca trudności
CDC CCQDER wyróżnia sondy dotyczące rozumienia, przywoływania informacji, oceny oraz wyboru odpowiedzi. Nie każda pauza oznacza zbyt trudne słowo. Uczestnik może dobrze rozumieć pojęcie, lecz nie pamiętać zdarzeń z całego semestru albo nie znaleźć wariantu pasującego do własnej sytuacji.
- Rozumienie: do czego osoba odnosi „informację zwrotną” i „wykorzystanie”?
- Przypominanie: jakie zdarzenia bierze pod uwagę i z jakiego okresu?
- Ocena: jak z kilku różnych doświadczeń tworzy jedną ogólną odpowiedź?
- Dopasowanie: dlaczego wybiera „czasami”, a nie „rzadko” albo „często”?
To mapa uwagi prowadzącego, nie cztery rubryki obowiązkowe przy każdym pytaniu. Jeżeli problem dotyczy definicji konstruktu, samo uproszczenie zdania nie wystarczy. Trzeba wrócić do tego, co miało być mierzone.
Przeprowadź rozmowę bez podawania rozwiązania
Cała poniższa sytuacja i wypowiedzi są fikcyjne. Najpierw osoba odpowiada na pytanie w takiej wersji, jaką otrzymałby przyszły respondent. Prowadzący zapisuje zaznaczony wariant. Dopiero potem prosi o wyjaśnienie sposobu dochodzenia do odpowiedzi. Nie zaczyna od wykładu, co autor miał na myśli.
Dwa pozornie jednakowe zaznaczenia
Osoba P01 wybiera „często”. W rozmowie wyjaśnia, że po każdej ocenie sprawdza, ile punktów straciła. Nie wraca do komentarza przy kolejnym zadaniu. Osoba P02 również zaznacza „często”, ale przywołuje dwie sytuacje, w których zmieniła sposób argumentowania po pisemnych uwagach do tekstu. Identyczna kategoria obejmuje tu różne znaczenia działania.
Neutralne pogłębienie może dotyczyć ostatniego konkretnego przypadku: „Co wtedy zrobiłeś po otrzymaniu uwagi?”. Możesz też poprosić o opis informacji uwzględnionych przy wyborze odpowiedzi. Pytanie „Czyli zastosowałeś wskazówki w następnym zadaniu?” podsuwa zachowanie, którego uczestnik jeszcze nie opisał. Jeśli mimo to potrzebne było wyjaśnienie, zanotuj własną interwencję.
Nie poprawiaj odpowiedzi P01 na niższą. Rozmowa nie służy ocenianiu osoby według nieujawnionego klucza. Pokazuje, że pozycja może nie zbierać zamierzonej informacji. Właśnie ten problem należy rozstrzygnąć w narzędziu.
Jeśli potrzebujesz sprawdzić związek między pojęciem, pytaniem i planowaną analizą, przygotuj te trzy elementy do usługi „Ankiety i narzędzia badawcze”. Do oceny przydatniejszy będzie zapis takiej rozbieżności niż ogólna uwaga „respondenci rozumieli ankietę”.
Zapisz problem przed wymyśleniem nowego brzmienia
Notatka robocza powinna wskazywać wersję pozycji, odpowiedź, sposób rozumienia, podstawę przypomnienia oraz konsekwencję dla pomiaru. Oddziel to, co uczestnik powiedział, od własnej oceny. W naszym ćwiczeniu obserwacja brzmi: P01 uwzględnił sprawdzenie oceny, P02 zmianę działania po komentarzu. Wniosek autora: słowo „wykorzystanie” nie rozdziela dwóch potrzebnych znaczeń.
Dopiero teraz rozważ poprawkę. Jeśli celem jest późniejsze działanie, robocza wersja może pytać o sytuacje, w których po uwagach do zadania osoba zmieniła sposób wykonania kolejnego podobnego zadania w określonym okresie. Trzeba jeszcze ustalić, co oznacza podobne zadanie, czy uczestnik miał okazję wykonać kolejne i jakie odpowiedzi mają sens. Osoba bez takiej okazji nie jest automatycznie osobą ignorującą informację zwrotną.
Nie przedstawiamy tej wersji jako gotowej skali. Jest propozycją do ponownego sprawdzenia. Zmiana może usunąć jedną niejasność i wprowadzić kolejną, na przykład wymaganie przypomnienia zdarzeń sprzed zbyt długiego czasu.
Porównaj przypadki i sprawdź poprawkę
Jedna rozmowa ujawnia możliwość problemu, lecz nie pozwala oszacować, jaki odsetek całej populacji odpowiada w ten sposób. CDC opisuje porównywanie odpowiedzi w obrębie wywiadu i pomiędzy osobami. Dobierz do próby doświadczenia ważne dla pytania: osoby z komentarzem pisemnym, ustnym oraz bez okazji wykorzystania wskazówki. Nie ogłaszaj jednej liczebności jako gwarancji jakości.
Po zmianie zachowaj poprzednie brzmienie i uzasadnienie. Przeprowadź kolejne sprawdzenie bez rozpoczynania od wyjaśnienia nowej interpretacji. W podsumowaniu podaj, co rozpoznano, co poprawiono i co pozostało niepewne. Zrozumiałość nie potwierdza jeszcze całej trafności pomiaru, a poprawny eksport nie dowodzi zgodności znaczeń.
Druga iteracja: poprawka nie przechodzi jeszcze sprawdzenia
Wróćmy do fikcyjnego narzędzia. Po zawężeniu pozycji do zmiany kolejnego zadania P03 zaznacza „nigdy”. Dopiero rozmowa ujawnia, że nie wykonywała następnego podobnego zadania. P04 zaznacza to samo, choć miał taką możliwość i świadomie nie zastosował komentarza. Pierwsza poprawka rozdzieliła czytanie od działania, ale połączyła brak okazji z niewykorzystaniem istniejącej okazji.
Autor ma teraz wybór zależny od celu. Może najpierw ustalać wystąpienie kolejnego podobnego zadania i kierować pytanie o działanie tylko do odpowiedniej grupy. Może też zachować wspólną pozycję z wyraźnym wariantem dotyczącym braku okazji, jeśli taki układ pozwala zebrać potrzebną informację. Nie należy wybierać wariantu tylko dlatego, że wymaga mniej kliknięć. Trzeba sprawdzić rozumienie filtra, sposób przejścia oraz późniejsze rozróżnienie statusów w eksporcie.
Karta decyzji może odnotować: „Wersja 0.3 poprawnie kieruje uwagę na późniejsze działanie, lecz odpowiedź nigdy nadal nie odróżnia dwóch sytuacji ważnych dla analizy. Do kolejnej próby wprowadzono oddzielenie okazji od zachowania”. To konkretny rezultat nieudanego sprawdzenia. Nie trzeba nazywać całej próby sukcesem, żeby uznać ją za użyteczną.
Kryterium zakończenia nie brzmi „nikt już nic nie dopisał”. Sprawdź, czy w przypadkach istotnych dla Twojego celu osoba rozpoznaje zamierzony zakres, może przywołać odpowiednie doświadczenie i ma sposób wyrażenia rzeczywistej sytuacji. Jeżeli konkretnej ścieżki nie sprawdzono, wpisz tę lukę do podsumowania. Nie ekstrapoluj ciszy kilku osób na pewność dotyczącą wszystkich przyszłych respondentów.
Co powinno zostać w metodologii?
Opisz faktyczną wersję pytań, sposób doboru uczestników próby, przebieg rozmowy, rodzaje sond i podjęte decyzje. Nie nazywaj rozmowy wywiadem poznawczym wyłącznie dlatego, że zapytano znajomego, czy ankieta mu się podoba. Powinno być wiadomo, jaki proces odpowiedzi rzeczywiście sprawdzano. Tworzenie całego formularza rozwija poradnik konstrukcji kwestionariusza.
Do usługi „Rozdział metodologiczny” przygotuj wersje narzędzia, zanonimizowane notatki, wykaz zmian i aktualny opis procedury. Pozwoli to uporządkować rozdział na podstawie wykonanych czynności. Opisz pytanie, które wymaga sprawdzenia.
Czy każde opóźnienie odpowiedzi podczas pilotażu oznacza niezrozumiałe pytanie?
Nie. Trzeba rozróżnić kłopot z rozumieniem, przypomnieniem informacji, oceną sytuacji i samą obsługą formularza. Pomocne jest neutralne dopytanie o sposób dochodzenia do odpowiedzi.
Czy przed badaniem do pracy dyplomowej warto przeprowadzić pilotaż ankiety?
Tak. Próbne zastosowanie kwestionariusza pomaga sprawdzić rozumienie pytań, jasność instrukcji, dostępne odpowiedzi i czas wypełniania. Wyniki pilotażu pozwalają poprawić robocze narzędzie przed zbieraniem danych. Pilotaż nie zastępuje jednak pełnej walidacji skali.
Czy można sprawdzić gotową ankietę?
Tak. Potrzebne są również cel i pytania badawcze, żeby ocenić, czy ankieta zbierze właściwe informacje.
Źródła i zakres opracowania
- CDC CCQDER (2024). Cognitive Interviewing. https://www.cdc.gov/nchs/ccqder/question-evaluation/cognitive-interviewing.html
Opracowanie źródeł: 6 listopada 2026 roku. Wszystkie sytuacje, wypowiedzi i dane demonstracyjne w poradniku są autorskimi materiałami edukacyjnymi. Nie przedstawiają rzeczywistych badań ani historii klientów.
Redakcja: Rozdział Metodologiczny


