Od notatek po teście do poprawki, którą można sprawdzić

Surowe notatki po próbie łatwo zamienić w listę opinii. Ten warsztat pokazuje, jak zachować ślad zachowania, nazwać przeszkodę, wybrać zmianę według wpływu na zadanie i przygotować następną wersję.

Sesja kończy się, ale analiza dopiero zaczyna. W notatkach mieszają się słowa uczestnika, jego działania, pytania prowadzącego i pomysły na poprawki. Jeżeli od razu przepiszesz je na listę życzeń, stracisz informację o tym, co naprawdę wydarzyło się podczas zadania. Najpierw zachowaj dowód, potem nazwij możliwą przyczynę, a dopiero na końcu zdecyduj o zmianie.

Celem analizy nie jest wydanie oceny uczestnikowi ani przyznanie tekstowi punktów. Ma ona odpowiedzieć, które elementy pomagają wykonać główne zadanie, które je blokują i czego trzeba dowiedzieć się w następnej próbie.

Uporządkuj materiał, zanim wyciągniesz wnioski

Przejrzyj zapis możliwie szybko po sesji, kiedy pamiętasz kontekst. Uzupełnij niejasne skróty, ale nie poprawiaj wypowiedzi uczestnika tak, by pasowała do wniosku. Połącz każdą ważną notatkę z etapem zadania i widoczną wtedy wersją prototypu. Bez tego później trudno ustalić, czy problem dotyczył treści, stanu ekranu czy sposobu zadania pytania.

Jeśli pracowało kilka osób obserwujących, najpierw niech każda zaznaczy własne fakty. Wspólna rozmowa przed zapisaniem dowodów może nieświadomie ujednolicić wspomnienia i zgubić różnice.

Rozdziel cztery warstwy jednej notatki

Obserwacja

To działanie lub wypowiedź możliwa do umiejscowienia w sesji: uczestnik ominął pierwszą sekcję, przeczytał nazwę linku na głos, wrócił do poprzedniego nagłówka albo powiedział, jak rozumie termin. Zapis „nie znalazł warunku przed rozpoczęciem kroku” jest użyteczniejszy niż „strona jest niejasna”.

Wpływ na zadanie

Opisz konsekwencję bez oceniania osoby. Czy uczestnik nie mógł dokończyć, podjął błędną decyzję, wykonał zbędną pracę, długo się wahał, czy tylko zauważył preferencję stylistyczną? Ta różnica pomaga ustawić kolejność pracy bez wymyślania uniwersalnej skali punktowej.

Możliwa przyczyna

Przyczyna jest hipotezą, nawet jeśli wydaje się oczywista. Warunek mógł zostać pominięty, bo pojawia się za późno, ma ogólny nagłówek, ginie wizualnie albo używa nieznanego słowa. Zapisz więcej niż jedną możliwość, gdy materiał nie pozwala rozstrzygnąć.

Proponowana zmiana i pytanie kontrolne

Zmiana powinna odpowiadać hipotezie: przeniesienie warunku przed krok, nowy opisowy nagłówek, objaśnienie terminu albo rozdzielenie dwóch decyzji. Dopisz, co sprawdzisz w kolejnej wersji. Bez pytania kontrolnego poprawka łatwo staje się wyłącznie opinią autora.

Grupuj zdarzenia według przeszkody, nie według uczestnika

Kilka różnych zachowań może wskazywać jeden problem strukturalny. Cofnięcie, szukanie tego samego słowa i pytanie „gdzie jest warunek?” mogą należeć do jednej grupy. Z drugiej strony podobne zdanie wypowiedziane w różnych momentach może mieć odmienne przyczyny. Grupę nazwij opisem przeszkody, na przykład „warunek widoczny dopiero po rozpoczęciu instrukcji”, a nie ogólnym hasłem „nawigacja”.

Nie przeliczaj automatycznie obserwacji na procenty, jeśli sposób doboru i liczba prób nie pozwalają na taki wniosek. Powtarzalność jest ważną wskazówką, ale pojedyncze zdarzenie blokujące bezpieczne wykonanie zadania również może wymagać reakcji. Kontekst i skutek są ważniejsze niż pozorna precyzja.

Ustal kolejność według skutku i pewności dowodu

Najpierw rozpatrz problemy uniemożliwiające wykonanie zadania, prowadzące do błędnej decyzji albo ukrywające istotny warunek. Następnie zajmij się przeszkodami powodującymi wahanie, cofanie i zbędną pracę. Na końcu zostaw preferencje, które nie zmieniły sposobu użycia treści.

Obok wpływu zapisz siłę materiału. Dokładna obserwacja połączona z etapem zadania jest mocniejsza niż wspomnienie „chyba było trudno”. Jeżeli skutek jest poważny, ale przyczyna niepewna, nie ignoruj problemu — przygotuj wariant, który pozwoli rozróżnić hipotezy w następnej próbie.

Zmieniaj tyle, by wiedzieć, czego się uczysz

Nie każda iteracja musi modyfikować tylko jeden wyraz, ale pakiet zmian powinien mieć wspólną przyczynę. Jeśli jednocześnie zmienisz kolejność wszystkich sekcji, nazwy linków, przykłady i zadanie testowe, trudno będzie zrozumieć następny wynik. Zachowaj kopię wersji, datę, listę decyzji i powód każdej ważnej zmiany.

Po poprawce sprawdź ponownie pełną drogę, nie tylko zmienione zdanie. Przeniesienie warunku może zepsuć wprowadzenie, a nowa nazwa linku może przestać pasować do tytułu strony docelowej. Ponowna próba powinna używać wiarygodnego zadania i nie zdradzać elementu, który właśnie zmieniono.

Przygotuj krótki zapis decyzji

Dla każdej przeszkody zachowaj:

etap i cel zadania;
wersję prototypu;
dokładną obserwację lub krótki cytat;
wpływ na wykonanie zadania;
hipotezę przyczyny;
podjętą zmianę albo powód braku zmiany;
pytanie do kolejnej próby;
status po ponownym sprawdzeniu.

Taki dziennik chroni przed powrotem tej samej dyskusji bez nowych danych. Nie jest raportem sukcesu. Może uczciwie pokazać nierozstrzygnięte pytania i decyzję, że potrzebne jest inne źródło wiedzy.

Nie mieszaj wyniku próby z oceną dostępności

Osoba może wykonać zadanie, mimo że strona nadal ma bariery dla innych sposobów korzystania. Sprawdź osobno tytuł, hierarchię nagłówków, cel linków, etykiety, widoczność fokusu i obsługę klawiaturą. Szybkie sprawdzenie nie jest pełnym audytem zgodności z WCAG. W dzienniku nazwij więc rodzaj dowodu: obserwacja z zadania, kontrola redakcyjna, sprawdzenie techniczne albo ocena dostępności.

Wróć do procedury prototypu i próby

Sprawdź, czy poprawka nadal realizuje kartę treści

Zakończenie: Dobra analiza pozostawia ślad od zdarzenia do decyzji. Nie usuwa niepewności przez głosowanie ani efektowne liczby. Zachowuje obserwację, oddziela hipotezę, wybiera zmianę według wpływu na zadanie i formułuje pytanie, które następna wersja ma pomóc rozstrzygnąć.

Źródła do tego wpisu:

GOV.UK Service Manual, „Analyse a research session”.
GOV.UK Service Manual, „Using moderated usability testing”.
W3C WAI, „Easy Checks”.