Kto, co i dlaczego — przewodnik po metodach testowania użytkowników

Podstawowym celem testowania przez użytkowników jest lepsze zrozumienie i empatia do głównych użytkowników produktu cyfrowego. Niestety, testowanie przez użytkowników jest często przemyślane.

Od sortowania kart po badania użyteczności, metody testowania użytkowników wykorzystywane w projektowaniu UX są opracowywane w celu włączenia użytkownika w proces podejmowania decyzji. Jednak wiele projektów jest kończonych tylko z informacją zwrotną od interesariuszy o prototypie. Ten brak testowania doświadczeń użytkownika występuje z dwóch powodów: postrzeganego negatywnego zwrotu z inwestycji w testowanie użytkowników w połączeniu z obawą o pełzanie zakresu.

Postrzegany zwrot z inwestycji w metody testowania użytkowników

Z punktu widzenia projektanta realizacja badań użyteczności nie wymaga wzmocnienia. Każdy projektant UX, który kiedykolwiek obserwował, jak ludzie zmagają się z wykonywaniem zadań przy użyciu swojego prototypu, rozumie wartość testowania przez użytkowników. Niestety, większość kadry kierowniczej, inżynierów i kierowników projektów nigdy nie miała przywileju bycia świadkiem testu użyteczności, więc prawdopodobnie będzie trzeba przekonać w inny sposób o ważności testowania przez użytkowników.

Dane potwierdzają wzrost ROI

Użyteczność jest bezpośrednio powiązana z lojalnością klientów i zachowaniami zakupowymi — badania przeprowadzone przez Jakoba Nielsena z NN/g sugerują, że gdy około 10% budżetu na przeprojektowanie jest przeznaczone na metody testowania użytkowników, średni wzrost użyteczności produktu wynosi 135%.

Studium przypadku przedsiębiorstwa

Gdy użytkownicy mogą samodzielnie znaleźć informacje, których szukają, zmniejsza to frustrację i poprawia ich wrażenia.

Miliony użytkowników odwiedzają witrynę pomocy technicznej w przeglądarce Mozilla Firefox każdego roku. Wiele wizyt zamienia się w pytania zadawane na forum wsparcia. Dzięki projektowi zoptymalizowanemu pod kątem wykrywalności, w ciągu dziewięciu tygodni od iteracyjnego testowania projektu, Mozilla zmniejszyła liczbę pytań dotyczących pomocy technicznej o 70% .

Studium przypadku handlu detalicznego

Międzynarodowa firma zajmująca się farbami, Dulux, wiedziała, że ​​głównym problemem związanym ze sprzedażą farby przez Internet było pytanie: „Jak będzie wyglądać moja ściana po wyschnięciu farby?” Aby obejść ten problem, opracowali koncepcję aplikacji rozszerzonej rzeczywistości o nazwie Dulux Visualizer , aby pomóc konsumentom „wyobrazić to, zanim namalujesz” i zatrudnili Webcredible do zbudowania aplikacji.

Dzięki badaniom użytkowników, mapowaniu podróży użytkowników i testom użyteczności, zespół Webcredible stworzył aplikację, która zwiększyła sprzedaż testerów farb o 65% i wyszukiwania w sklepach o 92% .

Niechęć do pełzania w zakresie

Drugim powodem, dla którego pomija się testowanie przez użytkowników, jest w mniejszym stopniu kierownik, a bardziej kierownik projektu. Niemal każdy projektant słyszał, jak kierownik projektu powiedział, że z powodu napiętego terminu nie ma czasu na testy użytkowników.

Menedżerowie projektów rozumieją tylko trzy elementy, które mają znaczenie w projekcie: czas, koszt i zakres. Pociągnij jeden, a drugi się przesunie. Na przykład, jeśli do projektu zostanie dodanych więcej funkcji, oś czasu wydłuży się lub zostanie dodanych więcej zasobów. To dlatego, gdy wyznaczona jest oś czasu, PM niechętnie się uchyla. Rozumiejąc to, projektanci mogą zwalczać te tendencje za pomocą pewnej edukacji UX na temat różnych dostępnych metod, ich zakresu i budżetu. Przyjrzyjmy się szeregowi metod testowania użytkowników, które projektanci UX mogą zastosować do oceny użyteczności produktów cyfrowych.

Wiele rodzajów metod testowania użytkowników

Istnieje wiele rodzajów testów użytkowników, od behawioralnych i postaw po jakościowe i ilościowe, każdy z określoną liczbą uczestników w celu uzyskania optymalnych wyników.

Testy postaw i zachowań podsumowuje się jako „co ludzie mówią” kontra „co ludzie robią”. Wiele razy te dwie rzeczy są bardzo różne.

Testowanie jakościowe i ilościowe opisuje się jako „obserwację bezpośrednią” lub „pomiar pośredni”. Ilościowe dane testowe zawsze wyrażają określoną ilość, ilość lub zakres, podczas gdy jakościowe dane testowe zawierają informacje o jakości.

Każdy z tych terminów podlega formatywnemu lub podsumowującemu. Ten cytat z Roberta E. Stake, emerytowanego profesora edukacji na Uniwersytecie Illinois, dobrze to podsumowuje: „Kiedy kucharz smakuje zupę, jest to kształtujące. Kiedy goście skosztują zupy, to wszystko podsumowuje”.

Jakościowe testy behawioralne użytkowników

Ten typ testu użytkownika obserwuje, co niewielka liczba uczestników robi w różnych sytuacjach, czy to w ich środowisku pracy, wykonując swoją normalną rutynę, czy wykonując zadania w ramach niedawno zaprojektowanego prototypu. Testy te wymagają najmniejszej liczby uczestników i jako takie mogą być najłatwiejsze do przekonania kierownika projektu do włączenia.

Jaka jest optymalna liczba uczestników testów użyteczności?

Według książki A Mathematical Model of the Finding of Usability Problems , pięciu uczestników testów użyteczności odkryje 85% problemów w testowanym interfejsie użytkownika. Aby uzyskać najlepsze wyniki, należy to wykonać w trzech iteracjach projektowych dla łącznie 15 uczestników.

Studia użyteczności są często przeprowadzane w środku projektu, po utworzeniu wstępnego projektu. Zamiast czekać z wykryciem problemów z użytecznością do momentu uruchomienia produktu, zebrane dane można wykorzystać do ulepszenia produktu, gdy łatwiej jest wprowadzić zmiany w specyfikacji projektu.

Aby uzyskać sugerowaną liczbę pięciu użytkowników na iterację projektu, NN/g przeprowadził 83 testy użyteczności na różnych klientach z badaniami obejmującymi od 2 do 28 uczestników. Wyniki wykazały znaczny wzrost powtarzających się wyników z zaledwie kilkoma nowymi odkryciami po pięciu uczestnikach. Najważniejszy wniosek jest taki, że wszystkie testy użyteczności dały przynajmniej pewien wgląd.

12 użytkowników odkryło 33 problemy podczas testowania doświadczenia użytkownika

Twórcy nowej aplikacji do walki z rakiem skontaktowali się z Marketade w celu przeprowadzenia testów użyteczności na trzy tygodnie przed datą premiery produktu. W ciągu dwóch tygodni Marketade przeprowadziło iteracyjne testy użyteczności na 12 użytkownikach: 8 osobach, które przeżyły raka i 4 opiekunach. Ich testy użyteczności wykryły 33 problemy z użytecznością, z których 9 miało duży wpływ.

Największą wspólną cechą wszystkich tych studiów przypadku jest to, że małe grupy testowe mogą mieć ogromny wpływ na końcową użyteczność produktu. Menedżerowie produktu, kierownicy projektów i inni interesariusze mogą łatwiej zostać zaangażowani do testowania użytkowników, gdy zostanie wykazane, że zebranie znaczących wyników nie zajmuje setek uczestników (i tygodni).

Jakościowe testy postaw użytkowników

W tym teście badacze UX badają małe grupy uczestników, aby zrozumieć, co myślą o produkcie, architekturze lub projekcie. Jakościowe testy postaw wymagają kilku uczestników więcej niż jakościowe badania behawioralne, ale niewiele więcej.

Sortowanie kart

Przeprowadzono badanie w celu zrozumienia minimalnej liczby wymaganych uczestników sortowania kart i okazało się, że 15 użytkowników może szybko ulepszyć lekką architekturę poprzez ćwiczenie sortowania kart, podczas gdy 30 uczestników jest zalecanych w przypadku większych architektur, takich jak intranet i portale. Sortowanie kart jest często wykonywane w środku projektu po przeprowadzeniu audytu architektury informacji.

Grupa badawcza

Ostatnie badania pokazują, że 3 do 6 grup fokusowych z 8 do 10 uczestnikami może zidentyfikować 90% tematów w zbiorze danych. Te grupy fokusowe są zwykle prowadzone w fazie strategicznej projektu. Istnieje wiele ćwiczeń do przeprowadzenia z uczestnikami grup fokusowych, od ćwiczeń projektowych z uczestnictwem po otwarte dyskusje.

Jakościowy przykład postawy

Firma Etre zajmująca się doświadczeniami użytkowników podjęła ogromny wysiłek, aby ulepszyć architekturę informacji Eurostar. Ich witryna zawierała 11 000 stron internetowych i plików PDF, z czego 80 stron miało fundamentalne znaczenie dla architektury. Etre zamienił każdą główną stronę w kartę do ogromnego ćwiczenia sortowania kart. Rozumieli potrzebę 20 uczestników na grupę użytkowników, jednak przy 9 grupach użytkowników ich ćwiczenie obejmowało 180 uczestników, każdy sortujący 80 kart, wytwarzający 14 400 pozycji do skatalogowania!

Na szczęście firma Etre wykorzystała internetowy zasób do sortowania kart, który automatycznie sortował dane w przystępne spostrzeżenia. Podczas gdy sortowanie kart było tylko jednym z elementów większego wysiłku związanego z projektowaniem stron internetowych, Eurostar odnotował wzrost przychodów o 24% lub 26 milionów funtów w porównaniu z poprzednim rokiem, a także wzrost ruchu w witrynie o 2,2%.

Ilościowe testy behawioralne użytkowników

W przypadku tego typu badania wymaganych jest co najmniej 20 uczestników, a często więcej. W badaniach ilościowych badacze UX szukają wzorców w gromadzonych danych, więc im więcej uczestników, tym dokładniejsze dane.

Mapy ciepła

NN/g ustalił, że 39 użytkowników jest zobowiązanych do dostarczenia niezbędnych szczegółów mapy termicznej do ćwiczeń śledzenia wzroku. Dla każdej testowanej strony potrzeba co najmniej 30 zestawów dobrych danych do śledzenia wzroku, co daje średnią do 39 rzeczywistych użytkowników, aby osiągnąć ten zestaw danych (ponieważ technologia śledzenia wzroku nie jest idealna). Śledzenie wzroku dla map popularności jest zwykle wykonywane po wykonaniu nowego projektu.

Badania ilościowe

Do badań ilościowych zaleca się co najmniej 20 uczestników. Podobnie jak testy użyteczności, te badania są przeprowadzane w celu zrozumienia, jak zachowuje się użytkownik, wykonując zestaw zadań. Różnica polega na tym, jak zbierane są dane, czyli poprzez przeglądanie na odległość zamiast ćwiczeń jeden na jednego. Często są one wykonywane pod koniec po udostępnieniu produktu lub interaktywnego prototypu w Internecie.

Ponieważ tego typu badania wymagają większej liczby użytkowników, ich przeprowadzenie może zająć więcej czasu i być droższe. Z tego powodu są rzadziej używane niż wiele jakościowych metod testowania użytkowników.

Zwiększone utrzymanie użytkowników

Poprzez witrynę badań ilościowych UserTesting Evernote zwiększył retencję użytkowników o 15% na wielu urządzeniach. Hostując swój produkt na UserTesting.com i wykorzystując swoją zróżnicowaną publiczność, Evernote był w stanie zrozumieć, gdzie użytkownicy napotkali problemy. Korzystanie z tego rodzaju narzędzi do testowania przez użytkowników jest szczególnie cenne w przypadku produktów, które mają szerokie grono odbiorców, w przypadku których pomocny jest zróżnicowany zestaw opinii użytkowników. Inne rozwiązania mogą działać lepiej w przypadku produktów z bardzo specyficzną, zdefiniowaną grupą użytkowników.

Ilościowe testowanie postaw użytkownika

Najbardziej intensywnym testem uczestników jest ilościowe ćwiczenie nastawienia. Celem jest zrozumienie, co duża grupa osób myśli o produkcie, w celu zestawienia odpowiedzi w zrozumiałe wykresy i wykresy, które ułatwią konsumpcję.

Ankiety

Uczestnicy ankiety różnią się w zależności od wielkości populacji produktów. Optymalne wyniki obejmują 5% margines błędu (lub mniej) i co najmniej 95% poziom ufności. Możesz skorzystać z kalkulatora wielkości próbki, aby określić wymaganą liczbę uczestników.

Na przykład mała witryna o liczbie ludności 100 potrzebuje tylko 80 uczestników ankiety, podczas gdy popularna witryna o liczbie ludności 100 000 wymaga 383 uczestników ankiety. Ankiety są przeprowadzane zarówno na początku, jak i na końcu projektu.

Ilościowy przykład postawy

Podczas gdy Walmart.ca zebrał mnóstwo statystycznych danych dotyczących witryn, bez wiedzy klientów ich dane opowiedziały tylko połowę prawdy. Uwzględniając dane ludzkie w ankietach internetowych, wraz z danymi transakcyjnymi, Walmart był w stanie zobaczyć pełny obraz i poprawić układ witryny, co z kolei zwiększyło ich przychody o 13%.

Streszczenie

Pokazanie decydentom twardych danych może przekonać ich do poświęcenia zasobów na testowanie użytkowników. Użytkownik jest podstawą produktu i prawdziwym celem projektowania doświadczeń użytkownika; wdrożenie niektórych metod testowania użytkowników opisanych w tym artykule w celu zebrania danych jakościowych i ilościowych, aby udowodnić, co działa, a co nie, powinno być najwyższym priorytetem dla każdego projektanta UX.

Pozwól nam wiedzieć co myślisz! Zostaw swoje przemyślenia, komentarze i opinie poniżej.

Dalsza lektura na blogu Toptal Design:

• Prawdziwy zwrot z inwestycji w UX: przekonujący pakiet dla kadry kierowniczej
• Jak przeprowadzić test użyteczności w sześciu krokach
• Przekształcanie danych z testów użyteczności w działanie bez popadania w obłęd
• Jak prowadzić skuteczne badania UX – przewodnik
• 10 elementów UX, z których korzystają najlepsi projektanci