Siapa, Apa, dan Mengapa – Panduan untuk Metode Pengujian Pengguna

Tujuan mendasar dari pengujian pengguna adalah untuk lebih memahami dan berempati dengan pengguna inti produk digital. Sayangnya, pengujian pengguna sering kali menjadi renungan.

Dari penyortiran kartu hingga studi kegunaan, metode pengujian pengguna yang digunakan dalam desain UX dikembangkan untuk menyertakan pengguna dalam proses pengambilan keputusan. Namun, banyak proyek diselesaikan hanya dengan umpan balik pemangku kepentingan dari prototipe. Kurangnya pengujian pengalaman pengguna ini terjadi karena dua alasan: ROI negatif yang dirasakan dari pengujian pengguna ditambah dengan kekhawatiran tentang scope creep.

ROI yang Dirasakan pada Metode Pengujian Pengguna

Dari perspektif desainer, implementasi studi kegunaan tidak perlu diperkuat. Setiap desainer UX yang pernah melihat orang berjuang untuk melakukan tugas menggunakan prototipe mereka memahami nilai pengujian pengguna. Sayangnya, sebagian besar eksekutif, insinyur, dan manajer proyek tidak pernah memiliki hak istimewa untuk menyaksikan uji kegunaan, jadi mungkin perlu diyakinkan tentang pentingnya pengujian pengguna dengan cara lain.

Data Membuktikan Peningkatan ROI

Kegunaan secara langsung terkait dengan loyalitas pelanggan dan perilaku pembelian—studi yang dilakukan oleh Jakob Nielsen dari NN/g menunjukkan bahwa ketika kira-kira 10% dari anggaran desain ulang diberikan untuk metode pengujian pengguna, ada peningkatan kegunaan produk rata-rata sebesar 135%.

Studi Kasus Perusahaan

Ketika pengguna dapat dengan mudah menemukan informasi yang mereka cari sendiri, itu mengurangi frustrasi dan meningkatkan pengalaman mereka.

Jutaan pengguna mengunjungi situs dukungan di Mozilla Firefox setiap tahun. Banyak kunjungan berubah menjadi pertanyaan yang diajukan di forum dukungan. Dengan desain yang dioptimalkan agar mudah ditemukan, dalam sembilan minggu pengujian desain berulang, Mozilla mengurangi pertanyaan dukungan hingga 70% .

Studi Kasus Ritel

Perusahaan cat internasional, Dulux, mengetahui masalah utama dalam menjual cat secara online yang melibatkan pertanyaan, "Seperti apa tampilan dinding saya saat cat mengering?" Untuk menyiasatinya, mereka membuat konsep aplikasi augmented reality yang disebut Dulux Visualizer untuk membantu konsumen “membayangkannya sebelum Anda mengecatnya” dan menyewa Webcredible untuk membangun aplikasi tersebut.

Melalui riset pengguna, pemetaan perjalanan pengguna, dan pengujian kegunaan, tim Webcredible menghasilkan aplikasi yang meningkatkan penjualan cat penguji sebesar 65% dan pencarian stokis sebesar 92% .

Scope Creep Aversion

Alasan kedua mengapa pengujian pengguna diabaikan adalah lebih sedikit tentang eksekutif dan lebih banyak tentang manajer proyek. Hampir setiap desainer pernah mendengar seorang manajer proyek mengatakan bahwa karena tenggat waktu yang ketat, tidak ada waktu untuk pengujian pengguna.

Manajer proyek hanya memahami tiga komponen yang penting dalam sebuah proyek: waktu, biaya, dan ruang lingkup. Tarik satu dan yang lain akan bergeser. Misalnya, jika lebih banyak fitur ditambahkan ke proyek, garis waktu akan diperpanjang atau lebih banyak sumber daya akan ditambahkan. Inilah sebabnya ketika garis waktu ditetapkan, seorang PM enggan mengalah. Memahami hal ini, desainer dapat memerangi kecenderungan ini dengan beberapa pendidikan UX tentang berbagai metode yang tersedia, ruang lingkup, dan anggarannya. Mari kita lihat serangkaian metode pengujian pengguna yang dapat digunakan oleh desainer UX untuk mengevaluasi kegunaan produk digital.

Banyaknya Jenis Metode Pengujian Pengguna

Ada banyak jenis tes pengguna, mulai dari perilaku dan sikap hingga kualitatif dan kuantitatif, masing-masing dengan sejumlah peserta untuk hasil yang optimal.

Pengujian sikap dan perilaku diringkas sebagai "apa yang dikatakan orang" vs. "apa yang dilakukan orang." Sering kali keduanya sangat berbeda.

Pengujian kualitatif dan kuantitatif digambarkan sebagai “pengamatan langsung” vs. “pengukuran tidak langsung.” Data pengujian kuantitatif akan selalu menyatakan besaran, jumlah atau jangkauan tertentu, sedangkan data pengujian kualitatif berisi informasi tentang kualitas.

Masing-masing istilah ini termasuk dalam formatif atau sumatif. Kutipan dari Robert E. Stake ini, Profesor Emeritus Pendidikan di University of Illinois, merangkumnya dengan baik: “Ketika juru masak mencicipi sup, itu formatif. Ketika para tamu mencicipi sup, itu sumatif.”

Pengujian Pengguna Perilaku Kualitatif

Jenis tes pengguna ini mengamati apa yang dilakukan sejumlah kecil peserta dalam berbagai situasi, baik di lingkungan kerja mereka yang melakukan rutinitas normal mereka, atau menyelesaikan tugas dalam prototipe yang baru dirancang. Tes ini membutuhkan jumlah peserta paling sedikit dan dengan demikian dapat menjadi yang paling mudah untuk meyakinkan manajer proyek untuk disertakan.

Berapa Jumlah Optimal Peserta dalam Usability Testing?

Menurut buku A Mathematical Model of the Finding of Usability Problems, lima peserta pengujian kegunaan akan mengungkap 85% masalah dalam UI yang diuji. Untuk hasil terbaik, ini harus dilakukan dengan tiga iterasi desain dengan total 15 peserta.

Studi kegunaan sering dilakukan di tengah-tengah proyek setelah desain awal diproduksi. Daripada menunggu sampai produk diluncurkan untuk menemukan masalah kegunaan, data yang dikumpulkan dapat digunakan untuk meningkatkan produk saat lebih mudah untuk membuat perubahan pada spesifikasi desain.

Untuk mendapatkan jumlah lima pengguna yang disarankan per iterasi desain, NN/g melakukan 83 tes kegunaan di berbagai klien dengan studi mulai dari 2 hingga 28 peserta. Hasilnya menunjukkan peningkatan yang signifikan dalam temuan berulang dengan hanya beberapa temuan baru setelah lima peserta. Kesimpulan yang paling penting adalah bahwa semua tes kegunaan menghasilkan setidaknya beberapa wawasan.

12 Pengguna Ditemukan 33 Masalah Saat Pengujian Pengalaman Pengguna

Pengembang aplikasi penderita kanker baru menghubungi Marketade untuk melakukan pengujian kegunaan tiga minggu sebelum tanggal peluncuran produk mereka. Selama periode dua minggu, Marketade melakukan pengujian kegunaan berulang dengan 12 pengguna: 8 penderita kanker dan 4 pengasuh. Tes kegunaan mereka menemukan 33 masalah kegunaan, 9 di antaranya berdampak tinggi.

Hal terbesar yang dimiliki semua studi kasus ini adalah bahwa kelompok uji kecil dapat memiliki dampak besar pada kegunaan akhir suatu produk. Manajer produk, manajer proyek, dan pemangku kepentingan lainnya dapat lebih mudah dibawa ke pengujian pengguna ketika ditunjukkan bahwa tidak perlu ratusan peserta (dan waktu berminggu-minggu) untuk mengumpulkan hasil yang berarti.

Pengujian Pengguna Sikap Kualitatif

Untuk tes ini, peneliti UX menyelidiki kelompok kecil peserta untuk memahami bagaimana perasaan mereka tentang suatu produk, arsitektur, atau desain. Tes sikap kualitatif membutuhkan lebih sedikit peserta daripada studi perilaku kualitatif, tetapi tidak lebih banyak.

Penyortiran Kartu

Sebuah studi dilakukan untuk memahami jumlah minimum peserta penyortiran kartu yang diperlukan dan menemukan bahwa 15 pengguna dapat dengan cepat meningkatkan arsitektur ringan melalui latihan penyortiran kartu, sementara 30 peserta direkomendasikan untuk arsitektur yang lebih besar seperti intranet dan portal. Penyortiran kartu sering dilakukan di tengah proyek setelah mengaudit arsitektur informasi.

Grup fokus

Penelitian terbaru menunjukkan bahwa 3 hingga 6 kelompok fokus dengan 8 hingga 10 peserta dapat mengidentifikasi 90% tema dalam kumpulan data. Kelompok fokus ini biasanya dilakukan selama fase strategi proyek. Ada banyak latihan yang harus dilakukan dengan peserta kelompok terarah, mulai dari latihan desain partisipatif hingga diskusi terbuka.

Contoh Sikap Kualitatif

Perusahaan pengalaman pengguna Etre melakukan upaya besar untuk meningkatkan arsitektur informasi Eurostar. Situs web mereka berisi 11.000 halaman web dan PDF, 80 halaman di antaranya merupakan dasar arsitektur. Etre mengubah setiap halaman inti menjadi kartu untuk latihan penyortiran kartu besar-besaran. Mereka memahami perlunya 20 peserta per grup pengguna, namun, dengan 9 grup pengguna, latihan mereka mencakup 180 peserta, masing-masing menyortir 80 kartu, menghasilkan 14.400 item untuk dikatalogkan!

Untungnya, Etre memanfaatkan sumber daya penyortiran kartu online yang secara otomatis mengurutkan data menjadi wawasan yang dapat dicerna. Sementara latihan penyortiran kartu hanya satu komponen dalam upaya desain web yang lebih besar, Eurostar menyaksikan peningkatan pendapatan sebesar 24% atau £26 juta dari tahun sebelumnya serta peningkatan lalu lintas situs web sebesar 2,2%.

Pengujian Pengguna Perilaku Kuantitatif

Untuk jenis studi ini, diperlukan setidaknya 20 peserta dan seringkali lebih banyak. Dengan studi kuantitatif, peneliti UX mencari pola dalam data yang dikumpulkan, sehingga semakin banyak peserta, semakin akurat datanya.

peta panas

NN/g menemukan bahwa 39 pengguna diharuskan memberikan detail peta panas yang dibutuhkan untuk latihan pelacakan mata. Diperlukan minimal 30 set data pelacakan mata yang baik untuk setiap halaman yang diuji, yang rata-rata mencapai 39 pengguna sebenarnya untuk mencapai kumpulan data tersebut (karena teknologi pelacakan mata tidak sempurna). Pelacakan mata untuk peta panas biasanya dilakukan setelah desain baru dijalankan.

Studi Kuantitatif

Setidaknya 20 peserta direkomendasikan untuk studi kuantitatif. Seperti pengujian kegunaan, studi ini dilakukan untuk memahami bagaimana perilaku pengguna dengan menyelesaikan serangkaian tugas. Perbedaannya adalah bagaimana data dikumpulkan, yaitu melalui pengamatan jarak jauh, bukan latihan satu lawan satu. Mereka sering dilakukan menjelang akhir setelah produk atau prototipe interaktif di-host secara online.

Karena jenis studi ini memerlukan lebih banyak pengguna, studi tersebut dapat memakan waktu lebih lama dan lebih mahal untuk dilakukan. Karena alasan itu, mereka lebih jarang digunakan daripada banyak metode pengujian pengguna kualitatif.

Peningkatan Retensi Pengguna

Melalui situs penelitian kuantitatif UserTesting, Evernote meningkatkan retensi pengguna sebesar 15% di beberapa perangkat. Dengan menghosting produk mereka di UserTesting.com dan memanfaatkan audiens mereka yang beragam, Evernote dapat memahami di mana pengguna mengalami masalah. Menggunakan jenis alat pengujian pengguna ini sangat berharga untuk produk yang memiliki khalayak luas di mana serangkaian umpan balik pengguna yang beragam sangat membantu. Solusi lain mungkin bekerja lebih baik untuk produk dengan kumpulan pengguna yang sangat spesifik dan pasti.

Pengujian Pengguna Sikap Kuantitatif

Tes yang paling banyak melibatkan peserta adalah latihan sikap kuantitatif. Tujuannya adalah untuk memahami apa yang dipikirkan sekelompok besar individu tentang suatu produk, dengan tujuan menyusun jawaban ke dalam bagan dan grafik yang bermakna untuk konsumsi yang mudah.

Survei

Peserta survei bervariasi menurut ukuran populasi produk. Hasil yang optimal mencakup margin kesalahan 5% (atau kurang) dan setidaknya tingkat kepercayaan 95%. Anda dapat menggunakan kalkulator ukuran sampel untuk menentukan jumlah peserta yang diperlukan.

Misalnya, situs kecil dengan ukuran populasi 100 hanya membutuhkan 80 peserta survei, sedangkan situs populer dengan ukuran populasi 100.000 membutuhkan 383 peserta survei. Survei dilakukan pada awal dan akhir proyek.

Contoh Sikap Kuantitatif

Walmart.ca mengumpulkan banyak data situs web statistik, tanpa wawasan pelanggan, data mereka hanya menceritakan setengah dari cerita. Dengan memasukkan data manusia melalui survei situs web, bersama dengan data transaksional mereka, Walmart dapat melihat gambaran lengkap dan meningkatkan tata letak situs mereka yang pada gilirannya meningkatkan pendapatan mereka sebesar 13%.

Ringkasan

Menampilkan data keras pembuat keputusan dapat meyakinkan mereka untuk mendedikasikan sumber daya untuk pengujian pengguna. Pengguna adalah tulang punggung produk dan tujuan sebenarnya dari desain pengalaman pengguna; menerapkan beberapa metode pengujian pengguna yang diuraikan dalam artikel ini untuk mengumpulkan data kualitatif dan kuantitatif untuk membuktikan apa yang berhasil dan apa yang tidak harus menjadi prioritas utama bagi setiap desainer UX.

Beri tahu kami pendapat Anda! Silakan tinggalkan pemikiran, komentar, dan umpan balik Anda di bawah ini.

Bacaan Lebih Lanjut di Blog Desain Toptal:

• ROI Sejati dari UX: Meyakinkan Suite Eksekutif
• Bagaimana Melakukan Pengujian Kegunaan dalam Enam Langkah
• Mengubah Data Pengujian Kegunaan menjadi Tindakan tanpa Menjadi Gila
• Cara Melakukan Riset UX yang Efektif – Panduan
• 10 Hasil Kerja UX yang Digunakan Desainer Teratas