Kami baru-baru ini mempelajari pengujian kegunaan yang tidak dimoderasi, mencantumkan pro dan kontranya dan menawarkan panduan enam langkah sederhana untuk pengelolaannya.
Dalam artikel ini, kita akan membahas sisi lain dari koin, memeriksa manfaat dari pengujian kegunaan yang dimoderasi (secara langsung) dan apa artinya bagi data yang Anda kumpulkan.
Kapan sebaiknya Anda menggunakan pengujian kegunaan yang dimoderasi?
Pertama, Anda hanya dapat melakukan pengujian moderat jika Anda memiliki waktu dan sumber daya untuk mewujudkannya. Jika anggaran tidak menjadi masalah, kami menyarankan agar pengujian moderat memberikan hasil yang lebih spesifik di hampir semua kasus. Namun, hidup tidak selalu sesederhana itu, dan mungkin informasi yang mendetail seperti itu tidak selalu diperlukan. Sebagai peneliti UX, kita harus memilih pertempuran yang sesuai dengan informasi yang kita butuhkan untuk diungkap.
Anggaplah anggaran sesuai dengan kebutuhan Anda dan dapat memenuhi jumlah peserta yang sesuai; jenis pengujian produk apa yang paling banyak dilakukan dengan opsi ini?
Pengujian kegunaan yang dimoderasi adalah pendekatan yang lebih disukai untuk produk yang rumit atau komplekssering kali berupa prototipe dan opsi tahap awal, dan untuk solusi yang mendorong pengguna untuk mengajukan pertanyaan eksploratif sendiri. Ini juga cocok digunakan dalam pengujian penemuanmemeriksa layanan yang ada untuk mencari masalah dan isu-isu yang mungkin tidak terlihat.
Baik dilakukan dari jarak jauh maupun secara langsung, pengujian yang dimoderasi memungkinkan pengamatan, kontrol, dan eksplorasi yang lebih besar, memberikan kedalaman data yang tidak tertandingi oleh pengujian yang tidak dimoderasi.
Pengujian kegunaan yang dimoderasi vs yang tidak dimoderasi? rekapitulasi singkat
Tanpa menyiapkan laboratorium studi atau lingkungan yang sesuai atau mengatur perjalanan untuk peserta dan moderator ke lokasi bersama yang sesuai, pengujian tanpa moderator akan lebih cepat dan lebih murah untuk dijalankan.
Ini adalah cara yang cepat dan efisien untuk memvalidasi produk dan fitur dengan menggunakan tugas yang telah ditentukan sebelumnya atau mengumpulkan data dengan mengajukan pertanyaan yang dirancang khusus.
Namun, tanpa moderator untuk memandu penelitian, memantau setiap peserta selama rincian operasi yang lebih rinci, sikap dan ekspresi mereka, dan mengejar penjelasan yang lebih dalam ke dalam tindakan tertentu, para perancang mungkin gagal mengungkap data yang mereka harapkan dalam situasi yang lebih kompleks.
Manfaat dari pengujian kegunaan yang dimoderasi
Mari kita pertimbangkan uji kegunaan yang dimoderasi sebagai wawancara waktu nyata yang dibangun di sekitar pelaksanaan latihan tertentu. Moderator dapat mengambil kendali penuh atas situasi apa pun, memandu setiap peserta untuk melakukan tugas-tugas yang mengungkapkan kinerja produk dan pengguna.
Kapan pun peserta merasa tidak yakin, mereka memiliki titik kontak utama untuk meminta dan menerima bantuan. Jadi, apa artinya bagi pengujian?
Tingkat keterlibatan yang lebih tinggi
Dengan adanya moderator yang memimpin penelitian, setiap peserta akan lebih fokus pada tugas yang sedang dikerjakan. Dengan tes tanpa moderator, peserta dapat datang dan pergi sesuka hati atau terganggu oleh siapa pun atau apa pun di lingkungan setempat.
Dengan percakapan yang berkelanjutan selama pengujian dan tugas-tugasnya, setiap moderator dapat membangun hubungan baik dan kepercayaan, sehingga memotivasi peserta untuk melakukan yang terbaik yang mereka bisa.
Ini juga merupakan kesempatan untuk membantu peserta yang pendiam dan kurang percaya diri agar dapat bersuara lebih lantang.
Kontrol yang lebih besar
Pengujian langsung yang dimoderasi memungkinkan fasilitator memiliki kendali penuh atas setiap tugas dan arahnya. Jika mereka menemukan sesuatu yang tidak biasa, mereka memiliki kesempatan untuk mengikuti jalur yang sama sekali berbeda untuk mendapatkan data yang tidak terduga atau yang sebelumnya tidak terlihat. Mereka juga dapat bereaksi terhadap ekspresi kebingungan atau frustrasi, menanyakan apa dan mengapa kinerjanya tidak sederhana dan bagaimana cara membuatnya lebih baik.
Komunikasi langsung memberikan akses untuk menindaklanjuti pertanyaan-pertanyaan langsung
Moderator tidak hanya mengarahkan tugas ketika mereka menuju ke arah yang salah, mengembalikan masalah ke jalur yang benar, tetapi mereka juga mengajukan pertanyaan tindak lanjut yang mendetail berdasarkan tindakan dan pengamatan setiap pengguna. Kontrol ini memberikan lebih banyak data ke dalam masalah baru atau yang diharapkan, sehingga para perancang dapat memberikan lebih banyak panduan untuk mendapatkan solusi yang paling efisien dan efektif.
Kemudahan pengamatan fisik, termasuk ekspresi wajah, tingkah laku, dan penggunaan produk
Peserta memberikan petunjuk dan isyarat melalui bahasa tubuh, ekspresi wajah, dan tingkah laku yang mungkin tidak dapat mereka ungkapkan dengan kata-kata yang diucapkan atau jawaban tertulis. Pemantauan yang ketat membuat jeda dan masalah lebih mudah dideteksi, sesuatu yang tidak dapat dicapai oleh operasi yang tidak dimoderasi.
Terkadang, tanda-tanda yang paling halus mengarah pada peluang yang paling berharga? Hal-hal yang dapat dengan mudah terlewatkan dalam jenis pengujian lainnya.
Kerugian dari pengujian kegunaan yang dimoderasi
Meskipun keuntungannya cukup mudah, namun kelemahan dari pengujian yang dimoderasi tidak boleh diabaikan, terutama jika kita ingin mendapatkan data terbaik dari subjek penelitian kita.
Kemungkinan adanya bias tanggapan
Dengan adanya moderator yang melakukan setiap tes dan tugas, ada kemungkinan mereka secara tidak sadar memandu peserta ke arah hasil yang mereka harapkan. Bahkan dengan menggunakan sedikit sugesti dalam pertanyaan mereka dapat menyebabkan pengguna memberikan jawaban yang mereka pikir ingin didengar oleh moderator, bukan yang sebenarnya mereka pikirkan dan rasakan.
Peserta mungkin bertindak kurang alami di bawah pengamatan
Moderator yang baik akan mendorong para peserta untuk rileks dan bertindak seperti yang mereka lakukan jika mereka tidak berada di sana. Namun, itu adalah keterampilan yang membutuhkan latihan. Bahkan moderator terbaik pun akan bekerja dengan peserta yang sedikit gugup atau bereaksi kurang baik saat berada di bawah pengamatan dan pengawasan yang ketat.
Lebih mahal dan membutuhkan lebih banyak sumber daya untuk menyiapkannya
Seperti yang telah disebutkan, biaya yang dikeluarkan lebih tinggi dengan pengujian yang dimoderasi; selain implikasi keuangan, ada tambahan waktu dan upaya yang diperlukan untuk mengatur dan melaksanakan setiap studi. Dengan adanya tambahan waktu dan biaya tersebut, ukuran sampel cenderung lebih kecil, yang dapat menghasilkan data statistik yang kurang akurat.
Menyampaikan rencana pengujian kegunaan yang dimoderasi
Terdapat banyak kesamaan saat merancang rencana uji kegunaan yang dimoderasi dan yang tidak dimoderasi. Sebagai contoh, tahapan berikut ini terlihat cukup mirip dengan proses yang ada di halaman uji kegunaan yang tidak dimoderasinamun perbedaan utama cenderung pada desain dan pelaksanaan tes serta tugas-tugasnya.
- Tentukan tujuan Anda.
- Tentukan kriteria peserta dan bangun kumpulan pengguna Anda.
- Rancang dan buat proses pengujian Anda.
- Jalankan uji coba.
- Melakukan tes akhir.
- Mensintesiskan data baru.
- Analisis hasilnya dan sajikan temuan Anda.
Melakukan pengujian secara langsung memungkinkan skrip dan panduan yang jauh lebih bebas. Namun, ketika merancang pengujian Anda - dan banyak pilihan penelitian UX yang cocok untuk setiap jenis dan tahap pengujian kegunaan - Anda harus menentukan cara yang paling tepat dan kemungkinan besar dapat memberikan data yang Anda butuhkan.
Melakukan uji kegunaan yang dimoderasi
Gambaran sederhana mungkin terlihat seperti berikut ini:
- Pendahuluan ? Jalankan prosedur dan apa yang diharapkan, dan cobalah untuk membuat pengguna rileks.
- Wawancara pra-sesi ? Tanyakan tentang riwayat, perilaku, dan kebiasaan peserta, serta ajukan pertanyaan pra-tugas yang diperlukan tentang produk, industri, atau bidang lain yang relevan.
- Melakukan tugas-tugas ? Semua tugas harus dirancang berdasarkan tujuan yang telah ditetapkan.
- Wawancara pasca sesi ? Ajukan pertanyaan yang tidak terlalu penting untuk mengganggu alur selama pengujian, bagaimana mereka merasakan kinerja produk, dan hal-hal apa yang dapat dilakukan dengan lebih baik untuk mengungkap lebih banyak tentang pengalaman mereka. Dan selalu ucapkan terima kasih kepada peserta karena telah membantu penelitian Anda.
Ada beberapa faktor lebih lanjut dalam pengujian moderasi yang perlu dipertimbangkan dengan cermat:
- Pertimbangkan waktu dan jadwal pengujian? Membuat jadwal pengujian untuk kelompok peserta yang banyak bisa menjadi tantangan tersendiri.
- Rencanakan cara merekam penampilan peserta dan pilih alat pemantauan yang Anda sukai.
- Pastikan untuk merancang dan memberikan tugas dalam urutan yang ditetapkan untuk mempertahankan alur alami melalui pengujian.
Kiat untuk fasilitator yang memoderasi uji kegunaan
Idealnya, setiap moderator harus berpengalaman dalam melakukan pengujian dan memahami penelitian UX dan produk yang sedang diteliti.
Namun, poin-poin berikut ini menawarkan beberapa tips dasar yang penting bagi mereka yang merencanakan pengujian kegunaan mereka sendiri.
- Jelas dan ringkas? Jaga nada yang stabil dan pertahankan konsistensi di antara para peserta.
- Cobalah untuk tidak setuju atau tidak setuju dengan jawaban peserta. Yakinkan mereka bahwa tidak ada yang benar atau salah; nilainya ada pada jawaban dan tindakan mereka.
- Rekam semua sesi - ada nilai yang besar dalam merekam dan menyalin wawancara dan percakapan tugas.
- Buatlah catatan atau tunjuklah anggota tim kedua untuk mencatatnya.
- Berikan waktu dan ruang yang cukup bagi peserta untuk mempertimbangkan dan mengeksplorasi setiap tugas.
- Tetaplah senyap selama mengerjakan tugas kecuali jika perlu untuk menyela.
- Ketahui kapan harus menyela (dan kapan tidak) dan cara terbaik untuk melakukannya tanpa mengganggu proses.
- Biarkan kesimpulan sampai tes selesai, fokuslah pada tugas yang ada di hadapan Anda.
- Pantau secara cermat gerak-gerik fisik dan perubahan ekspresi.
- Gunakan data pribadi dan relevan, jika memungkinkan, agar peserta tetap terlibat dan tugas-tugasnya realistis.
- Doronglah para peserta untuk menjelaskan apa yang mereka lakukan, jika diperlukan.
- Berlatihlah skrip dan kenali teknologi apa pun yang akan Anda gunakan. Uji coba adalah kesempatan yang ideal untuk mengatasi masalah sebelum tes yang sesungguhnya dimulai.
- Jangan biarkan apa pun kebetulan, buat daftar periksa untuk setiap tugas dan tahapan.
- Jaga agar setiap tes tetap berada di jalurnya - meskipun perlu untuk mengeksplorasi jalan yang tidak terduga saat hal itu terjadi, mengikuti program tes Anda akan menjaga alur dan kesinambungan antara tugas dan peserta.
Ringkasan
Terdapat perbedaan yang signifikan antara pengujian kegunaan yang tidak dimoderasi dan yang dimoderasi. Memilih opsi yang sesuai dengan tujuan tergantung pada tim desain dan penelitian serta sumber daya. Seperti halnya pengujian lainnya, mendefinisikan tujuan yang ingin Anda capai sangatlah penting, dan metode yang Anda gunakan untuk mengungkap data Anda harus berkisar pada tujuan tersebut.
Jika dilakukan dengan benar, pengujian kegunaan dapat mengungkap masalah yang tidak terduga serta memvalidasi ide dan pembuatan produk. Ini adalah bagian penting dari penelitian UX dan sumber daya yang berharga untuk memeriksa masalah kegunaan, pemikiran pengguna, nilai, perilaku, dan meningkatkan pengalaman mereka.
Jika Anda ingin tahu lebih banyak tentang teknik yang menarik dan berpotensi sangat berguna ini, hubungi kami di +44(0)800 024624 atau email kami di hello@ux247.com.
