Banyak orang yang melakukan uji langsung lompat ke “pakai tools remote testing aja, lebih praktis” tanpa benar-benar mempertimbangkan apa yang sebenarnya ingin mereka pelajari. Padahal, keputusan in-person vs remote, moderated vs unmoderated bahkan format sesi seperti concept exploration seharusnya ditentukan oleh pertanyaan riset yang sedang dijawab, bukan oleh kebiasaan tim atau tools mana yang paling mudah dipakai.

In-Person vs. Remote Testing

Baik in-person maupun remote testing tetap menjadi pilihan yang valid, dan pilihan yang tepat bergantung pada logistik serta jenis observasi apa yang paling penting untuk didapatkan. In-person testing mendukung pengamatan langsung oleh tim dan sesi debrief kelompok segera setelah setiap sesi selesai. Komentar terbaru dari Nielsen Norman Group secara spesifik mengajak kembali ke in-person testing, karena cara ini membangun rapport, mengungkap non-verbal cues, dan menciptakan pengalaman yang lebih imersif bagi stakeholder yang ikut menyaksikan sesi secara langsung.

Remote moderated testing, sebaliknya, sangat cocok untuk audiens yang terdistribusi secara geografis atau sulit dijangkau, karena seorang human researcher masih bisa memfasilitasi sesi tersebut walaupun partisipannya berada di rumah atau kantornya sendiri.

  • Remote moderated: seorang researcher secara live memandu partisipan menyelesaikan tugas lewat video call, sehingga tetap bisa mengajukan follow-up questions secara real time.
  • Remote unmoderated: partisipan menyelesaikan tugas secara mandiri menggunakan software, yang jauh lebih mudah di-scale, tetapi mengorbankan kemampuan researcher untuk meluruskan instruksi yang membingungkan di tempat.

Studi unmoderated memberi bobot ekstra pada bagaimana instruksi tugas ditulis, karena partisipan tidak bisa meminta klarifikasi ke researcher di tengah sesi dan ambiguitas apa pun dalam instruksi berisiko membuat seluruh data sesi tersebut tidak valid. Beberapa sumber lain, seperti panduan dari UXtweak dan UserTesting, juga sepakat bahwa moderated testing lebih cocok untuk eksplorasi awal yang membutuhkan insight kualitatif mendalam, sementara unmoderated testing lebih unggul untuk skala besar, biaya rendah, dan kebutuhan data cepat di tahap akhir desain.

Merancang Sesi Concept Exploration

Sebelum proses desain layar yang detail dimulai, tim sering menjalankan sesi concept exploration untuk mengukur reaksi terhadap arah visual awal — misalnya membandingkan dua konsep gaya yang benar-benar berbeda secara berdampingan. Sesi seperti ini sengaja dibuat lebih ringan dibanding usability testing penuh; tujuannya bukan mengukur task completion, melainkan menggali brand perception, respons emosional, dan bahasa yang secara alami digunakan partisipan untuk menggambarkan masing-masing arah desain.

Menyusun sesi seperti ini biasanya melibatkan: periode review individu secara diam (silent review), aktivitas memberi rating atau ranking, dan diskusi terbuka yang dipandu moderator (moderated open discussion) kira-kira dalam urutan tersebut, agar partisipan membentuk kesan pertama mereka sendiri sebelum diskusi kelompok mempengaruhi opini tersebut. Pendekatan ini sejalan dengan apa yang dijelaskan NN/G dalam riset mereka tentang testing visual design, yang merekomendasikan format seperti meminta partisipan menuliskan beberapa kata yang menggambarkan sebuah desain sebagai cara terstruktur namun tetap terbuka untuk menangkap persepsi mereka, sebelum beralih ke metode yang lebih terstruktur seperti rating numerik.

Kesimpulan

Setiap keputusan testing qualitative vs quantitative, in-person vs remote, moderated vs unmoderated seharusnya didorong oleh pertanyaan spesifik yang ingin dijawab tim, bukan oleh kebiasaan atau kemudahan semata. Tim yang sedang mengejar root cause dan tim yang sedang mengejar benchmark yang bisa dipertahankan secara argumentatif membutuhkan desain studi yang fundamental berbeda, dan menyamakan keduanya hanya akan menghasilkan hasil yang tidak benar-benar memuaskan tujuan mana pun.

Penulis:

D7267 – Samson Ndruru

Sumber: