<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0" xmlns:cc="http://cyber.law.harvard.edu/rss/creativeCommonsRssModule.html">
    <channel>
        <title><![CDATA[Stories by m.y hanif on Medium]]></title>
        <description><![CDATA[Stories by m.y hanif on Medium]]></description>
        <link>https://medium.com/@myhnf?source=rss-5a11c87be6e7------2</link>
        <image>
            <url>https://cdn-images-1.medium.com/fit/c/150/150/1*-EXY5_jJyqsv_mGXlm9hfA.png</url>
            <title>Stories by m.y hanif on Medium</title>
            <link>https://medium.com/@myhnf?source=rss-5a11c87be6e7------2</link>
        </image>
        <generator>Medium</generator>
        <lastBuildDate>Fri, 20 Nov 2026 16:12:41 GMT</lastBuildDate>
        <atom:link href="https://medium.com/@myhnf/feed" rel="self" type="application/rss+xml"/>
        <webMaster><![CDATA[yourfriends@medium.com]]></webMaster>
        <atom:link href="http://medium.superfeedr.com/" rel="hub"/>
        <item>
            <title><![CDATA[Skepticism, Curiosity, & Humility]]></title>
            <link>https://medium.com/@myhnf/skepticism-curiosity-humility-a3f0998357fa?source=rss-5a11c87be6e7------2</link>
            <guid isPermaLink="false">https://medium.com/p/a3f0998357fa</guid>
            <dc:creator><![CDATA[m.y hanif]]></dc:creator>
            <pubDate>Mon, 07 Oct 2024 15:15:51 GMT</pubDate>
            <atom:updated>2024-10-09T02:56:15.898Z</atom:updated>
            <content:encoded><![CDATA[<h4>— a story about milk and tea</h4><figure><img alt="" src="https://cdn-images-1.medium.com/max/839/1*fQSHlecZSoBrNsngWgvM6g.png" /></figure><p>Tahun 1919 di Inggris</p><p>Seorang ilmuwan polymath (matemathician, statiscian, biologist, geneticist) bernama Ronald Fisher sedang meneliti data eksperimen agrikultural yang telah dilakukan selama beberapa dekade.</p><p>Suatu hari disela kesibukannya, dia membuatkan teh susu untuk rekan kerjanya, Muriel Bristol.<br>Dia memanaskan air, menuang susu ke cangkir, dan menuangkan teh panas ke dalam cangkir terisi susu.<br>Sepintas ga ada yang aneh.</p><p>Bristol berkata “aku ga mau minum itu”<br>Fisher heran, “Kenapa?”<br>“Karena kamu menuangkan susunya terlebih dahulu”, Bristol menjelaskan kalau dia tidak pernah meminum teh susu kecuali susunya yang dituang terakhir.</p><p>Fisher berpikir sejenak dan berargumen “Urutan itu ga ada bedanya”<br>Menurut Bristol susunya akan merusak rasa tehnya.</p><p>Terlihat berdebat, rekan kerjanya yang lain, William Roach menawarkan:<br>“Gimana kalau di eksperimenkan, kita buktiin siapa yang benar?”<br>Namanya juga scientist, Fisher dan Bristol setuju.</p><p>Fisher kemudian menyeduh 8 cangkir teh susu, 4 cangkir dituangkan teh dulu lalu susu, 4 cangkir lainnya dituangkan susu dulu lalu teh.</p><p>Fisher menyajikan kedelapan cangkir teh susu itu dalam urutan acak.</p><p>Bristol kemudian meneguk sedikit satu per satu dan menebak urutannya,</p><p>“teh dulu”</p><p>“susu dulu”</p><p>hingga selesai.</p><p>Fisher kaget, dari 8 cangkir itu, semua tebakan Bristol benar.<br>Dia kemudian menghitung peluang Bristol menebak dengan benar adalah 1 banding 70, hanya 1.4%, tapi yang terjadi dia bisa menebak benar semuanya.</p><p>Fisher akhirnya percaya bahwa ada perbedaan pengaruh pada urutan penuangan teh susu.</p><p>Beberapa waktu setelah itu, Fisher menulis buku <em>Statistical Methods for Research Workers</em> dan <em>The Design of Experiments</em> yang menjadi fundamental statistik modern (konsep null hypothesis, statistical significance, ANOVA) yang digunakan hingga saat ini.</p><p>Kejadian sederhana yang melahirkan revolusi ilmiah.</p><p>Ada beberapa nilai yang didemonstrasikan pada cerita ini:</p><ul><li>Skepticism — Fisher menunjukkan sikap berpikir kritis saat menerima informasi baru.</li><li>Curiosity — apa yang Fisher yakini memicunya mencari pembuktian dengan melakukan eksperimen.</li><li>Humility — setelah menemukan fakta, Fisher menurunkan egonya, mengakui kesalahannya dan memperbarui pengetahuannya tentang apa yang benar.</li></ul><p>Aku pikir, 3 nilai itu sangat membantu dalam mengambil keputusan.</p><p>Referensi:</p><ul><li><a href="https://www.sciencehistory.org/stories/magazine/ronald-fisher-a-bad-cup-of-tea-and-the-birth-of-modern-statistics/">Ronald Fisher, a Bad Cup of Tea, and the Birth of Modern Statistics</a></li><li><a href="https://en.wikipedia.org/wiki/Lady_tasting_tea">Wikipedia — Lady tasting tea</a></li><li><a href="https://www.amazon.com/Design-Impact-Designing-Effective-Experiments-ebook/dp/B0D1RFKS6B?qid=&amp;sr=">Erin Weigel — Design for Impact</a>*</li></ul><p><em>*aku sangat rekomendasiin buku ini jika kamu pengen mendalami eksperimentasi pada produk digital, penulisnya adalah Design manager di Deliveroo dan ex booking.com.</em></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=a3f0998357fa" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Existence Testing (Test removing things)]]></title>
            <link>https://medium.com/@myhnf/existence-testing-test-removing-things-86aa510cd783?source=rss-5a11c87be6e7------2</link>
            <guid isPermaLink="false">https://medium.com/p/86aa510cd783</guid>
            <category><![CDATA[ux-design]]></category>
            <category><![CDATA[ab-testing]]></category>
            <dc:creator><![CDATA[m.y hanif]]></dc:creator>
            <pubDate>Sat, 05 Oct 2024 23:02:08 GMT</pubDate>
            <atom:updated>2024-10-05T23:02:08.203Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*-hM6aYkZHiW4W3p1PnTG2w.gif" /></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*6lWJe0OwAb3o6om-e4tyPQ.gif" /></figure><p>Akhir pekan kemarin, aku bareng istri dan anak beres-beres rumah.<br>Selalunya, tiap beberapa bulan akan ada tumpukan barang-barang yang ga kepake.<br>Aturan di rumah:<br>kalau ada barang yang setidaknya 3 bulan ga pernah disentuh, buang.<br>Dengan aturan ini, belum pernah sekalipun aku merasa menyesal buang barang yang ga kepake.</p><p>Dalam build product — app atau web — secara naluriah kita terobsesi untuk terus menerus menambah sesuatu, entah itu niatnya menambah value atau alasan lainnya.</p><p>Karena kecenderungan itu, ada satu metode optimisasi/perbaikan yang jarang banget dibahas, “Existence testing”.</p><p>Sangat sederhana, metode ini kita hanya perlu menganalisa element pada web yang dicurigai tidak penting dan coba menghilangkannya beberapa waktu.</p><p>Hasil dari pengujian ini dapat berupa:</p><ul><li>jika element itu dihilangkan hasilnya mengurangi conversion rate (sales, signup, engagement, etc) berarti element itu dibutuhkan users dan penting untuk dipertahankan.</li><li>jika setelah dihilangkan conversion rate nya tidak berpengaruh, tidak naik tidak turun, keberadaan element itu dapat dikatakan tidak terlalu penting. boleh dihapus atau diturunkan prioritas cara menampilkannya dengan dipindahkan ke lokasi lain yang kurang menonjol.</li><li>jika setelah dihilangkan conversion rate nya malah naik, berarti selama ini element itu ganggu users dan lebih baik element itu dihapus/di-improve.</li></ul><p>Satu contoh, pada browse page kami menghapus quick view, pop up untuk melihat sebagian detail produk yang tujuannya ngebantu visitor untuk membandingkan produk tanpa perlu pindah ke halaman lain.</p><p>Kecurigaan muncul dari cukup banyak visitor yang salah paham dengan harga produknya. Karena pada quick view ditampilkan harga dan beberapa atribut produk (agar tetap quick) padahal perhitungan harganya cukup kompleks karena dipengaruhi beberapa hal yang akan ketahuan setelah melihat product detail page.</p><p>Baymard (research institute yang spesialisasi riset UX pada e-commerce) juga menjelaskan pada riset terbarunya bahwa <a href="https://baymard.com/blog/ecommerce-quick-views">quick view tidak direkomendasikan untuk spec-driven product</a>, web kami termasuk kategori itu.</p><p>Benar saja, ketika quick view itu dihapus, visitor yang lanjut ke next step dan melakukan signup meningkat.</p><p>Referensi:</p><ul><li><a href="https://cxl.com/blog/half-of-your-site-elements-are-useless-which-half/">CXL — Existence Testing: Which Site Elements Are Useless?</a></li><li><a href="https://www.linkedin.com/posts/rgdeboer_does-more-always-mean-better-our-latest-activity-7112050406058258432-A6Qe?utm_source=share&amp;utm_medium=member_desktop">Ruben de Boer — Does “more” always mean “better”?</a></li><li><a href="https://www.linkedin.com/posts/jlinowski_experimentation-optimization-data-activity-7113545984160243712-U6EM/">Median effect from 3 experiment types (element addition, removal, and replacing)</a></li><li><a href="https://baymard.com/blog/ecommerce-quick-views">Baymard — Avoid “Quick Views” for Spec-Driven Product Types</a></li></ul><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=86aa510cd783" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[‘Small changes’, not the result]]></title>
            <link>https://medium.com/@myhnf/small-changes-not-the-result-b6bf5f287ca6?source=rss-5a11c87be6e7------2</link>
            <guid isPermaLink="false">https://medium.com/p/b6bf5f287ca6</guid>
            <category><![CDATA[ux-design]]></category>
            <category><![CDATA[a-b-testing]]></category>
            <dc:creator><![CDATA[m.y hanif]]></dc:creator>
            <pubDate>Fri, 20 Sep 2024 00:20:30 GMT</pubDate>
            <atom:updated>2024-09-20T00:20:30.631Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*LwYiQ13S36Cdojkc" /></figure><p>Sebelumnya, aku jelasin gimana mengharmonisasikan small changes dan big changes. Aku udah berkali-kali nemuin ‘small design changes’ yang impact-nya oke banget.</p><p>Satu contoh menarik.</p><p>Awalnya aku skeptis,<br>“cuman ngubah copy aja harusnya ga ngaruh ngaruh banget.”</p><p>Hipotesisnya di susun oleh Raras.</p><p>Kita menguji 1 CTA button yang mengarahkan visitor dari salah satu step funnel ke step berikutnya (Product detail page → Customise product page).</p><p>Copynya diganti:</p><p>dari “Customise &amp; Buy” menjadi “Customise”.</p><p>Hasilnya? +7.73% visitor lanjut ke next step, +7.13% new signup.</p><p>Hipotesisnya make sense. Kata “Buy” pada versi “Customise &amp; Buy” terkesan butuh ‘komitmen’ yang lebih tinggi, visitor merasa akan melakukan transaksi ketika button itu diklik, sebagian dari mereka mungkin belum siap.</p><p>Dengan menghilangkan kata “Buy” persepsi itu dihilangkan.</p><p>Konsep serupa pernah diuji oleh Netflix.<br>Mereka menguji 4 versi label CTA button di home page:<br>Join Netflix, Join Now, Try It Now, Get Netflix.<br>Tebak yang mana diimplementasi?</p><p>“Try it now”</p><p>Sama seperti sebelumnya, alasannya sederhana, “Try it” komitmennya lebih rendah diibanding dengan “join” atau pun “get”.</p><p>Ga ada lagi alasan untukku ngeremehin ide ‘kecil’. :)</p><p>Referensi:</p><ul><li><a href="https://goodui.org/leaks/netflix-a-b-tested-these-4-button-labels-with-join-now-possibly-leading/">Netflix A/B Tested These 4 Button Labels With “Try It Now” Possibly Leading</a></li><li><a href="https://goodui.org/patterns/54/">GoodUI — Pattern #54: Buy Now Or Smaller Commitment Button</a></li><li><a href="https://medium.com/swlh/i-spent-30-days-analyzing-the-best-call-to-action-buttons-i-could-find-on-the-internet-f5db721d641d">Get smarter at creating CTAs people (actually) want to click on</a></li><li><a href="https://vanschneider.com/blog/ux-writing/the-easiest-cheapest-way-to-test-your-products/">Tobias van Schneider — The easiest &amp; cheapest way to test your products</a></li></ul><p><em>Kita coba replikasi konsep ini di funnel step berikutnya, progression ratenya juga meningkat +26%</em> ✨</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=b6bf5f287ca6" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Innovation & Optimization]]></title>
            <link>https://medium.com/@myhnf/innovation-optimization-aac9e43deef8?source=rss-5a11c87be6e7------2</link>
            <guid isPermaLink="false">https://medium.com/p/aac9e43deef8</guid>
            <dc:creator><![CDATA[m.y hanif]]></dc:creator>
            <pubDate>Thu, 19 Sep 2024 01:02:02 GMT</pubDate>
            <atom:updated>2024-09-19T12:27:25.659Z</atom:updated>
            <content:encoded><![CDATA[<h4><em>— in harmony</em></h4><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*eAYkhqx14J5qxosjegrBgw.png" /><figcaption>Oversimplified illustration, kenyataan lebih kompleks.</figcaption></figure><p>Berdasarkan effort-nya, bukan result-nya, ada dua kategori kerjaan pada desain bagi kami:</p><ul><li>Perubahan besar (innovation): new feature, page, flow, …</li><li>Perubahan kecil (optimization): copy tweaks, UI tweaks, design elements, …</li></ul><p>Sebelum kenal dengan experimentation framework, dulu tiap kali ada design problem, solusinya sering dalam kategori innovation. Karena kita punya resource development terbatas, waktu yang diperlukan desain untuk live dan dirasain users cukup lama.</p><p>Kita coba ngakalin itu.</p><p>Tiap kali big design changes di develop, kita punya waktu untuk eksplorasi dan menguji beberapa ide small design changes (optimisasi).</p><p>Metode ini terinspirasi dari <a href="https://danmall.com/posts/hot-potato-process/">hot potato-nya Dan Mall</a>.</p><p>Jadinya, kita bisa terus menerus deliver value ke users, short term mau pun long term.</p><p><em>Walaupun di atas aku nyebutnya small changes, bukan berarti impactnya ‘small’ juga. Udah beberapa kali aku nemuin small changes yang hasilnya diluar espektasi.</em></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=aac9e43deef8" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Experimentation → Confident Decision Making]]></title>
            <link>https://medium.com/@myhnf/experimentation-confident-decision-making-89dfae61bd8e?source=rss-5a11c87be6e7------2</link>
            <guid isPermaLink="false">https://medium.com/p/89dfae61bd8e</guid>
            <category><![CDATA[experiment]]></category>
            <category><![CDATA[ux-design]]></category>
            <dc:creator><![CDATA[m.y hanif]]></dc:creator>
            <pubDate>Wed, 18 Sep 2024 12:23:03 GMT</pubDate>
            <atom:updated>2024-09-18T12:23:03.365Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*NVp-bX1YkwMHeTAvr6JFPA.png" /></figure><p>Ada ‘keringat dingin’ tiap kali harus mengambil keputusan desain.</p><p>“apakah ini opsi yang paling tepat dari semuanya?”</p><p>“apakah fitur/cara ini yang terbaik untuk menyelesaikan masalah itu?”<br>dan seterusnya.</p><p>Apalagi, keputusan itu punya dampak ke produk yang digunakan ribuan atau banyak sekali orang.</p><p>Itu cerita lama sebelum aku kenalan dengan “<strong>eksperimentasi</strong>”</p><p>Dalam eksperimen, tiap keputusan atau perubahan yang ingin diambil pada desain/produk — bahasa kerennya hipotesis — kedudukannya mungkin benar mungkin salah hingga ada bukti yang membenarkan atau membantahnya.</p><p>Usulan perubahan (hipotesis) dibangun karena suatu alasan dan punya ukuran (metric) kenapa itu lebih baik dari sebelum perubahan itu diterapkan.</p><p>Hipotesis itu lalu di uji pada orang yang bener-bener gunain produknya.</p><p>Nah dalam eksperimen, kita hanya perlu mengujinya pada skala yang lebih kecil dulu (sebagian orang), lihat hasilnya, baru ambil keputusan perubahnnya diterapkan ke semua orang atau tidak.</p><p>Misalnya, ada ide untuk memperbarui form pendaftaran. Keberhasilannya diukur dengan angka signup-nya versi baru lebih baik daripada sebelumnya.</p><p>Kita jalankan eksperimen lalu ambil datanya. <br>Hasilnya dapat berupa:</p><ul><li>Work (signup-nya lebih baik)</li><li>Likely work</li><li>Flat (tidak ada perbedaan)</li><li>Likely didn’t work</li><li>Didn’t work (singup-nya lebih buruk)</li></ul><p>Dari hasil itu kita bisa ambil keputusan (action) berupa:</p><ul><li>Abandon (idenya ga works, jangan terapkan dan ambil learningnya)</li><li>Iterate on variation (idenya ga works, tapi ada peluang di tingkatkan)</li><li>New hypos to proceed (idenya ga works karena hipotesisnya perlu diperbaiki)</li><li>Extend duration (hasilnya ngga jelas karena datanya kurang)</li><li>Implement (works yeay! implement ke semua users)</li><li>Implement and iterate (works, tapi ada ruang untuk lebih baik)</li></ul><p>Dengan berpikir bahwa setiap keputusan adalah sebuah eksperimen, tekanannya akan berkurang.<br>Hasil eksperimen hanya ada dua, kita berhasil atau kita belajar.</p><p>Bonusnya, jika dicatat, catatan eksperimen itu kita jadi punya riwayat keputusan desain apa saja yang pernah kita ambil dan bagaimana dampaknya. (jadi portfolio juga oke banget)</p><p><em>Saat menulis ini, kami udah menguji 58 ide, 16 diantaranya kami tolak.<br>Biar keren, ketika presentasi ungkapannya jadi:<br>“kami berhasil nyelamatin perusahaan dari 16 ide buruk” wkwk</em></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=89dfae61bd8e" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Kami menemukan 86 masalah usability pada satu website menggunakan evaluasi heuristik.]]></title>
            <link>https://medium.com/@myhnf/kami-menemukan-86-masalah-usability-pada-satu-website-menggunakan-evaluasi-heuristik-4095e00ac12e?source=rss-5a11c87be6e7------2</link>
            <guid isPermaLink="false">https://medium.com/p/4095e00ac12e</guid>
            <category><![CDATA[user-experience]]></category>
            <category><![CDATA[inspeksi-usability]]></category>
            <category><![CDATA[evaluasi-heuristik]]></category>
            <dc:creator><![CDATA[m.y hanif]]></dc:creator>
            <pubDate>Thu, 20 Oct 2022 14:18:26 GMT</pubDate>
            <atom:updated>2022-10-25T13:16:19.954Z</atom:updated>
            <content:encoded><![CDATA[<h3>Kami menemukan 86 masalah usability pada satu website menggunakan evaluasi heuristik. Begini kami melakukannya.</h3><p><em>Lesson learned dari pengalaman pertama melakukan evaluasi heuristik.</em></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1000/0*4uLgBbCGJQFJS4qT" /><figcaption>Gambar oleh <a href="https://unsplash.com/@markuswinkler">Markus Winkler | Unsplash</a></figcaption></figure><p>Untuk konteks yang lebih jelasnya, ini pertama kali kami mencoba melakukan metode evaluasi heuristik. Kami mengevaluasi satu website di 7 halaman dan menemukan 1 masalah catasthropic, 23 masalah mayor, 52 masalah minor, dan 10 masalah kosmetik (kategori berdasarkan <a href="https://www.nngroup.com/articles/how-to-rate-the-severity-of-usability-problems/">Severity Rating milik Nielsen</a>).</p><p>Awalnya, saya menyepelekan penggunaan evaluasi heuristik karena caranya yang terlihat terlalu sederhana. Setelah mendapatkan gambaran yang jelas dari membaca banyak referensi, saya menemukan <a href="https://buditanrim.co/2021/inspecting-interface-he-vs-ut/">sisi yang berharga dari metode ini</a>, bagaimana cara membuatnya bekerja dan mendapat output yang diharapkan — apalagi di sisi <a href="http://www.csc.villanova.edu/~beck/csc8570/jim1.htm">biayanya yang lebih hemat</a> dibandingkan metode lain.</p><p>Karena <a href="https://medium.com/user-experience-design-1/search?q=heuristic">sudah banyak yang membahas apa itu evaluasi heuristik</a>, saya berasumsi anda datang ditulisan ini minimal memiliki gambaran tentangnya. Apa yang akan dibahas pada tulisan ini lebih ke tentang apa yang kami temukan saat percobaan pertama yang mungkin bisa jadi tambahan inspirasi jika anda ingin melakukannya juga.</p><h3>Use case dan manfaat Evaluasi Heuristik</h3><p>Dengan tetap sadar bahwa evaluasi heuristik tidak akan pernah menggantikan pengujian dengan user yang sebenarnya, ada saat-saat dimana anda tak perlu ragu menggunakan metode ini. Beberapa konteks yang kami temukan seperti:</p><ul><li><strong>Anda baru pertama kali memasuki tim desain produk suatu company atau tim anda baru saja kedatangan anggota baru.</strong> Dengan penglihatan yang segar, sebagai anggota baru akan sangat sensitif terhadap masalah pada interface yang baru dilihat. Kesempatan itu bisa digunakan untuk melakukan evaluasi heuristik untuk menemukan masalah yang sudah bias bagi anggota yang sudah ada. (<a href="https://uxdesign.cc/a-30-60-90-day-plan-for-product-designers-f475aad13815#f86a:~:text=The%20best%20way%20to%20learn%20about%20a%20product%20as%20a%20designer%20is%20by%20observing%20users%20interacting%20with%20it%20through%20usability%20tests%2C%20or%20conducting%20a%20heuristic%20evaluation%20to%20identify%20usability%20issues">terinspirasi oleh artikel ini</a>)</li><li><strong>Desain website atau app (produk) yang anda hadapi di desain hanya berdasarkan intuisi dan belum pernah ada perbaikan usability.</strong> Apalagi jika melakukan redesign akan memerlukan timeline jangka waktu bulanan hingga tahunan, produk tersebut sangat direkomendasikan untuk dilakukan evaluasi heuristik. Walaupun dengan evaluasi heuristik produk tersebut tidak sampai mendapatkan perbaikan yang lengkap, setidaknya selama proses menuju redesign, produk itu masih mengikuti standar usability.</li><li><strong>Sebagai pelengkap user testing.</strong> Jika evaluasi heuristik dilakukan sebelum user testing, masalah usability yang dimiliki desain prototype akan lebih minim sehingga partisipan user testing tidak perlu menghadapi masalah terkait heuristik sehingga fokus masalah yang akan ditemukan terkait konteks partisipan dan edge case yang dimiliki desain.</li><li><strong>Daftar heuristik dapat digunakan untuk panduan design critique</strong>. Daripada melakukan design critique dengan melempar pertanyaan “menurut kalian bagaimana desain ini?” dan mendapatkan jawaban acak, anda bisa menggunakan daftar heuristik untuk mendapatkan kritik yang fokus pada aspek tertentu lalu tetap megizinkan jawaban diluar dari heuristik yang ditanyakan.</li><li><strong>Sebagai alternatif pengukur kuantitatif kualitas desain</strong>. Anda bisa menjadikan evaluasi heuristik yang sederhana dengan memberikan pertanyaan “yes” or “no” dan mendapatkan berapa persen suatu desain mencapai kualitas yang anda atau tim anda espektasikan. Untuk lebih jelas, <a href="https://uxdesign.cc/measuring-design-quality-with-heuristics-44857efa514">lihat artikel ini</a>.</li><li><strong>Tenggat waktu yang sangat mepet.</strong> Jika anda menghadapi proyek sangat mepet untuk launch dan ada pertimbangan untuk meninggalkan pengujian desain, masih termasuk langkah yang bijak jika produk di evaluasi heuristik daripada produk tidak di uji sama sekali.</li></ul><h3>Langkah-langkah</h3><p>Ada beberapa hal yang perlu diperhatikan dan hindari yang kami temukan ketika melakukan evaluasi heuristik pada saat-saat berikut.</p><h4>Menetapkan alur dan tugas pada desain yang ingin di evaluasi</h4><p>Alur dan tugas yang diuji butuh dijelaskan konteksnya agar memudahkan evaluator saat melakukan evaluasi. Alur dan tugas yang dipilih bisa juga berbentuk user story atau skenario. Perhatikan juga seberapa banyak alur dan tugas yang diuji dalam satu sesi evaluasi, semakin tinggi kompleksitas suatu halaman akan membuat evaluasi membutuhkan waktu yang lebih.</p><p>Kesalahan yang saya lakukan dalam percobaan pertama yaitu mengevaluasi halaman dan tugas yang cukup banyak sehingga waktu yang dibutuhkan tiap evaluator untuk menguji berkisar antara 1–2 jam lebih. Dampaknya, semakin mendekati akhir, saya mengamati evaluator terlihat kelelahan dan jumlah masalah yang ditemukan berangsur-angsur berkurang. Untuk mendapatkan output yang maksimal, jika mengevaluasi desain yang kompleks, anda bisa memecahnya menjadi lebih dari satu sesi.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/893/1*rcLxm6fXYh46k1zZ69yAfw.png" /></figure><h4>Memilih daftar heuristik</h4><p>Temuan paling menarik adalah masih banyak prinsip heuristik diluar daftar milik Nielsen. Ada daftar lain seperti First Principle oleh Tognazzini, Eight Golden Rule oleh Shneiderman, dan masih ada lagi (silahkan lihat ada <a href="https://uxdesign.cc/usability-heuristic-frameworks-which-one-is-right-for-you-1962387b7cc">10 <em>heuristic framework</em> yang dibahas di artikel ini</a>).</p><p>“Lalu framework mana yang baiknya saya pilih?”</p><p>Mengutip dari artikel diatas</p><blockquote><em>Ben Shneiderman (Eight Golden Rules of Interface Design) says it well: </em><strong>“No list such as this can be complete. These underlying principles must be interpreted, refined, and extended for each environment. They have their limitations, but they provide a good starting point.”</strong></blockquote><p>Diawal, gampangnya anda boleh-boleh saja mencoba menggunakan 10 usability heuristik milik Nielsen, lalu lihat bagaimana output yang dihasilkan. Setelah mencoba, anda akan mendapatkan rasa bagaimana penggunaan prinsip itu bekerja dan anda mungkin akan punya hal yang ingin dihapus, diperbaiki, atau ditambahkan.</p><p>Percobaan pertama yang saya gunakan, karena merasa daftar yang dimiliki Nielsen terasa kurang lengkap, saya sekalian ingin mencoba gabungan daftar milik Nielsen dan Tognazzini. Beruntung, pekerjaan menggabungkan kedua daftar tersebut sudah dilakukan oleh <a href="https://www.thinkmind.org/articles/achi_2018_4_10_20055.pdf">Granollers</a>, sehingga saya tinggal menggunakannya.</p><h4>Membuat lembar evaluasi</h4><p>Lembar evaluasi akan digunakan sebagai panduan saat evaluator melakukan evaluasi. Lembar evaluasi dapat berisi:</p><ul><li>Panduan menjawab evaluasi</li><li>Flow atau task yang evaluator perlu lakukan</li><li>Kolom pertanyaan dan jawaban terkait heuristik</li></ul><p>Bagian pentingnya disini, ketika anda sudah menetapkan daftar heuristik yang ingin digunakan, konversi prinsip heuristik tersebut menjadi pertanyaan yang spesifik agar memudahkan evaluator. Karena jika daftarnya masih berupa kalimat biasa — bukan pertanyaan — evaluasi akan terasa lebih sulit (mungkin anda pernah menemukan template evaluasi heuristik seperti itu). coba bandingkan dengan tabel dibawah.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/787/1*UFTbSNh4gMqfaoZFqYZxOw.png" /></figure><p>Untuk menjawab evaluasi, saya memandu evaluator untuk menjawab pertanyaan terkait heuristik dengan jawaban “Iya”, “Tidak”, “Tidak Perlu”. Saya berfokus untuk menemukan masalah, untuk jawaban “Tidak”, saya memandu evaluator untuk menjeleskan mengapa evalutor menjawab “Tidak” pada aspek tersebut. Sementara jawaban “Tidak Perlu” diperlukan karena ada kemungkinan suatu heuristik tidak relevan pada konteks alur atau tugas tertentu.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/793/1*oXTWZhnWLXq09THrq5hIWg.png" /></figure><h4>Memilih Evaluator</h4><p>Idealnya, evaluator adalah orang yang memiliki <a href="https://www.toptal.com/designers/usability-testing/usability-analysis-how-to-run-a-heuristic-evaluation#:~:text=A%20heuristic%20evaluation%20expert,sciences%2C%20and%20commerce/business">disiplin ilmu dibidang desain interaksi, HCI, dan/atau UX Design</a>. Disisi lain, Nielsen membagi kriteria evaluator menjadi 3 Jenis:</p><ul><li>Novice evaluator, tidak memiliki expertise dibidang usability</li><li>Regular specialist, memiliki expertise dibidang usability</li><li>Double specialist, expertise dibidang usability dan punya experise pula pada domain yang akan dievaluasi (misalnya orang yang sudah berkali-kali melakukan desain atau riset dibidang ecommerce cenderung lebih mudah menemukan masalah jika mengevalauasi ecommerce lain)</li></ul><p>Jika dilihat dari efektivitas berapa jumlah evaluator yang baiknya terlibat, <a href="https://course.ccs.neu.edu/is4300sp13/ssl/articles/p373-nielsen.pdf">Nielsen menyebutkan</a>, untuk menemukan setidaknya 75% masalah yang dapat didentifikasi secara heuristik:</p><ul><li>Novice evaluator butuh 15 evaluator</li><li>Regular specialist butuh 3–5 evaluator</li><li>Double specialist butuh 2–3 evaluator</li></ul><figure><img alt="" src="https://cdn-images-1.medium.com/max/658/1*6QCReZJXsNH2bvb_3Bm5nA.png" /><figcaption><a href="https://course.ccs.neu.edu/is4300sp13/ssl/articles/p373-nielsen.pdf">Nielsen, 1992. Finding usability problems through heuristic evaluation.</a></figcaption></figure><p>Kata kunci yang penting tentang evaluator adalah “Pengetahuan usability” dan “Pengetahuan Domain”. Mencari evaluator yang memiliki riwayat pendidikan formal atau tersertifikasi di bidang usability merupakan hal yang sulit, termasuk yang saya hadapi. Sehingga, pada percobaan ini, evaluator yang terlibat mengandalkan “pengetahuan usability” dan “pengetahuan domain industri” dari pembelajaran mandiri dan pengalaman pada tim internal kami. Walaupun kemungkinan output yang dihasilkan tidak akan semaksimal jika dengan evaluator berpendidikan formal di bidang usability, komposisi evaluator yang kami coba sudah memberikan hasil seperti yang disebutkan diawal. Kriteria evaluator percobaanya seperti ini.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/432/1*oGzhIzN1FC4znERUExqumg.png" /></figure><h4>Evaluator melakukan observasi</h4><p>Tentang cara mengevaluasinya, Nielsen sudah cukup lengkap menjelaskan <a href="https://www.nngroup.com/articles/how-to-conduct-a-heuristic-evaluation/">di artikel ini</a>. Apa yang kami coba praktikan yaitu:</p><ul><li>Evaluasi dilakukan secara remote karena percobaan ini dilakukan saat pandemi.</li><li>Evaluator melakukan evaluasi secara mandiri.</li><li>Di awal, saya menjelaskan panduan melakukan evaluasi dan cara mengisi jawabannya. jika evaluator paham lanjut ke tahap berikutnya.</li><li>Evaluator kemudian melakukan evaluasi pada website, tiap kali mendapat temuan langsung dituliskan ke lembar observasi.</li><li>Ketika selesai, saya melakukan debrief ke evaluator untuk mengonfirmasi lagi tentang temuan yang dia dapatkan. Jika ada yang kurang dipahami, saya menanyakan kejelasan kalimat yang mereka tuliskan atau mempertanyakan konteks yang mereka maksudkan.</li></ul><p>Percobaan ini memiliki beberapa kekurangan. Karena evaluasi dilakukan mandiri, kita tidak bisa memastikan evaluator mengevaluasi secara maksimal karena waktu dan lingkungan mereka atur secara mandiri. Karena alasan yang sama, saya juga tidak mendampingi secara langsung evaluator saat mengevaluasi. Padahal akan sangat mungkin bagi evaluator yang mencoba pertama kali mengalami kendala saat menjalankan evaluasi seperti kurang paham dengan maksud pertanyaan yang diberikan dan sebagainya.</p><h4>Konsolidasi hasil temuan observasi</h4><p>Hasil temuan masing-masing evaluator dikumpulkan. Saat dikumpulkan kemungkinan besar akan mendapati jawaban antar evaluator saling tumpang tindih dan ada yang benar-benar berbeda. Apa yang kami temukan, tanpa memandang masalah yang sama, ada sebanyak 142 masalah. Daftar masalah tersebut diolah lagi dengan melakukan konsolidasi atau temuan yang memiliki maksud yang sama digabung dan dihitung sebagai satu masalah. Sehingga setelah konsolidasi, kami menemukan 86 masalah unik satu sama lain.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/793/1*iNeTgAK-WRNjm8MWZ1rNgQ.png" /></figure><h4>Skoring</h4><p>Dari daftar temuan yang sudah dikonsolidasi, tiap-tiap temuan dinilai tingkat kepentingannya. Skala penilaian yang kami coba gunakan adalah skala severity rating milik Nielsen, tapi masih ada <a href="https://www.farmpd.com/farm-blog/effectively-communicating-usability-problems">skala lain</a> yang mungkin lebih relevan dengan kebutuhan tertentu. Form penilaian saya buat menggunakan survey tool (google form) sehingga para evaluator hanya perlu membaca temuan dan klik nilai yang mereka anggap sesuai pada temuan tersebut. Manfaat tahap ini yaitu untuk memudahkan melihat temuan mana yang paling prioritas untuk diselesaikan. Tahap ini juga berguna untuk memvalidasi bagaimana sudut pandang satu evaluator tentang masalah yang ditemukan oleh evaluator lainnya.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/509/1*5rWft99uZZdWmNDLhb5cMA.png" /></figure><p>Saya mengamati banyak template yang dibagikan di internet untuk lembar evaluasi heuristiknya, hasil temuan dan kolom untuk skoring digabung dalam satu lembar yang sama. Jadinya dengan lembar tersebut akan terasa proses untuk mencari temuan dan melakukan skoring dilakukan disaat yang sama. Padahal cara yang seperti itu akan membuat evaluasi menjadi kurang efisien dan menambah beban berpikir evaluator. Sehingga direkomendasikan proses tersebut dipisah.</p><h3>What’s next</h3><p>Dari percobaan ini terbesit beberapa actionable items:</p><ul><li>Implementasi perbaikan masalah, lalu ukur bagaimana outcome-nya.</li><li>Merevisi daftar heuristik yang sesuai kebutuhan dengan standar tim kami.</li><li>Mengusulkan metode ini diformalkan ke dalam workflow. Sehingga tiap kali selesai proses desain, desain tersebut dalam keadaan kualitas minimal yang diespektasikan.</li><li>Bagi yang berperan sebagai evaluator akan sangat perlu untuk memperdalam pengetahuan dan pengalaman tentang usability dilengkapi pengetahuan domain industri karena evaluator lah yang akan sangat menentukan seberapa baik output evaluasinya.</li></ul><p>Jika anda telah melakukan evaluasi heuristik, saya penasaran resep apa yang anda gunakan dan bagaimana hasilnya?</p><p><em>Curious to discuss in comments.</em></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=4095e00ac12e" width="1" height="1" alt="">]]></content:encoded>
        </item>
    </channel>
</rss>