Evaluasi Usability Antarmuka Aplikasi Pengerjaan Soal untuk SMA Bina Negara 1 Baleendah Menggunakan A/B Testing dan System Usability Scale
Abstrak
Perkembangan teknologi digital telah mendorong transformasi dalam sistem pendidikan, termasuk dalam proses evaluasi pembelajaran. SMA Bina Negara 1 Baleendah sebelumnya menggunakan Google Form dan Microsoft Excel untuk distribusi soal dan rekap nilai, namun metode tersebut dinilai kurang efisien. Penelitian ini bertujuan mengevaluasi desain antarmuka aplikasi pengerjaan soal berbasis web menggunakan metode A/B Testing dan System Usability Scale (SUS). A/B Testing digunakan untuk mengetahui preferensi visual pengguna terhadap dua versi desain, sedangkan SUS digunakan untuk mengukur usability aplikasi berdasarkan persepsi pengguna. Sebanyak 7 guru dan 38 siswa dilibatkan sebagai responden dalam penelitian ini. Hasil A/B Testing menunjukkan bahwa guru lebih menyukai desain B pada halaman bank soal, pembuatan kuis, dan pembuatan soal, sedangkan siswa memilih desain B untuk halaman pengerjaan kuis. Rekomendasi perbaikan desain diberikan berdasarkan masukan dari pengguna. Hasil evaluasi SUS menunjukkan skor rata-rata 85 untuk guru dan 88 untuk siswa, yang termasuk kategori “Best Imaginable”, menandakan tingkat usability yang sangat tinggi. Dengan demikian, sistem yang dikembangkan dinilai telah memenuhi standar kemudahan penggunaan, meskipun masih diperlukan penyempurnaan minor guna meningkatkan pengalaman mengerjakan soal secara daring.
Kata kunci— A/B Testing, Evaluasi UI/UX, Pendidikan Digital, System Usability Scale, Usability
Referensi
Muhammad Iqbal Nugraha, Rudi Kurniawan, and Tati Suprapti, “System Usability Scale in Optimizing the Usability Value of the Tutoring and Private Lessons Ayo Pintar Application in Cirebon City,” j. of artif. intell. and eng. appl., vol. 4, no. 2, pp. 1471–1475, Feb. 2025, doi: 10.59934/jaiea.v4i2.930.
M. L. Jundillah, R. Ramadiani, and A. Azainil, “Measuring the quality of STAR websites using the System Usability Scale (SUS) method,” TEPIAN, vol. 6, no. 1, pp. 45–49, Mar. 2025, doi: 10.51967/tepian.v6i1.3201.
I. M. A. Sudestra, N. W. E. Agustini, I. M. A. O. Gunawan, G. Indrawan, and M. Hakimi, “IMPROVING DIGITAL LEARNING: EVALUATING THE U LEARN LMS WITH THE SYSTEM USABILITY SCALE,” jipi. jurnal. ilmiah. penelitian. dan. pembelajaran. informatika., vol. 9, no. 4, pp. 2325–2332, Nov. 2024, doi: 10.29100/jipi.v9i4.6910.
F. Quin, D. Weyns, M. Galster, and C. C. Silva, “A/B Testing: A Systematic Literature Review,” 2023, arXiv. doi: 10.48550/ARXIV.2308.04929.
M. Hyzy et al., “System Usability Scale Benchmarking for Digital Health Apps: Meta-analysis,” JMIR Mhealth Uhealth, vol. 10, no. 8, p. e37290, Aug. 2022, doi: 10.2196/37290.
M. Hertzum, Usability Testing: A Practitioner’s Guide to Evaluating the User Experience. in Synthesis Lectures on Human-Centered Informatics. Cham: Springer International Publishing, 2020. doi: 10.1007/978-3-031-02227-2.
S. Kravchenko, G. Marchuk, T. Loktikova, Y. Grishkun, and State University «Zhytomyr polytechnic», “USABILITY TESTING METHODS FOR ASSESSING A MOBILE APPLICATION,” Herald KhmNU.TS, vol. 317, no. 1, pp. 111–118, Feb. 2023, doi: 10.31891/2307-5732-2023-317-1-111-117.
J. Lazar, J. H. Feng, and H. Hochheiser, “Usability testing,” in Research Methods in Human Computer Interaction, Elsevier, 2017, pp. 263–298. doi: 10.1016/B978-0-12-805390-4.00010-8.
I. M. Herawati and D. Azahra, “EVALUASI USABILITY WEBSITE JASUDA.NET MENGGUNAKAN SYSTEM USABILITY SCALE (SUS),” jipi. jurnal. ilmiah. penelitian. dan. pembelajaran. informatika., vol. 9, no. 2, pp. 994–1000, Jun. 2024, doi: 10.29100/jipi.v9i2.4328.
A. Nuswantari, Y.-T. Wu, and H. D. Surjono, “System Usability Scale Measurement on Synhcronous Online Argumentation Learning System,” in Proceedings of the International Conference on Online and Blended Learning 2019 (ICOBL 2019), Yogyakarta, Indonesia: Atlantis Press, 2020. doi: 10.2991/assehr.k.200521.031.
R. Kohavi and R. Longbotham, “Online Controlled Experiments and A/B Tests,” in Encyclopedia of Machine Learning and Data Science, D. Phung, G. I. Webb, and C. Sammut, Eds., New York, NY: Springer US, 2023, pp. 1–13. doi: 10.1007/978-1-4899-7502-7_891-2.
R. Kohavi, D. Tang, and Y. Xu, Trustworthy Online Controlled Experiments: A Practical Guide to A/B Testing, 1st ed. Cambridge University Press, 2020. doi: 10.1017/9781108653985.
