Analisis User Experience Gemini AI pada Jurusan Teknik Informatika Menggunakan User Experience Questionnaire (UEQ): User Experience Analysis of Gemini AI in Informatics Engineering Using User Experience Questionnaire

Rivaldo Otniel Moreno Samber Sabami; Josua Josen A Limbong; Lion Ferdinand  Marini

doi:10.57152/malcom.v6i3.2746

Authors

Rivaldo Otniel Moreno Samber Sabami Universitas Papua
Josua Josen A Limbong Universitas Papua
Lion Ferdinand Marini Universitas Papua

DOI:

https://doi.org/10.57152/malcom.v6i3.2746

Keywords:

Gemini AI, Generative Artificial Intelligence, Pengalaman Pengguna, Teknik Informatika, User Experience Questionnaire (UEQ).

Abstract

Pemakaian Generative Artificial Intelligence (GenAI) telah menjadi bagian dari kegiatan akademik di perguruan tinggi, terutama pada program studi yang berkaitan erat dengan teknologi komputasi. Hasil pra-survei di Jurusan Teknik Informatika Universitas Papua memperlihatkan bahwa Gemini AI merupakan perangkat GenAI yang paling sering dimanfaatkan oleh mahasiswa dan dosen. Namun, pengalaman penggunaan platform tersebut belum pernah diukur secara empiris dalam konteks jurusan tersebut. Oleh karena itu, penelitian ini mengevaluasi Gemini AI dengan instrumen User Experience Questionnaire (UEQ). Data penelitian berasal dari 111 responden yang dipilih menggunakan purposive sampling dan terdiri atas mahasiswa serta dosen. Hasil analisis menunjukkan bahwa enam skala UEQ memperoleh nilai rata-rata positif dan semuanya berada di atas batas interpretasi 0,8. Skor tertinggi terdapat pada Kejelasan (1,63), kemudian Efisiensi (1,53) dan Daya Tarik (1,48), sedangkan Kebaruan menjadi skor paling rendah (1,18). Jika dibandingkan dengan dataset benchmark UEQ, sebagian skala berada pada kategori Above Average dan skala lainnya masuk kategori Good. Dengan demikian, Gemini AI dipandang mudah dipahami, efisien, dan cukup dapat diandalkan untuk menunjang aktivitas akademik. Meskipun demikian, nilai Kebaruan yang lebih rendah menunjukkan bahwa penyegaran antarmuka, variasi pola interaksi, serta fitur yang lebih inovatif masih perlu dikembangkan agar keterlibatan pengguna meningkat.

Downloads

Download data is not yet available.

References

M. Bond et al., “A meta systematic review of Artificial Intelligence in higher education: a call for increased ethics, collaboration, and rigour,” Int. J. Educ. Technol. High. Educ., vol. 21, no. 1, 2024, doi: 10.1186/s41239-023-00436-z.

I. I. J. Rifka Alkhilyatul Ma’rifat, I Made Suraharta, Inovasi Pembelajaran. Integrasi Artificial Intellegence dalam Teknologi Pendidikan, vol. 2. 2024.

S. Musliha, B. Bahrudin, and R. F. Diharjo, “Dinamika Pemanfaatan Artificial Intelligence (Ai) Dalam Proses Pembelajaran Di Perguruan Tinggi ( Studi Kasus Universitas Islam Zainul Hasan Genggong Dan Universitas Panca Marga ),” J. Teknol. Pembelajaran Indones., vol. 15, no. 2, pp. 142–158, 2025, [Online]. Available: https://ejournal2.undiksha.ac.id/index.php/jurnal_tp/article/view/5929

T. S. Tata, H. S. Heri, and Kurniawan, “Navigating the Generative AI Revolution in Education: A Systematic Review of Applications, Ethical Considerations, and Future Directions,” J. Nas. Pendidik. Tek. Inform. JANAPATI, vol. 14, no. 2, pp. 374–384, Jul. 2025, doi: 10.23887/JANAPATI.V14I2.90367.

A. R. Abdurrahman et al., “Pengaruh Penggunaan Ai Terhadap Kompetensi Dan Motivasi Belajar Mahasiswa,” JATI (Jurnal Mhs. Tek. Inform., vol. 9, no. 1, pp. 201–210, Dec. 2025, doi: 10.36040/JATI.V9I1.12205.

M. Schrepp, A. Hinderks, and J. Thomaschewski, “Applying the User Experience Questionnaire (UEQ) in Different Evaluation Scenarios,” Lect. Notes Comput. Sci. (including Subser. Lect. Notes Artif. Intell. Lect. Notes Bioinformatics), vol. 8517 LNCS, no. PART 1, pp. 383–392, 2014, doi: 10.1007/978-3-319-07668-3_37.

Chaizhar Zaky Alrum and D. K. Buce Trias Hanggara, “Analisis Pengalaman Pengguna pada Chatbot AI dengan Metode User Experience Questionnaire (UEQ) untuk Rekomendasi Pemilihan Chatbot Sesuai Kebutuhan Mahasiswa,” J. Pengemb. Teknol. Inf. dan Ilmu Komput., vol. 10, no. 3, pp. 2548–964, Feb. 2026, Accessed: Apr. 23, 2026. [Online]. Available: https://j-ptiik.ub.ac.id/index.php/j-ptiik/article/view/16195

I. Paendong, J. Lelemboto, A. Yusupa, and V. Tarigan, “Optimalisasi Ui/Ux Dalam Aplikasi Mobile: Strategi Meningkatkan Pengalaman Dan Keterlibatan Pengguna Optimization of Ui/Ux in Mobile Applications: Strategies To Enhance User Experience and Engagement,” Var. Res. J., vol. 02, no. 2, pp. 615–624, 2025, [Online]. Available: https://variablejournal.my.id/index.php/VRJ/article/view/213

I. Purnamasari and M. D. Ramadhan, “UI/UX Design Using the Design Thinking Method on the KahfiEducation Website,” J. Ilm. Sist. Inf., vol. 4, no. 3, pp. 607–629, 2025.

W. Ariyanti and R. G. Alam, “Analisis Kepuasan Pengguna Chatgpt Dan Gemini Di Kalangan Mahasiswa Menggunakan Metode UEQ,” IJIS - Indones. J. Inf. Syst., vol. 10, no. 1, pp. 35–47, Apr. 2025, doi: 10.36549/IJIS.V10I1.353.

I. Nasrul, A. Angraini, M. L. Hamzah, and E. Saputra, “Analysis Of User Experience Of ChatGPT And Gemini Users Using The User Experience Quistionnaire (UEQ) For Education,” J. Sisfokom (Sistem Inf. dan Komputer), vol. 13, no. 3, pp. 352–359, Nov. 2024, doi: 10.32736/SISFOKOM.V13I3.2250.

D. O. D. Putri and D. Lestarini, “Assessing User Experience of ChatGPT Website Employing the User Experience Questionnaire (UEQ),” SISTEMASI, vol. 13, no. 6, pp. 2434–2443, Nov. 2024, doi: 10.32520/STMSI.V13I6.4566.

F. R. Abriansah et al., “Exploring User Experiences of Chat GPT and Google Gemini AI?: A SUS and EUCS Approach,” J. Inf. Technol. Comput. Eng. Artif. Intell., vol. 1, no. 2, pp. 68–76, Dec. 2024, Accessed: Jun. 04, 2026. [Online]. Available: https://journal.redtechidn.org/index.php/itcea/article/view/25

E. Jonathan, A. Agung Ugrasena, A. Theo, and W. Ursia, “Analisis Perbandingan Berbasis Task-Oriented Evaluation Pada ChatGPT-4 dan Gemini (2.5 Flash),” Int. Conf. Inf. Technol. Bus., vol. 1, no. 1, pp. 115–125, 2025, Accessed: Jun. 04, 2026. [Online]. Available: https://ejournal.uniled.ac.id/index.php/inconitbis/article/view/344

W. Mu’amar and G. Setyaningsih, “Evaluasi Penerimaan Mahasiswa Terhadap Gemini Pro Sebagai Asisten Akademik: Pendekatan Technology Acceptance Model (TAM) Dengan Kemauan Untuk Membayar (WTP),” JATI (Jurnal Mhs. Tek. Inform., vol. 10, no. 1, pp. 131–137, Feb. 2026, doi: 10.36040/JATI.V10I1.16645.

F. Silvana, T. Lathif, and M. Suryanto, “Evaluasi User Experience Sistem Informasi Akademik Universitas Wiraraja Menggunakan Metode UEQ,” Jutisi J. Ilm. Tek. Inform. dan Sist. Inf., vol. 13, no. 1, pp. 11–19, Apr. 2024, doi: 10.35889/JUTISI.V13I1.1580.

B. D. Wijanarko, R. Leandros, and D. F. Murad, “Evaluasi Pengalaman Pengguna Pada Learning management system Menggunakan Metode User Experience Questionnaire,” J. Sist. Inf. Bisnis, vol. 14, no. 4, pp. 385–391, Oct. 2024, doi: 10.21456/VOL14ISS4PP385-391.

“METODE PENELITIAN?: Kuantitatif, Kualitatif, dan R&D / Prof. Dr. Sugiyono | Perpustakaan Universitas Muhammadiyah Palangkaraya.” Accessed: Apr. 23, 2026. [Online]. Available: https://lib.umpr.ac.id/opac/detail-opac?id=11796

J. Khatib Sulaiman, D. Danendra Rafif, N. Rizky Oktadini, P. Eka Sevtiyuni, A. Meiriza, and P. Putra, “Analisis User Experience Pada Website Dicoding Menggunakan Metode User Experience Questionnaire (UEQ),” Indones. J. Comput. Sci., vol. 12, no. 5, p. 3103, Oct. 2023, doi: 10.33022/IJCS.V12I5.3456.

K. S. Taber, “The Use of Cronbach’s Alpha When Developing and Reporting Research Instruments in Science Education,” Res. Sci. Educ. 2016 486, vol. 48, no. 6, pp. 1273–1296, Jun. 2017, doi: 10.1007/S11165-016-9602-2.

M. Schrepp, User Experience Questionnaire Handbook. 2023. doi: 10.13140/RG.2.1.2815.0245.

T. S. EL Hajjar, “Statistical Analysis: Internal-Consistency Reliability and Construct Validity - International Journal of Quantitative and Qualitative Research Methods (IJQQRM),” Mar. 2018, Accessed: Apr. 27, 2026. [Online]. Available: https://eajournals.org/ijqqrm/vol-6-issue-1-february-2017/statistical-analysis-internal-consistency-reliability-and-construct-validity-2/

B. Laugwitz, T. Held, and M. Schrepp, Construction and Evaluation of a User Experience Questionnaire, vol. 5298 LNCS. Springer, Berlin, Heidelberg, 2008. doi: 10.1007/978-3-540-89350-9_6.

C. K. Y. Chan and W. Hu, “Students’ voices on generative AI: perceptions, benefits, and challenges in higher education,” Int. J. Educ. Technol. High. Educ., vol. 20, no. 1, 2023, doi: 10.1186/s41239-023-00411-8.

Z. Huang and M. Benyoucef, “A systematic literature review of mobile application usability: addressing the design perspective,” Univers. Access Inf. Soc., vol. 22, no. 3, pp. 715–735, 2023, doi: 10.1007/s10209-022-00903-w.

M. Ahmad Faudzi, Z. Che Cob, R. Omar, S. A. Sharudin, and M. Ghazali, “Investigating the User interface design Frameworks of Current Mobile Learning Applications: A Systematic Review,” Educ. Sci., vol. 13, no. 1, 2023, doi: 10.3390/educsci13010094.