Analisis Sentimen Ulasan Pengguna terhadap Ekspedisi Layanan Logistik dengan Metode Naïve Bayes
Abstract
Perkembangan teknologi informasi memungkinkan pengguna menyampaikan ulasan melalui platform seperti google maps dengan memberikan informasi penting seperti penilaian kualitas dan pengalaman pengguna layanan. Penelitian ini berfokus pada pengelolaan ulasan pelanggan di JNE Purwokerto yang belum secara efektif dimanfaatkan untuk keperluan dalam evaluasi layanan. Dengan menggunakan pendekatan Machine Learning, penelitian ini bertujuan untuk mengklasifikasikan sentimen ulasan negatif dan positif pengguna sebagai bahan evaluasi bagi penyedia layanan. Tahapan penelitian dimulai dengan pengambilan data ulasan yang terdiri dari 968 ulasan dengan rincian 111 (positif) dan 857 (negatif) yang diperoleh melalui kode Python dan API. Lalu preprocessing data; case folding, cleaning, tokenisasi, stopword removal, dan stemming. Ekstraksi fitur dengan metode Bag of Words untuk mengubah data menjadi nilai numerik. Splitting data 80:20 menghasilkan 774 data latih dan 194 data uji. Penggunaan teknik Synthetic Minority Over-samplingTechnique terhadap ketidakseimbangan data latih 89 (positif) dan 685 (negatif) menjadi data yang seimbang. Algoritma Multinomial Naive Bayes untuk pengujian. Confusion matrix untuk mengevaluasi performa metode algoritma Naïve Bayes. Hasil dari proses evaluasi menperoleh nilai akurasi sebesar 89%, nilai presisi 93%, recall 94%, dan f1- score 93% (negatif). Sedangkan, nilai presisi 58%, recall 54%, dan f1-score 56% (positif). Hasil analisis menunjukan ketidakpuasan layanan dengan tingginya sentimen negatif pada ulasan pelanggan. Kata kunci — analisis sentimen, naive bayes, pembelajaran mesin, ulasan
Downloads
References
[1] A. Ayu, D. Lestari, and A. Merthayasa, “Peran Teknologi Dalam Perubahan Bisnis Di Era Globalisasi,” vol. 7, no. 11, pp. 2548–1398, 2022.
[2] C. A. Cholik, “Perkembangan Teknologi Informasi Komunikasi / ICT Dalam Berbagai Bidang,” Jurnal Fakultas Teknik Unisa Kuningan, vol. 2, no.2, May. 2021.
[3] F. Parsakh Nursyamsyi and F. Noor Hasan, “Klasifikasi Sentimen Terhadap Aplikasi Identitas Kependudukan Digital Menggunakan Algoritma Naïve Bayes dan SVM,” KLIK: Kajian Ilmiah Informatika dan Komputer, vol. 4, no. 3, pp. 1788–1798, Dec. 2023.
[4] R. Ananda Irhasr Maha Adiprayitno and Drs. Muhammad Edwar, M.Si “Pengaruh Kualitas Layanan Dan Harga Terhadap Keputusan Penggunaan Jasa Pengiriman Barang JNE (Jalur Nugraha Ekakurir) Di Agen Putro Agung Wetan Surabaya,” Jurnal Pendidikan Tata Niaga (JPTN), vol.1, no.1, 2020.
[5] Putri Wulandari, Heru Tri Sutiono, and Sri Kussujaniatun, “Pengaruh Kualitas Layanan Dan Citra Merek Terhadap Loyalitas Pelanggan Melalui Kepuasan Pelanggan Pada Pelanggan Jasa Jne Di Yogyakarta,” JIMKES (Jurnal Ilmiah Manajemen Kesatuan), vol. 9, no. 2, pp. 293-308, June. 2021.
[6] M. Farid Fernanda Saputra, Alex Ferdinal, and Dini Elida Putri, “Analisis Kualitas Pelayanan Terhadap Kepuasan Pelanggan Jasa Pengiriman J&T Express Koto Baru (Studi Kasus Masyarakat Jorong Seberang Piruko Timur Dusun Standart),” INNOVATIVE: Journal Of Social Science Research, vol. 3 no. 5, 2023.
[7] T. S. de Souza Viana, M. de Oliveira, T. L. C. da Silva, M. S. R. Falc ao, and E. J. T. Gonçalves, “A message classifier based on multinomial Naive Bayes for online social contexts,” Journal of Management Analytics, Jul. 2020.
[8] F. Sakinah Alnaz and W. Maharani, “Analisis Emosi Melalui Media Sosial Twitter Dengan Menggunakan Metode Naïve Bayes dan Perbandingan Fitur N-gram dan TF-IDF.” 2020.
[9] D. Purwitasari, Adi Surya Suwardi Ansyah, Arya Putra Kurniawan, and Asiyah Nur Kholifah, “A Hybrid Method on Emotion Detection for Indonesian Tweets of COVID-19,” Jurnal RESTI (Rekayasa Sistem dan Teknologi Informasi), vol. 7, no. 2, pp. 254–262, Mar. 2023.
[10] F. Nuriy Alin, M. Hafid Totohendarto, and M. Rafi Muttaqin, “Analisis Sentimen Terhadap Kendaraan Listrik Pada Platform Twitter Menggunakan Metode Naive Bayes,” Informatics for Educators And Professionals: Journal of Informatics, vol. 8, no. 2, pp. 96–107, Dec. 2023.
[11] F. Syah, H. Fajrin, A. N. Afif, R. Saeputra, D. Mirranty, and D. D. Saputra, “Analisa Sentimen Terhadap Twitter IndihomeCare Menggunakan Perbandingan Algoritma Smote, Support Vector Machine, AdaBoost dan Particle Swarm Optimization,” Jurnal JTIK (Jurnal Teknologi Informasi dan Komunikasi), vol. 7, no. 1, Jan. 2023.
[12] S. Khomsah, R. Dias Ramadhani, and S. Wijayanto, “Big Data Analytics to Analyze Sentiment, Emotions, and Perceptions of Travelers (Case Study: Tourism Destination in Purwokerto Indonesia),” Jurnal E-Komtek (Elektro-Komputer-Teknik), vol. 5, no. 2, pp. 284–297, Dec. 2021.
[13] J. Khatib Sulaiman, M. Ikhsan, and R. R. Kurniawan, “Penerapan Text Mining pada Sistem Rekomendasi Pembimbing Skripsi Mahasiswa Menggunakan Algoritma Naïve Bayes Classifier,” Indonesian Journal of Computer Science Attribution, vol. 12, no. 6, pp. 2023–4196, Dec. 2023.
[14] F. Agung, J. Ayomi, and K. E. Dewi, “Analisis Emosi Pada Media Sosial Twitter Menggunakan Metode Multinomial Naïve Bayes Dan Synthetic Minority Oversampling Technique,” KOMPUTA : Jurnal Ilmiah Komputer dan Informatika, vol. 12, no. 2, 2023.
[15] S. K. Dirjen, P. Riset, D. Pengembangan, R. Dikti, E. Sutoyo, and A. Almaarif, “Terakreditasi SINTA Peringkat 2 Educational Data Mining untuk Prediksi Kelulusan Mahasiswa Menggunakan Algoritme Naïve Bayes Classifier,” masa berlaku mulai, vol. 1, no. 3, pp. 95–101, 2017.
[16] Bee Shin, Sohee Ryu, Yongjun Kim, and Dongwhan Kim “Analysis on Review Data of Restaurants in Google Maps through Text Mining: Focusing on Sentiment Analysis,” vol. 9, no. 1, pp. 61–68, Mar. 2022.
[17] W. Khofifah, D. N. Rahayu, and A. M. Yusuf, “Analisis Sentimen Menggunakan Naive Bayes Untuk Melihat Review Masyarakat Terhadap Tempat Wisata Pantai Di Kabupaten Karawang Pada Ulasan Google Maps,” Jurnal Interkom: Jurnal Publikasi Ilmiah Bidang Teknologi Informasi dan Komunikasi, vol. 16, no. 4, pp. 28–38, Jan. 2022.
[18] I. N. Husada and H. Toba, “Pengaruh Metode Penyeimbangan Kelas Terhadap Tingkat Akurasi Analisis Sentimen pada Tweets Berbahasa Indonesia,” Jurnal Teknik Informatika dan Sistem Informasi, vol. 6, no. 2, Aug. 2020.
[19] A. F. Anjani, D. Anggraeni, and I. M. Tirta, “Implementasi Random Forest Menggunakan SMOTE untuk Analisis Sentimen Ulasan Aplikasi Sister for Students UNEJ,” Jurnal Nasional Teknologi dan Sistem Informasi, vol. 9, no. 2, pp. 163–172, Sep. 2023.
[20] Bagus Muhammad Akbar, Ahmad Taufiq Akbar, and Rochmat Husaini “Analisis sentimen dan emosi vaksin sinovac pada twitter menggunakan naïve bayes dan valence shifter” Jurnal Teknologi Terpadu, vol.7, no. 2, pp. 83–92
[21] E. A. Putra, S. Alam, and I. Kurniawan, “Analisis Sentimen Pengguna MY JNE Menggunakan Algoritma Naïve Bayes,” Jurnal Teknologi Informatika dan Komputer, vol. 10, no. 2, pp. 650–666, Oct. 2024.



