PERBANDINGAN KINERJA K-NN DAN NAIVE BAYES DALAM TATA KELOLA TEKNOLOGI INFORMASI UNTUK MENGANALISA TINGKAT KEPUASAN PENGGUNA APLIKASI SHOPEE
DOI:
https://doi.org/10.54314/jssr.v8i3.3547Abstract
Abstract: The rapid growth of the e-commerce industry in Indonesia compels companies to actively evaluate customer satisfaction through tingkat kepuasant analysis of app reviews. This study aims to compare the effectiveness of the K-Nearest Neighbors (K-NN) and Naive Bayes algorithms in assessing user satisfaction levels of the Shopee app as a component of IT governance. The research data comprises 2,000 samples of Shopee user reviews collected from Google Play Store and App Store, classified into five rating categories: excellent, good, fair, poor, and bad, based on textual content analysis. The preprocessing stage involved text cleaning (removing stopwords and punctuation), feature extraction using TF-IDF, and an 80:20 split of the dataset (training and testing). The analysis revealed significant differences between the two algorithms. K-NN achieved an accuracy of 54% with the optimal parameter *K=5*, while Naive Bayes demonstrated superior performance with 98% accuracy. The low accuracy of K-NN is suspected to stem from its sensitivity to data imbalance and noise in text features, whereas Naive Bayes, with its probabilistic foundation, better handles the sparse characteristics of review data. These findings emphasize the criticality of selecting appropriate algorithms in IT governance for user satisfaction analysis. Naive Bayes is recommended as the optimal approach for text classification in e-commerce reviews, while K-NN requires refinement through techniques such as feature normalization or class imbalance handling. The study also highlights the need to integrate adaptive models, such as deep learning, to enhance accuracy in complex scenarios. For future research, expanding data scope or implementing multilingual analysis could serve as strategic steps to improve result generalization.
Â
Keywords: K-NN, Naive Bayes, E-commerce, user satisfaction, IT governance, Shopee.
Abstrak: Perkembangan yang cepat dalam industri e-commerce di Indonesia mendorong perusahaan untuk secara aktif mengevaluasi kepuasan pelanggan melalui analisis kepuasan pelanggan dari ulasan aplikasi. Studi ini bertujuan untuk membandingkan efektivitas algoritma K-Nearest Neighbors (K-NN) dan Naive Bayes dalam menilai tingkat kepuasan pengguna aplikasi Shopee sebagai komponen tata kelola teknologi informasi. Data penelitian mencakup 2000 sampel ulasan pengguna Shopee yang diambil dari Google Play Store dan App Store, dengan klasifikasi penilaian 5 kategori yaitu sangat puas, puas, cukup puas, kurang puas dan buruk pada konten teks. Proses pra-pemrosesan data melibatkan pembersihan teks (menghilangkan kata penghubung, tanda baca), ekstraksi ciri menggunakan TF-IDF, serta pembagian dataset menjadi 80% pelatihan dan 20% pengujian. Hasil analisis mengungkapkan perbedaan yang signifikan antara kedua algoritma. K-NN mencapai akurasi 58,50% dengan parameter *K=5*, sementara Naive Bayes menunjukkan performa lebih unggul dengan akurasi 100%. Rendahnya akurasi K-NN diduga berasal dari kepekaan algoritma terhadap ketidakseimbangan data dan gangguan pada fitur teks, sedangkan Naive Bayes, yang berbasis probabilitas, lebih mampu mengatasi karakteristik data yang jarang (sparse) dalam ulasan. Temuan ini menekankan pentingnya pemilihan algoritma yang sesuai dalam tata kelola TI untuk analisis kepuasan pengguna. Naive Bayes direkomendasikan sebagai pendekatan optimal untuk klasifikasi teks pada ulasan e-commerce, sedangkan K-NN perlu disempurnakan melalui teknik seperti normalisasi fitur atau penanganan ketidakseimbangan kelas. Studi ini juga mengidentifikasi perlunya integrasi model adaptif, seperti deep learning, untuk meningkatkan akurasi dalam skenario yang lebih kompleks. Untuk penelitian mendatang, perluasan cakupan data atau penerapan analisis multibahasa dapat menjadi langkah strategis guna meningkatkan generalisasi hasil.
Â
Kata kunci: K-NN, Naive Bayes, E-commerce, Kepuasan Pengguna, Tata Kelola TI, Shopee.
Downloads
References
Alfaris, S. (2023). Komparasi Metode KNN dan Naive Bayes Terhadap Analisis Tingkat kepuasan Pengguna Aplikasi Shopee. The Indonesian Journal of Computer Science, 12(5).
Daryanti, P., & Shihab, M. S. (2019). Analisis Tingkat Kepuasan Pelanggan Dengan Menggunakan Konsep E-Servqual (Studi Kasus Pelanggan Shopee). Journal of Entrepreneurship, Management and Industry (JEMI), 2(3), 120-127.
Hasan Putra, P., Syahputra Novelan, M., & Rizki, M. (2022). ANALYSIS K-NEAREST NEIGHBOR METHOD IN CLASSIFICATION OF VEGETABLE QUALITY BASED ON COLOR. In Journal of Applied Engineering and Technological Science (Vol. 3, Issue 2).
Hidayatuloh, S., & Aziati, Y. (2020). Analisis pengaruh user experience terhadap kepuasan pengguna mobile application e-commerce shopee menggunakan model delone & mclean. Jurnal ilmiah teknik informatika (TEKINFO), 21(1), 73-83.
Haekal, B. V., Ernawati, I., & Chamidah, N. (2021). Klasifikasi Kepuasan Pengguna Layanan Aplikasi Shopee Menggunakan Metode Decision Tree C4. 5. Informatik: Jurnal Ilmu Komputer, 17(3), 188-196.
Huda, N., Habrizons, F., Satriawan, A., Iranda, M., & Pramuda, T. (2023). Analisis Usability Testing Menggunakan Metode SUS (System Usability Scale) Terhadap Kepuasan Pengguna Aplikasi Shopee. Jurnal Sistem Informasi dan Sistem Komputer, 8(2), 208-220.
Li, F. (2023). Analisis Kepuasan Pengguna Terhadap User Interface Aplikasi E-Commerce Shopee Menggunakan Metode EUCS di Jakarta Barat.
Margaretha, F. (2017). Analisis Hubungan Antara Motif Dengan Tingkat Kepuasan Pengguna Aplikasi Shopee Sebagai Media Berbelanja Online PAD SHOPEEHOLIC Di Kota Samarinda. EJournal Ilmu Komunikasi, 5(4), 26-40.
Muslim, S. N. S., Nurdiyansyah, F., & Rahman, A. Y. (2024). PERBANDINGAN ALGORITMA NAIVE BAYES DAN KNN DALAM ANALISIS TINGKAT KEPUASAN ULASAN PENGGUNA APLIKASI CAPCUT. Jurnal Informatika dan Teknik Elektro Terapan, 12(3S1).
N. Tri Romadloni, etc. Ilmu Komputer STMIK Nusa Mandiri Jakarta, “Perbandingan Metode Naive Bayes, Knn Dan Decision Tree Terhadap Analisis Tingkat kepuasan Transportasi Krl Commuter Line,†J. IKRA-ITH Inform., vol. 3, no. 2, pp. 1–9
Novelan, M. S., Efendi, S., Sihombing, P., & Mawengkang, H. (2023). VEHICLE ROUTING PROBLEM OPTIMIZATION WITH MACHINE LEARNING IN IMBALANCED CLASSIFICATION VEHICLE ROUTE DATA. Eastern-European Journal of Enterprise Technologies, 5(3(125)), 49–56. https://doi.org/10.15587/1729-4061.2023.288280
Sabila, A. R., & Kusumaningrum, L. (2020). Analisis kualitas layanan e-commerce SHOPEE dalam meningkatkan kepercayaan dan kepuasan pelanggan (studi kasus: pelanggan shopee di kota tangerang 2020). JI-Tech, 72-80.
Salim, A., & Alfando, S. (2024). Analisis Tingkat Kepuasan Pelanggan Menggunakan Shopee Paylater. Jurnal Mahasiswa Eka Prasetya, 1(1), 21-32.
Saidani, B., Lusiana, L. M., & Aditya, S. (2019). Analisis pengaruh kualitas website dan kepercayaan terhadap kepuasan pelanggan dalam membentuk minat pembelian ulang pada pelanggan shopee. Jurnal Riset Manajemen Sains Indonesia, 10(2).
