Hasil Pre-Processing

🧩 Alur Preprocessing

Dataset batch "Data MBG" dipilih. Berikut hasil setiap tahapan preprocessing per baris data.

Teks Asli→ Cleaning→ Case Folding→ Normalisasi (kamus)→ Tokenisasi→ Stopword Removal→ TF-IDF→ Random Forest / KNN

Preprocessing diimplementasikan native di PHP (tanpa dependency eksternal):

• Cleaning: hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
• Case Folding: ubah seluruh teks menjadi huruf kecil.
• Normalisasi: kamus kata tidak baku/singkatan (gkβ†’tidak, ygβ†’yang, dst.) dari tabel kamus_normalisasi.
• Stopword Removal: daftar stopword Bahasa Indonesia (StopwordList.php).
• TF-IDF β†’ RF / KNN: ekstraksi fitur lalu klasifikasi (menu Training Model).

Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.

1403 dari 1403 baris berhasil diproses β€” siap download.

Teks Asli Case Folding Cleaning Normalisasi Tokenisasi Stopword Hasil Akhir Label
saya orang malaysia😊 saya orang malaysia😊 saya orang malaysia saya orang malaysia saya orang malaysia orang malaysia orang malaysia netral
Yah, liat aja yang SBP... Kalau di Sarawak ya gratis yah, liat aja yang sbp... kalau di sarawak ya gratis yah liat aja yang sbp kalau di sarawak ya gratis ya lihat saja yang sbp kalau di sarawak ya gratis ya lihat saja yang sbp kalau di sarawak ya gratis lihat sbp kalau sarawak gratis lihat sbp kalau sarawak gratis positif
dulu masa skolah aku cuma tunggu susu je! πŸ˜‚πŸŽ‰β€ dulu masa skolah aku cuma tunggu susu je! πŸ˜‚πŸŽ‰β€ dulu masa skolah aku cuma tunggu susu je dulu masa sekolah aku cuma tunggu susu je dulu masa sekolah aku cuma tunggu susu je dulu masa sekolah aku cuma tunggu susu je dulu masa sekolah aku cuma tunggu susu je negatif
Itu petingnya pendidikan itu petingnya pendidikan itu petingnya pendidikan itu petingnya pendidikan itu petingnya pendidikan petingnya pendidikan petingnya pendidikan netral
Hidup RMT hidup rmt hidup rmt hidup rmt hidup rmt hidup rmt hidup rmt negatif
Ya waktu tahun enam dah begitu ya waktu tahun enam dah begitu ya waktu tahun enam dah begitu ya waktu tahun enam sudah begitu ya waktu tahun enam sudah begitu waktu tahun enam waktu tahun enam netral
Rindu rmt 2000-2006😊 terima kasih RMT rindu rmt 2000-2006😊 terima kasih rmt rindu rmt terima kasih rmt rindu rmt terima kasih rmt rindu rmt terima kasih rmt rindu rmt terima kasih rmt rindu rmt terima kasih rmt negatif
Syukur lahir malaysia bukan di indo..sengsaraa ooo hdup di indoπŸ˜‚πŸ˜‚ syukur lahir malaysia bukan di indo..sengsaraa ooo hdup di indoπŸ˜‚πŸ˜‚ syukur lahir malaysia bukan di indosengsaraa oo hdup di indo syukur lahir malaysia bukan di indosengsaraa oo hidup di indonesia syukur lahir malaysia bukan di indosengsaraa oo hidup di indonesia syukur lahir malaysia bukan indosengsaraa oo hidup indonesia syukur lahir malaysia bukan indosengsaraa oo hidup indonesia netral
Aku tak pernah la dapat RMT tu tpi pernah la ganti kawan... Nasi lemak + susu... aku tak pernah la dapat rmt tu tpi pernah la ganti kawan... nasi lemak + susu coklat tu pergh mables... aku tak pernah la dapat rmt tu tpi pernah la ganti kawan nasi lemak susu coklat tu pergh mables aku tak pernah lah dapat rmt itu tapi pernah lah ganti kawan nasi lemak susu coklat itu pergh mables aku tak pernah lah dapat rmt itu tapi pernah lah ganti kawan nasi lemak susu coklat itu pergh mables aku tak pernah rmt pernah ganti kawan nasi lemak susu coklat pergh mables aku tak pernah rmt pernah ganti kawan nasi lemak susu coklat pergh mables negatif
Aku pun dapat rmt menu paling sedap kari ngan ayam mask merah aku pun dapat rmt menu paling sedap kari ngan ayam mask merah aku pun dapat rmt menu paling sedap kari ngan ayam mask merah aku pun dapat rmt menu paling sedap kari ngan ayam mask merah aku pun dapat rmt menu paling sedap kari ngan ayam mask merah aku rmt menu paling sedap kari ngan ayam mask merah aku rmt menu paling sedap kari ngan ayam mask merah negatif