Hasil Pre-Processing
🧩 Alur Preprocessing (Sesuai Implementasi)
Dataset batch "Data Mentah MBG" dipilih. Berikut hasil setiap tahapan preprocessing per baris data.
Teks Asli→
Cleaning→
Case Folding→
Normalisasi (kamus)→
Tokenisasi→
Stopword Removal→
TF-IDF→
Random Forest / KNN
Preprocessing diimplementasikan native di PHP (tanpa dependency eksternal):
• Cleaning — hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
• Case Folding — ubah seluruh teks menjadi huruf kecil.
• Normalisasi — kamus kata tidak baku/singkatan (gk→tidak, yg→yang, dst.) dari tabel
• Stopword Removal — daftar stopword Bahasa Indonesia (
• TF-IDF → Random Forest / KNN — ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
• Cleaning — hapus URL, mention, hashtag, angka, tanda baca, dan karakter non-ASCII/emoji.
• Case Folding — ubah seluruh teks menjadi huruf kecil.
• Normalisasi — kamus kata tidak baku/singkatan (gk→tidak, yg→yang, dst.) dari tabel
kamus_normalisasi.• Stopword Removal — daftar stopword Bahasa Indonesia (
StopwordList.php).• TF-IDF → Random Forest / KNN — ekstraksi fitur lalu klasifikasi (menu Training Model).
Selanjutnya, data yang belum berlabel bisa diberi label otomatis di menu Pelabelan Data.
4519 dari 4519 baris berhasil diproses — siap download.
| Teks Asli | Case Folding | Cleaning | Normalisasi | Tokenisasi | Stopword | Hasil Akhir | Label |
|---|---|---|---|---|---|---|---|
| Kenapa mesti pake keju? | kenapa mesti pake keju? | kenapa mesti pake keju | kenapa mesti pakai keju | kenapa mesti pakai keju | mesti pakai keju | mesti pakai keju | negatif |
| Udah mbg d berhentikan aja stop y | udah mbg d berhentikan aja stop y | udah mbg d berhentikan aja stop y | sudah mbg di berhentikan saja stop ya | sudah mbg di berhentikan saja stop ya | mbg berhentikan stop | mbg berhentikan stop | negatif |
| Gulung aja mau TNI KEK MAU POLISI SIKAT MEREKA PENGKIANAT BANGSA TAK pantas d... | gulung aja mau tni kek mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung aja mau tni kek mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung saja mau tni kayak mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung saja mau tni kayak mau polisi sikat mereka pengkianat bangsa tak pantas di hormati | gulung mau tni mau polisi sikat pengkianat bangsa tak pantas hormati | gulung mau tni mau polisi sikat pengkianat bangsa tak pantas hormati | negatif |
| 😄😄😄 ini hasil pelatihan militer | 😄😄😄 ini hasil pelatihan militer | ini hasil pelatihan militer | ini hasil pelatihan militer | ini hasil pelatihan militer | hasil pelatihan militer | hasil pelatihan militer | positif |
| Alhamdulillah terima kasih Yaa Rabb 🤲 | alhamdulillah terima kasih yaa rabb 🤲 | alhamdulillah terima kasih yaa rabb | alhamdulillah terima kasih ya rabb | alhamdulillah terima kasih ya rabb | alhamdulillah terima kasih rabb | alhamdulillah terima kasih rabb | positif |
| Indonesia di penuhi para MALING,siapapun mereka,tetap di proses hukum,dasar r... | indonesia di penuhi para maling,siapapun mereka,tetap di proses hukum,dasar rakus. | indonesia di penuhi para malingsiapapun merekatetap di proses hukumdasar rakus | indonesia di penuhi para malingsiapapun merekatetap di proses hukumdasar rakus | indonesia di penuhi para malingsiapapun merekatetap di proses hukumdasar rakus | indonesia penuhi malingsiapapun merekatetap proses hukumdasar rakus | indonesia penuhi malingsiapapun merekatetap proses hukumdasar rakus | positif |
| Jgn jgn salah satu materi retret ada itu nya..? | jgn jgn salah satu materi retret ada itu nya..? | jgn jgn salah satu materi retret ada itu nya | jangan jangan salah satu materi retret ada itu ya | jangan jangan salah satu materi retret ada itu ya | jangan jangan salah satu materi retret | jangan jangan salah satu materi retret | negatif |
| STOP/TUTUP MBG yg paling tepat, kalo mau utk daerah 3 T dan yg membutuhkan | stop/tutup mbg yg paling tepat, kalo mau utk daerah 3 t dan yg membutuhkan | stoptutup mbg yg paling tepat kalo mau utk daerah t dan yg membutuhkan | stoptutup mbg yang paling tepat kalau mau untuk daerah t dan yang membutuhkan | stoptutup mbg yang paling tepat kalau mau untuk daerah t dan yang membutuhkan | stoptutup mbg paling tepat kalau mau daerah t membutuhkan | stoptutup mbg paling tepat kalau mau daerah t membutuhkan | negatif |
| Apakah berani hukum qta???? | apakah berani hukum qta???? | apakah berani hukum qta | apakah berani hukum kita | apakah berani hukum kita | berani hukum | berani hukum | negatif |
| Korupsi di Indonesia sudah ada sejak Jaman belanja , kalo tidak ada UUD peram... | korupsi di indonesia sudah ada sejak jaman belanja , kalo tidak ada uud perampasat aset atau hukum mati makan akan terus²n mengalir , setidaknya kalo uud perampasan aset di sah kan mengurangi walapun tidak bisa bikin berenti korupsi | korupsi di indonesia sudah ada sejak jaman belanja kalo tidak ada uud perampasat aset atau hukum mati makan akan terus²n mengalir setidaknya kalo uud perampasan aset di sah kan mengurangi walapun tidak bisa bikin berenti korupsi | korupsi di indonesia sudah ada sejak jaman belanja kalau tidak ada uud perampasat aset atau hukum mati makan akan terus²n mengalir setidaknya kalau uud perampasan aset di sah kan mengurangi walapun tidak bisa bikin berenti korupsi | korupsi di indonesia sudah ada sejak jaman belanja kalau tidak ada uud perampasat aset atau hukum mati makan akan terus²n mengalir setidaknya kalau uud perampasan aset di sah kan mengurangi walapun tidak bisa bikin berenti korupsi | korupsi indonesia sejak jaman belanja kalau uud perampasat aset hukum mati makan terus²n mengalir kalau uud perampasan aset sah kan mengurangi walapun bikin berenti korupsi | korupsi indonesia sejak jaman belanja kalau uud perampasat aset hukum mati makan terus²n mengalir kalau uud perampasan aset sah kan mengurangi walapun bikin berenti korupsi | negatif |