Preprocessing Data
Status Preprocessing per Batch
๐ Lihat Hasil Pre-Processing| Nama Batch | Total Data | Sudah Diproses | Progress | Aksi |
|---|---|---|---|---|
| Data MBG | 6167 | 5812 | 100% | Selesai |
Tahapan Preprocessing yang Dijalankan
Sistem menjalankan 5 tahap: case folding → cleaning → normalisasi →
tokenizing → stopword removal.
• Case Folding: Ubah seluruh teks menjadi huruf kecil.
• Cleaning: Hapus URL/www, mention, hashtag, angka, tanda baca, emoji, dan kurangi huruf berulang berlebihan ("bagusss"โ"baguss").
• Normalisasi: Ubah kata tidak baku/singkatan menjadi kata baku menggunakan kamus normalisasi.
• Tokenizing: Pecah kalimat menjadi kumpulan kata (token).
• Stopword Removal: Hapus kata umum yang tidak bermakna sentimen (dan, yang, di, dsb).