Postingan

TUTORIAL TEXT PREPROSESSING DENGAN PYTHON

  Teks Preprosessing atau  clean data INDAH MASULA NUR ANNISA 171080200194 LANGKAH : 1 Mengimport Library yang sudah di install import pandas as pd import numpy as np import nltk  import string import re LANGKAH : 2 Memasukkan DataSet yang sudah dimiliki def load_data():     data = pd.read_excel('dataku.xlsx')     return data LANGKAH :3 tweet_df = load_data () tweet_df . head () LANGKAH : 4 df = pd . DataFrame ( tweet_df [[ 'id_str' , 'text' ]]) #ubah dataframe sesuai column kalian LANGKAH 5 def remove_pattern ( input_txt , pattern ): r = re . findall ( pattern , input_txt ) for i in r : input_txt = re . sub ( i , '' , input_txt ) return input_txt df [ 'remove_user' ] = np . vectorize ( remove_pattern )( df [ 'text' ], "@[\w]*" ) LANGKAH : 6 def remove ( tweet ): tweet = re . sub ( '[0-9]+' , '' , tweet ) tweet = re . sub ( r'\$\w*' , '' ,...