편집 기록

val['Riviews'] = val['Riviews'].str.replace("[^ㄱ-ㅎㅏ-ㅣ가-힣 ]","")
val['Riviews'].replace('', np.nan, inplace=True)
val.head()

from konlpy.tag import Okt
okt = Okt()

불용어를 여기서 뽑아내야하는데, df안 리뷰는 Riviews인데 이 안에서 불용어를 찾아 제거 하고 싶어요

train['tokenized'] = train['Riviews'].apply(okt.morphs)
train['tokenized'] = train['tokenized'].apply(lambda x: [item for item in x if item not in stopwords])

val['Riviews'] = val['Riviews'].str.replace("[^{ㄱ-ㅎㅏ-ㅣ가-힣} ]","") val['Riviews'].replace('', np.nan, inplace=True) val.head()

from konlpy.tag import Okt okt = Okt()

불용어를 여기서 뽑아내야하는데... df안 리뷰는 Riviews인데 이 안에서 불용어를 찾아 제거 하고 싶어요

train['tokenized'] = train['Riviews'].apply(okt.morphs) train['tokenized'] = train['tokenized'].apply(lambda x: [item for item in x if item not in stopwords])