eng sent split (1) 썸네일형 리스트형 Sentence Tokenized English 영어로 된 문장은 아래와 같이 NLTK 라이브러리를 이용하면 Tokenize 할 수 있다. from nltk.tokenize import word_tokenize sentence = "this is my iphone(6s)" print("입력 :"+sentence) tokens = word_tokenize(sentence) print("배열로 나눈 결과 :" + str(tokens)) nltkTokenizedSentence = (' '.join(str(e) for e in tokens)) print("공백으로 합친 결과 :" +nltkTokenizedSentence) print("\n------------------------------------------------\n") from nltk.token.. 이전 1 다음
