如何在Python中分割一個句子？

Question

我需要隔離Python3中的一個長自然文本的每個單詞。

什麼是更有效的方法來做到這一點？

Answer 1

如果您的文本已經分裂成句子，只需使用

tokens = nltk.word_tokenize(sentence) 

（請參閱從NLTKtokenization）。

如果您需要先按句子拆分，請看this part（有代碼示例）。