Python自然语言处理课程初学NLTK

NLTK是Python中一个功能强大的第三方库，在自然语言处理（NLP）领域具有广泛的应用价值。它能够轻松地完成多种自然语言处理任务，包括分词、词性标注、命名实体识别（NER）以及句法分析等。

一 nltk安装教程

首先确保Python已成功安装。接着在终端中输入命令：pip install nltk；安装完成后请运行import nltk随后执行nltk.download()这样可以获得一个NLTK Downloader（即NLTK下载器）。（具体安装过程可参考：http://www.pythontip.com/blog/post/10011/）

成功安装后，测试。输入下边的语句就可以：

     >>> fromnltk.corpusimportbrown     >>> brown.words()     ['The', 'Fulton', 'County', 'Grand', 'Jury', 'said', ...]

二 NLTK进行分词

使用的函数：

nltk.sent_tokenize(text) #对文本按照句子进行分割

nltk.word_tokenize(sent) #对句子进行分词

**

![](https://ad.itadn.com/c/weblog/blog-img/images/20